显示控制设备、显示控制方法和显示控制程序的利记博彩app

专利名称：显示控制设备、显示控制方法和显示控制程序的利记博彩app
技术领域：
本发明涉及显示控制设备、显示控制方法和显示控制程序，它们能够 适当地应用于能够以静止图像的形式拍摄对象(在下文中，以静止图像的 形式拍摄对象也可以被称为"静止图像拍摄")并且还能够以运动图像的 形式拍摄对象(在下文中，以运动图像的形式拍摄对象也可以被称为"运动图像拍摄")的数字静态相机(digital still camera)。
背景技术：
对于现有技术来说，当数字静态相机对对象执行静止图像拍摄时，作 为拍摄结果获得的静止图像被生成并记录。另外，当数字静态相机对对象 执行静止图像拍摄时，由于稀疏静止图像的像素并且縮小大小而获得的静 止图像(在下文中也称为"静止图像縮略图")被生成并记录。另外，对于现有技术来说，当数字静态相机对对象执行运动图像拍摄 时，作为拍摄结果获得的由时间上连续的多个单位图像(unit image)(场 图像或帧图像)形成的运动图像被生成并记录。另外，当数字静态相机对 对象执行静止图像拍摄时，表示运动图像的单位图像被从运动图像中提取 出来，并且由于稀疏单位图像的像素并且縮小大小而获得的静止图像(在 下文中也称为"单位图像縮略图")被生成并记录。对于现有技术来说，数字静态相机在显示单元的显示屏幕上显示布置 成矩阵形式的多个静止图像縮略图和多个单位图像縮略图的列表。从而， 数字静态相机使得用户能够通过显示单元的显示屏幕上显示的静止图像縮 略图和单位图像縮略图来搜索将要被播放的静止图像和运动图像(例如， 日本未实审专利申请公布No. 2006-295236 (第8页和第11页，图 10))。发明内容现在，根据现有技术的一些数字静态相机除了执行单独地拍摄对象的 静止图像和运动图像的操作之外，还执行根据单次快门操作以时分方式拍 摄静止图像和运动图像的操作。更具体而言，在拍摄静止图像之后，运动 图像被自动拍摄。但是，即使对于这种配置的数字静态相机来说，多个静 止图像縮略图和多个单位图像縮略图的列表也仍像上述根据现有技术的数 字静态相机中那样以布置成矩阵的形式被显示在显示单元的显示屏幕上。也就是说，对于这种配置的数字静态相机来说，没有考虑在显示上将 通过时分方式的静止图像拍摄和运动图像拍摄生成的有关静止图像和运动 图像的静止图像縮略图和单位图像縮略图与其他静止图像縮略图和单位图 像縮略图区分开来。已经了解到对提供这样一种显示控制设备、显示控制方法和显示控制 程序的需求，该显示控制设备、显示控制方法和显示控制程序使得相关联 的静止图像和运动图像能够很容易被区分。根据本发明实施例的一种显示控制设备，包括合成图像生成单元， 该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成 合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静 止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽 高比的单位图像形成的运动图像的单位图像的一部分之上；以及显示控制 单元，该显示控制单元被配置为在显示单元的显示屏幕上显示该合成图 像。利用此配置，充当合成图像的相关联的静止图像和运动图像的静止图 像和运动图像的单位图像可以被显示以便与其他静止图像和运动图像的单 位图像区别开来。利用上述配置，可以实现一种显示控制设备、显示控制方法和显示控 制程序，其中通过对单位图像和静止图像进行合成来生成合成图像，以使 得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的 静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像 形成的运动图像的单位图像的一部分之上，并且在显示单元的显示屏幕上200810167117.3说明书第3/46页显示该合成图像，从而充当合成图像的相关联的静止图像和运动图像的静 止图像和运动图像的单位图像可以被显示以便与其他静止图像和运动图像 的单位图像区别开来，因此相关联的静止图像和运动图像可以很容易被辨 别。


图1A至1C是图示出根据本发明的数字静态相机的外部视图的略图； 图2是图示出根据本发明实施例的数字静态相机的电路配置的一种布 置的框图；图3是用于描述主静止图像数据的生成的略图；图4是用于描述主运动图像数据的生成的略图；图5是图示出文件名的配置的略图；图6是用于描述縮略图的列表显示的略图；图7是图示出合成縮略图的配置的略图；图8是图示出主合成图像的配置的略图；图9是用于描述从主合成图像显示到主运动图像显示的切换(1)的 略图；图IO是用于描述对于主合成图像的叠加增强处理(1)的略图； 图ll是用于描述对于主合成图像的叠加增强处理(2)的略图； 图12是用于描述对于主合成图像的叠加增强处理(3)的略图； 图13是用于描述从主合成图像显示到主运动图像显示的切换(2)的 略图；图14是用于描述从主合成图像显示到主运动图像显示的切换G)的 略图；图15是用于描述从主合成图像显示到主运动图像显示的切换(4)的 略图；图16是用于描述从主合成图像显示到主运动图像显示的切换(5)的 略图；图17是图示出合成縮略图显示处理的过程的流程图；图18是图示出连续重放处理的过程的流程图；图19A至19C是用于描述根据另一个实施例的相关联的主静止图像和 主运动图像的主单位图像的显示的略图；图20是图示出根据另一实施例的主合成图像配置(1)的略图； 图21是图示出根据另一实施例的主合成图像配置(2)的略图； 图22是图示出根据另一实施例的主合成图像配置(3)的略图；图23是用于描述根据另一实施例的合成縮略图显示(1)的略图；图24是用于描述根据另一实施例的合成縮略图显示(2)的略图； 图25是图示出播放列表的配置的略图。
具体实施方式
将参考附图详细描述本发明的实施例。第一实施例 l.配置1-1数字静态相机的外部配置在图1A至1C中，标号l表示应用了本发明的数字静态相机，其整体 外部视图在这里示出。数字静态相机1具有由盒状外壳形成的主单元2。主单元2的上面2A上设置有快门按钮3，并且拍摄透镜4被定位在主 单元2的正面2B。从而，主单元2被配置成使得拍摄透镜4能够连同正面 2B指向对象，并且在这种快门按钮3在这种状态中被按下的情况下，对象 的静止图像拍摄和运动图像拍摄可被执行。另外，在主单元2的正面2B钻出了孔2BX，以便经由孔2BX通过存 放在主单元2内的麦克风来收集外部声音。这使得在对对象进行运动图像 拍摄时，能够经由孔2BX通过内部麦克风收集外部声音。另外，在主单元2的背面2C上，部署了由液晶显示屏或有机EL (电 致发光)显示屏配置成的显示单元5，其中暴露出方形显示屏幕5A。显示 单元5被形成为使得显示屏幕5A具有例如16:9的宽高比(也称为"屏幕 宽高比")。应当注意，显示屏幕5A的屏幕宽高比是显示屏幕5A在屏幕横向方向(即水平方向)的长度与纵向方向(即垂直方向)的长度之间的 比率。另外，在主单元2的背面2C上，设置了各种操作按钮6以用于输入 命令，以便执行各种设定和显示等等。因此，基于通过对对象的静止图像 拍摄生成的静止图像数据，可以根据用户对操作按钮6的操作在显示单元 5的显示屏幕5A上显示静止图像。另外，基于通过对对象的静止图像拍摄 生成的运动图像数据，可以根据用户对操作按钮6的操作在显示单元5的 显示屏幕5A上显示运动图像。此外，主单元2的侧面2D上设置有介质插槽7，其中安装了内置有半 导体存储器的小型扁平矩形记录介质。从而，通过对对象的静止图像拍摄 生成的静止图像数据和通过对对象的运动图像拍摄生成的运动图像数据可 以被记录在记录介质中。在主单元2的侧面2D上还设置有外部端子8，用于与诸如外部电视接 收器或个人计算机之类的外部设备(图中未示出)相连接。从而，在经由 外部端子8连接到外部设备的情况下，通过播放由对对象的静止图像拍摄 生成的静止图像数据而获得的静止图像以及通过播放由对对象的运动图像 拍摄生成的运动图像数据而获得的运动图像，可以根据用户对操作按钮6 的操作而被输出到外部设备。从而，基于静止图像数据的静止图像和基于 运动图像数据的运动图像也可以被显示在外部设备上。1-2数字静态相机的电路配置接下来，将参考图2描述数字静态相机1的电路配置。数字静态相机 1除了 CPU (中央处理单元)10外，还具有各种电路块，例如具有电池的 电源块11。CPU 10依靠从电源块11提供来的功率工作，并且还使得电源块11向 每个电路块提供电功率，使得电路块适当地工作。另外，CPU10经由总线 13将存储在ROM (只读存储器)12中的诸如显示控制程序之类的程序读 出到RAM (随机访问存储器)14。 CPU IO根据加载到RAM 14的各种程 序控制整个数字静态相机1，并且根据用户操作执行从由快门按钮3和操作按钮6构成的操作单元15输入的各种类型的命令。从而，当处于静止 图像拍摄模式中时，CPU IO通过向相机块16发送控制信号来控制相机块 16。注意，相机块16具有上述拍摄透镜4和相机透镜单元16A，其中诸如 光圈之类的用于调节曝光的光学元件按顺序被部署在光轴上。相机块16 还具有部署在相机透镜单元16A之后的成像器件16B，例如CCD (电荷耦 合器件)图像传感器或CMOS (互补金属氧化物半导体)图像传感器。成像器件16B是利用具有例如4:3的宽高比的方形感光面形成的(在 下文中，这可以被称为"感光面宽高比")。注意，感光面的感光面宽高 比是感光面的水平和垂直方向的比率。相机块16还设置有信号处理单元16C、 A/D转换器16D和相机控制 器16E。相机控制器16E根据从CPU 10提供来的控制信号执行对相机透 镜单元16A的驱动控制，以便调节对象的对焦、曝光等等。相机控制器 16E还根据从CPU 10来的控制信号对成像器件16B、信号处理单元16C 和A/D转换器16D进行控制。从而，成像器件16B在感光面处接收来自对象的、经过了相机透镜单 元16A的成像光Ll。从而，成像器件16B顺序地执行在感光面处接收的 成像光Ll的光电转换并且根据成像光Ll生成模拟光电转换信号，并顺序 地输出所生成的光电转换信号到信号处理单元16C。每次信号处理单元16C接收到以这种方式顺序生成的图像信号时， 信号处理单元16C就利用A/D转换器16D执行A/D转换处理，并且将其 作为数字图像数据输出到缓冲存储器21以便其被临时存储。现在，由相机块16生成的图像数据具有与成像器件16B的感光面的 像素数目(在下文中，可以称为"有效像素")相同的像素数目，并且还 具有与感光面宽高比相同的宽高比。此时，图像修改单元22从缓冲存储器21顺序读出临时记录的图像数 据，并且使得已被读出的图像数据经历根据屏幕宽高比的修剪处理(或者 剪切处理)。图像修改单元22还执行图像縮小处理，其中像素根据显示 屏幕5A的分辨率(即，显示屏幕5A的每单位长度的像素数目)被稀疏。因此，图像修改单元22生成由具有例如16:9的宽高比并且在时间上连续 的多个单位图像构成的成像图像的图像数据。应当注意，单位图像的16:9的宽高比是单位图像在图像的水平方向 (在下文中也称为"图像横向方向")上的长度与在图像的垂直方向(在 下文中也称为"图像纵向方向")上的长度之间的比率。图像修改单元22以这种方式生成成像图像数据，并且同时将成像图 像数据发送到CPU 10。此时，CPU 10利用D/A转换器23执行对图像修 改单元22提供的成像图像数据的D/A转换处理，并且作为模拟成像图像 信号输出到显示控制器24。显示控制器24将从CPU 10提供来的成像图像信号发送到显示单元 5，从而使得成像图像基于成像图像信号被显示在显示单元5的显示屏幕 5A上。从而，CPU 10使得用户能够通过显示单元5的显示屏幕5A上显 示的成像图像来确认对象的成像状态。在用户在这种状态中按下快门按钮3使得静止图像拍摄命令被从操作 单元15输入到CPU 10的情况下，在输入时刻在相机块16处生成并临时 存储在缓冲存储器21处的一组图像数据被取得，作为针对静止图像拍摄 的图像数据。图像修改单元22随后从缓冲存储器21读出针对静止图像拍摄的图像 数据，并且使得已被读出的该针对静止图像拍摄的图像数据经历根据为静 止图像拍摄预定的4:3宽高比的修剪处理(或剪切处理)。另外，图像修改单元22使得针对静止图像拍摄的图像数据经历图像 縮小处理，其中根据预先确定的静止图像的预定记录图像大小(在下文 中，也称为"静止图像大小")来稀疏像素。注意，静止图像大小是按照 静止图像的图像水平方向上的像素数目和图像垂直方向上的像素数目来表 达的。从而，图像修改单元22基于针对静止图像拍摄的图像数据来生成 具有4:3的宽高比的用于要记录的静止图像的图像数据。注意，在下文 中，基于针对静止图像拍摄的图像数据生成的用于记录的静止图像的静止 图像数据将被称为"主静止图像数据"，并且基于此静止图像数据的静止 图像将被称为"主静止图像"。另外，在以下的描述中，为静止图像预定的4:3宽高比也将被称为 "静止图像宽高比"。注意，静止图像宽高比是静止图像的水平方向上的 长度(在下文中也称为"静止图像横向长度")与图像的垂直方向上的长 度(在下文中也称为"静止图像纵向长度")之间的比率。如图3所示，作为具体示例，图像修改单元22从缓冲存储器21读出 具有4:3的宽高比的图像Gl的图像数据，作为针对静止图像拍摄的图像 数据。图像修改单元22擦除图像Gl的从图像水平方向上的右侧延伸到左 侧的、图像垂直方向上的顶部的带状部分Gll (在下文中，也称为"上部 带状部分")，并且还擦除图像Gl的从图像水平方向上的右侧延伸到左 侧的、图像垂直方向上的底部的带状部分G12 (在下文中，也称为"下部 带状部分")。从而，图像修改单元22基于针对静止图像拍摄的图像数据，从具有 4:3的宽高比的图像Gl生成具有16:9的宽高比的图像G2。另外，图像修 改单元22擦除图像G2的从图像垂直方向上的顶部延伸到底部的、图像水 平方向上的右侧的带状部分G21 (在下文中，也称为"右侧带状部 分")，并且还擦除图像G2的从图像垂直方向上的顶部延伸到底部的、 图像水平方向上的左侧的带状部分G22 (在下文中，也称为"左侧带状部 分")。从而，图像修改单元22从具有16:9的宽高比的图像G2生成静止图像 G3。图像修改单元22随后根据静止图像大小在不改变静止图像宽高比的 情况下稀疏静止图像G3的像素(即，执行图像縮小处理)，从而生成主 静止图像MG1的主静止图像数据。图像修改单元22在以这种方式生成了主静止图像数据后，将所生成 的主静止图像数据发送到缓冲存储器21以便临时记录。此时，静止图像 处理单元25从缓冲存储器21读取临时记录的主静止图像数据。静止图像处理单元25利用静止图像压縮编码方法执行对主静止图像 数据的压縮处理，以生成压縮静止图像数据，并且将所生成的压縮静止图 像数据发送到缓冲存储器21以便临时记录。另外，CPU 10从缓冲存储器21读出压縮静止图像数据，并且将已被读出的压縮静止图像数据经由介质接口 26发送到记录介质27。从而，记 录介质27将压縮静止图像数据记录在记录介质27中，并且以这种方式用 户可以执行对对象的静止图像拍摄。另外，CPU10被布置成使得在运动图像拍摄模式中，基于成像图像信 号的成像图像以与上述静止图像拍摄模式中相同的方式被显示在显示单元 5的显示屏幕5A上，以便用户能够确认对象的成像状态。在用户在这种状态中按下快门按钮3使得运动图像拍摄命令被从操作 单元15输入到CPU IO的情况下，从输入时刻直到经过预定量的时间为止 的时段，或者从输入时刻直到用户按下快门按钮3使得运动图像拍摄结束 命令被从操作单元15输入为止的时段，被作为运动图像拍摄时段。CPU 10取得在运动图像拍摄时段期间在相机块16处顺序生成并临时 记录在缓冲存储器21中的多组图像数据，作为针对运动图像拍摄的图像 数据。此时，图像修改单元22从缓冲存储器21读出针对运动图像拍摄的 多组图像数据，并且使得已被读出的该针对运动图像拍摄的图像数据经历 根据为运动图像拍摄预定的16:9宽高比的修剪处理(或剪切处理)。另外，图像修改单元22使得针对运动图像拍摄的多组图像数据经历 图像缩小处理，其中根据预先确定的运动图像的预定记录图像大小(在下 文中，也称为"运动图像大小")来稀疏像素。注意，运动图像大小是按 照构成运动图像的单位图像(即场图像或帧图像)的图像水平方向上的像 素数目和图像垂直方向上的像素数目来表达的。从而，图像修改单元22 基于针对运动图像拍摄的图像数据来生成具有16:9的宽高比的用于要通过 多个时间上连续的单位图像来记录的运动图像的图像数据。注意，在下文中，基于针对运动图像拍摄的多组图像数据生成的用于 记录的运动图像的运动图像数据将被称为"主运动图像数据"，并且基于 此运动图像数据的运动图像将被称为"主运动图像"。另外，在下文中， 构成主运动图像的多个单位图像也可以各自被称为"主单位图像"，并且 主单位图像的单位图像数据可以被称为"主单位图像数据"。另外，在以下的描述中，为运动图像预定的16:9宽高比也可以被称为 "运动图像宽高比"。注意，运动图像宽高比是构成运动图像的单位图像的水平方向上的长度(在下文中也称为"运动图像横向长度")与图像的 垂直方向上的长度(在下文中也称为"运动图像纵向长度")之间的比 率。如图4所示，作为具体示例，图像修改单元22从缓冲存储器21读出 具有4:3的宽高比(即感光面宽高比)的多个时间上连续的图像Gl的图 像数据，作为针对运动图像拍摄的图像数据。图像修改单元22从多个图 像Gl的顶部和底部擦除上部带状部分Gll和下部带状部分G12。从而， 图像修改单元22从具有4:3的宽高比的图像Gl生成具有运动图像宽高比 的多个单位图像G2。然后，图像修改单元22通过根据运动图像大小在不改变运动图像宽 高比的情况下稀疏多个单位图像G2中的每一个的像素，来从多个单位图 像G2生成多个主单位图像MV1至MVN (即，执行图像縮小处理)。图像修改单元22在以这种方式生成了主运动图像数据后，将所生成 的主运动图像数据发送到缓冲存储器21以便临时记录。此时，运动图像 处理单元28从缓冲存储器21读取临时记录的主运动图像数据，利用运动 图像压縮编码方法执行对主运动图像数据的压縮处理以生成压縮运动图像 数据，并且将所生成的压縮运动图像数据发送到缓冲存储器21以便临时 记录。另外，CPU 10在运动图像拍摄时段期间利用麦克风29收集环境声音 并生成模拟音频信号，并且还利用A/D转换器30执行音频信号的A/D转 换，以便作为音频数据发出到音频处理单元31。音频处理单元31利用音 频压縮编码方法执行对经由A/D转换器30从麦克风29提供来的音频数据 的压縮编码以生成压縮音频数据，并将所生成的压縮音频数据发送到缓冲 存储器21以便临时记录。CPU 10将临时记录的压縮运动图像数据和压縮音频从记录有它们的缓 冲存储器21中读出，并且执行时分复用，从而生成运动图像流。CPU 10 还经由介质接口 26将运动图像流发送到记录介质27,从而将运动图像流 记录在记录介质27中。从而，CPU 10使得用户能够执行对对象的运动图 像拍摄。注意，CPU IO并不限于只是对对象的静止图像拍摄或者对对象的运动 图像拍摄，静止图像拍摄和运动图像拍摄可以根据对快门按钮3的单次快 门操作而以时分方式执行。在以时分方式执行对对象的静止图像拍摄和运动图像拍摄的时分拍摄 模式中，基于成像图像信号的成像图像以与上述静止图像拍摄模式中相同 的方式被显示在显示单元5的显示屏幕5A上，以便用户能够确认对象的 成像状态。在用户在这种状态中按下快门按钮3使得时分图像拍摄命令被从操作 单元15输入到CPU IO的情况下，在输入时刻对对象的静止图像拍摄被执 行，紧接这之后，运动图像拍摄也被自动执行。在这种情况下，CPU 10取得在时分图像拍摄命令输入时刻在相机块 16处生成并临时存储在缓冲存储器21处的一组图像数据，作为针对时分 拍摄的图像数据。从而，以与上述静止图像拍摄模式中相同的方式，CPU 10基于针对静止图像拍摄的图像数据生成压縮静止图像数据，并且将其记 录在记录介质27中。另外，当在相机块16处生成针对静止图像拍摄的图像数据后，在下 一图像数据被生成时，从该下一图像数据被生成的时刻直到经过预定量的 时间为止的时段，或者从该下一图像数据被生成的时刻直到用户按下快门 按钮3使得时分图像拍摄结束命令被从操作单元15输入为止的时段，被 作为运动图像拍摄时段。CPU 10取得在运动图像拍摄时段期间在相机块16处顺序生成并临时 记录在缓冲存储器21中的多组图像数据，作为针对运动图像拍摄的图像 数据。注意，针对运动图像拍摄的多组图像数据是从相机块16在针对静 止图像拍摄的图像数据之后生成的图像数据到在运动图像拍摄时段结束时 刻生成的图像数据的多组图像数据。从而，以与上述运动图像拍摄模式中相同的方式，CPU10基于多组图 像数据生成运动图像流，并将其记录在记录介质27中。因此，CPU 10可 以实现对对象的时分静止图像拍摄和运动图像拍摄。现在，在执行对对象的静止图像拍摄并生成压縮静止图像数据后，CPU 10将压縮图像数据作为文件记录在记录介质27中。另外，在执行对 对象的运动图像拍摄并生成运动图像流后，CPU IO将图像数据文件作为文 件记录在记录介质27中。另外，CPU 10为形成为文件的压縮静止图像数 据(在下文中也称为"静止图像文件")和形成为文件的运动图像流(在 下文中也称为"运动图像文件")赋予唯一的文件名。从而，CPU10使得 能够按文件名来管理静止图像文件和运动图像文件。如图5所示，赋予静止图像文件和运动图像文件的文件名FNA是由 按该顺序连接的文件名主体FH以及之后的句点PR和后缀KC形成的。在 这种情况下，文件名主体FH存储用于辨别文件(即是静止图像文件还是 运动图像文件)的文件辨别信息FH1，以及用于为静止图像文件和运动图 像文件编号的序号FH2。文件名主体FH中的文件辨别信息FH1例如在静止图像文件的情况下 是文本串"IMG"，并且在运动图像文件的情况下是文本串"MOV"。另 外，后缀KC用于标识文件格式，例如在静止图像文件的情况下它可以是 文本串"JPG"，并且在运动图像文件的情况下它可以是文本串 "MPG"。因此，可以通过后缀KC和文件名主体FH中的文件辨别信息 FH1来检测被赋予文件名FNA的文件是静止图像文件还是运动图像文 件。现在，在仅执行对对象的静止图像拍摄并生成静止图像文件时(即， 在处于静止图像拍摄模式中时生成静止图像文件的情况下)，CPU10存储 此静止图像文件的文件名FNA中的唯一序号FH2，以免重复另一静止图 像文件或运动图像文件的序号。另外，在仅执行对对象的运动图像拍摄并生成运动图像文件时(即， 在处于运动图像拍摄模式中时生成运动图像文件的情况下)，CPU10存储 此运动图像文件的文件名FNA中的唯一序号FH2，以免重复另一运动图 像文件或静止图像文件的序号。另一方面，在以时分方式执行对对象的静止图像拍摄和运动图像拍摄 并生成静止图像文件和运动图像文件时(即，在处于时分拍摄模式中时生 成静止图像文件和运动图像文件的情况下)，CPU10存储静止图像文件的文件名FNJ和运动图像文件的文件名FNM中的单个唯一序号FH2，以免 重复其他运动图像文件或静止图像文件的序号。也就是说，在以时分方式 执行对对象的静止图像拍摄和运动图像拍摄并生成静止图像文件和运动图 像文件时，CPU 10存储静止图像文件和运动图像文件的文件名FNJ和 FNM中的同一序号FH2。从而，通过文件名FNJ和FNM中的同一序号FH2， CPU IO将通过以 时分方式执行对对象的静止图像拍摄和运动图像拍摄而生成的静止图像文 件和运动图像文件(即主静止图像数据和主运动图像数据)作为通过以时 分方式执行对单个对象的静止图像拍摄和运动图像拍摄生成的而关联起 来。另外，在根据对对象的静止图像拍摄生成主静止图像数据时，图像修 改单元22通过在不改变静止图像宽高比的情况下稀疏像素(即，縮小静 止图像大小)，来使主静止图像数据经历图像縮小处理。因此，图像修改 单元22基于主静止图像数据生成縮小的静止图像的静止图像数据(在下 文中，縮小的静止图像可以被称为"静止图像縮略图"，并且静止图像縮 略图的静止图像数据可以被称为"静止图像縮略图数据")。除了图像大小不同之外，静止图像縮略图基本上与縮小前的主静止图 像相同，并且示出了静止图像的内容。与縮小前的主静止图像相比，静止 图像縮略图被显示在显示屏幕5A的较小的区域上，因此可以与其他静止 图像縮略图等等一起被显示在显示屏幕5A上。从而，静止图像縮略图可 被用作用来搜索主静止图像数据的索引。在如上所述生成静止图像縮略图的静止图像縮略图数据后，图像修改 单元22将所生成的静止图像縮略图数据发送到缓冲存储器21以便临时记 录。在将压縮静止图像数据作为静止图像文件记录在记录介质27中时， CPU 10从缓冲存储器21读出相应的静止图像縮略图数据。CPU 10随后将 压縮静止图像数据与相应的静止图像縮略图数据一起经由介质接口 26发 送到记录介质27。因此，CPU 10以与静止图像文件相关联的方式将静止 图像縮略图数据记录在记录介质27中。另外，在根据对对象的运动图像拍摄生成主运动图像数据时，图像修改单元22从主运动图像数据中提取在时间上处于前端的单位图像的主单 位图像数据，作为表示主运动图像的内容的一个主单位图像的主单位图像 数据。注意，在以下的描述中，构成主运动图像的时间上连续的多个主单 位图像中在时间上处于前端的单位图像将被具体称为"前端(head)单位 图像"，并且此前端单位图像的主图像数据将被称为"前端单位图像数 据"。另外，图像修改单元22通过在不改变运动图像宽高比的情况下稀疏 像素(即，縮小运动图像大小)，来使前端单位图像数据经历图像縮小。 因此，图像修改单元22基于前端单位图像数据生成縮小的前端单位图像 的前端单位图像数据(在下文中，縮小的前端单位图像将被称为"单位图 像缩略图"，并且单位图像縮略图的前端单位图像数据可以被称为"单位 图像縮略图数据")。单位图像縮略图被形成为图像的垂直长度与静止图像縮略图的垂直长 度相同。另外，除了图像大小不同之外，单位图像縮略图基本上与縮小前 的前端单位图像相同。与縮小前的主静止图像相比，单位图像縮略图被显 示在显示屏幕5A的较小的区域上，因此可以与其他单位图像縮略图和静 止图像縮略图等等一起被显示在显示屏幕5A上。从而，单位图像縮略图 可被用作用来搜索主运动图像数据的索引。在如上所述生成单位图像縮略图的单位图像縮略图数据后，图像修改 单元22将所生成的单位图像縮略图数据发送到缓冲存储器21以便临时记 录。在将压縮运动图像数据作为运动图像文件记录在记录介质27中时， CPU 10从缓冲存储器21读出相应的单位图像縮略图数据。CPU 10随后将 运动图像流与相应的单位图像縮略图数据一起经由介质接口 26发送到记 录介质27。因此，CPU 10以与运动图像文件相关联的方式将单位图像縮 略图数据记录在记录介质27中。这样，当执行对对象的静止图像拍摄或运动图像拍摄时，CPU10将静 止图像縮略图数据和运动图像縮略图数据与主静止图像数据和主运动图像数据一起生成。应当注意，CPU10提供具有关联信息的静止图像縮略图数据，该关联信息存储有能够辨别数据类型(即，是静止图像縮略图数据还是单位图像縮略图数据)的辨别信息，以及与相应静止图像文件的文件名FNA (或 FNJ)内的序号FN2相同的序号。另外，CPU IO提供具有关联信息的单位 图像缩略图数据，该关联信息存储有能够辨别数据类型(即，是静止图像 縮略图数据还是单位图像縮略图数据)的辨别信息，以及与相应运动图像 文件的文件名FNA (或FNM)内的序号FN2相同的序号。注意，能够辨别是静止图像縮略图数据还是单位图像縮略图数据的辨 别信息是具有指示静止图像縮略图数据的值"0"或者指示单位图像縮略 图数据的值"1"的标志。这样，CPU IO通过关联信息将静止图像縮略图数据和单位图像縮略图 数据关联到静止图像文件和运动图像文件。另外，CPU 10通过关联信息 (即，通过关联信息中存储的同一序号)，来将通过以时分方式执行对对 象的静止图像拍摄和运动图像拍摄而生成的静止图像縮略图数据和单位图 像縮略图数据关联起来。现在，当处于重放模式中时，在外部设备未经由外部端子8连接到数 字静态相机1的情况下，CPU IO利用为数字静态相机1设置的显示单元5 显示主静止图像和主运动图像。另一方面，在外部设备经由外部端子8连 接到数字静态相机1的情况下，CPU IO利用为外部设备设置的显示单元显 示主静止图像和主运动图像。因此，下面将描述数字静态相机1的显示单 元5在重放模式中被用于显示主静止图像和主运动图像的情况，然后描述 外部设备的显示单元被用于显示主静止图像和主运动图像的情况。当处于重放模式中时，在处于数字静态相机1未连接到外部设备的状 态中时通过用户操作从操作单元15输入用于显示静止图像縮略图和单位 图像縮略图的列表的列表显示命令的情况下，静止图像縮略图数据和单位 图像縮略图数据经由介质接口 26被从记录介质27读出。CPU 10基于添加到静止图像縮略图数据和单位图像縮略图数据的关联 信息来检测相关联的静止图像縮略图数据和单位图像縮略图数据，并且合成相关联的静止图像縮略图数据和单位图像縮略图数据以便生成合成图像 数据(在下文中，可以被称为"合成縮略图数据")。除合成縮略图数据 外，CPU IO还利用其他不相关联的静止图像縮略图数据和单位图像縮略图数据生成列表显示数据。CPU 10随后使列表显示数据经历D/A转换器23 进行的D/A转换处理，并且作为模拟列表显示信号经由显示控制器24发 送到显示单元5。因此，CPU IO基于列表显示信号，在显示单元5的显示屏幕5A上以 矩阵方式显示基于合成縮略图数据的合成縮略图40、基于彼此不相关联的 静止图像縮略图数据的静止图像縮略图41、以及基于单位图像縮略图数据 的单位图像縮略图42，如图6所示。在这种情况下，如图7所示，合成縮略图40由相关联的静止图像縮 略图40A和单位图像縮略图40B配置而成。具体而言，合成縮略图40是 利用叠加在具有运动图像宽高比的单位图像縮略图40B的中央部分处的具 有静止图像宽高比的静止图像縮略图40A形成的，其中二者的顶部和底部 在垂直方向上匹配，以便整体上具有运动图像宽高比。注意，单位图像縮略图40B在静止图像縮略图40A上的叠加指的是这 样一种状态，其中縮略图40B和静止图像縮略图40A通过单位图像縮略图 40B的中央部分被覆写在静止图像縮略图40A处(即，单位图像縮略图 40B的中央部分被覆写在静止图像縮略图40A上)而被合成。因此，利用縮略图40，可以示出整个静止图像縮略图40A，并且同时 还可以示出单位图像縮略图40B的左端和右端未被叠加的静止图像縮略图 40A所覆盖而是被暴露的暴露部分(即，单位图像縮略图40B从静止图像 縮略图40A伸出的部分)。现在，作为合成縮略图40的成分的静止图像縮略图40A已通过对通 过以时分方式对对象进行静止图像拍摄和运动图像拍摄而获得的主静止图 像的静止图像大小进行縮小来生成，因此基本上具有与主静止图像相同的 图片。另外，作为合成縮略图40的成分的单位图像縮略图40B已通过对 通过以时分方式对对象进行静止图像拍摄和运动图像拍摄而获得的主运动 图像中包括的前端单位图像的运动图像大小进行縮小来生成，因此基本上具有与前端单位图像相同的图片。以时分方式对对象进行的静止图像拍摄和运动图像拍摄是通过在对对 象的静止图像拍摄之后立即开始运动图像拍摄来执行的，意味着存在微小 的时间偏移。因此，对于以时分方式对对象进行的静止图像拍摄和运动图 像拍摄来说，在拍摄期间对象或数字静态相机1的运动越大，主静止图像 和主运动图像中包括的前端单位图像之间的图片的差异就越大。这意味着在拍摄期间对象或数字静态相机1的运动越大，静止图像縮略图40A和单 位图像縮略图40B之间的图片的差异就越大。因此，对于合成縮略图40来说，静止图像縮略图40A和单位图像縮 略图40B之间的图片的差异越大，静止图像縮略图40A的右边缘和左边缘 与縮略图40B在右端的暴露部分(在下文中，可以称为"右端暴露部 分")和縮略图40B在左端的暴露部分(在下文中，可以称为"左端暴露 部分")之间的图片的连续性损失就越大。这使得单位图像縮略图40B的 右边缘部分和左边缘部分与单位图像縮略图40B的右端暴露部分和左端暴 露部分之间的边界更加明显。但是，对于以时分方式对对象进行的静止图像拍摄和运动图像拍摄来 说，如果在拍摄期间对象或数字静态相机1几乎没有运动，那么主静止图 像和主运动图像中包括的前端单位图像之间就几乎不存在图片的差异。这 意味着如果在以时分方式对对象进行的静止图像拍摄和运动图像拍摄期间 对象或数字静态相机1几乎没有运动，则静止图像縮略图40A和单位图像 縮略图40B之间就几乎不存在图片的差异。如果在静止图像縮略图40A和单位图像縮略图40B之间几乎不存在图 片的差异，那么静止图像縮略图40A的右边缘部分和左边缘部分与单位图 像縮略图40B的右端暴露部分和左端暴露部分之间的边界就不明显。因 此，对于合成縮略图40来说，静止图像縮略图40A的右边缘部分和左边 缘部分以及单位图像缩略图40B的右端暴露部分和左端暴露部分的图片可 以好像它们是单个图像那样被连接起来，并且可以看起来像是仅由单位图 像縮略图40B配置而成的。因此，在生成合成縮略图40时，在静止图像縮略图40A的右边缘部分和左边缘部分与单位图像縮略图40B的右端暴露部分和左端暴露部分之 间的边界部分处，CPU10叠加平行且垂直延伸的、相对粗黑的边界线的图 像43A和43B (在下文中，可以称为"边界线图像")。注意，CPU 10可以仅在静止图像縮略图40A的右端和左端或者仅在 单位图像縮略图40B的右端暴露部分和左端暴露部分与静止图像縮略图 40A的边界部分处将边界线图像43A和43B叠加在合成縮略图40上。另 外，CPU 10可以将边界线图像43A和43B叠加在合成縮略图40上，以便 跨越单位图像縮略图40B的右端暴露部分和左端暴露部分与静止图像縮略 图40A的边界部分。因此，不论静止图像縮略图40A和单位图像縮略图40B之间的图片差 异如何，合成縮略图40都以边界线图像43A和43B的形式清楚地示出静 止图像縮略图40A和单位图像縮略图40B的边界。也就是说，CPU 10使 得用户能够很容易且清楚地了解到合成縮略图40具有叠加在单位图像縮 略图40B上的、比单位图像縮略图40B更窄的静止图像縮略图40A。从 而，合成縮略图40可以很容易地与显示单元5的显示屏幕5A上的其他不 相关联的縮略图(即静止图像縮略图41和单位图像縮略图42)区分开 来。另外，CPU 10生成具有4:3的静止图像宽高比的主静止图像，并且生 成具有16:9的运动图像宽高比的构成主运动图像的多个主单位图像，并且 在显示单元5的显示屏幕5A中所示的合成縮略图40中，将具有静止图像 宽高比的静止图像縮略图40A叠加在具有运动图像宽高比的单位图像縮略 图40B上。因此，CPU IO可以使得用户通过合成縮略图40直观地识别出 与单位图像縮略图40B相对应的主运动图像和与静止图像縮略图40A相对 应的静止图像由于以时分方式对图像执行的静止图像拍摄和运动图像拍摄 而相关联。CPU 10将静止图像縮略图41和单位图像縮略图42与合成縮略图40 一起显示在显示单元5的显示屏幕5A上，从而用户可以利用操作单元15 随意地从合成縮略图40、静止图像縮略图41和单位图像縮略图42中进行 选择。如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显 示的合成縮略图40、静止图像縮略图41和单位图像縮略图42中选择静止 图像縮略图41 ，则CPU 10执行与所选择的静止图像縮略图41相对应的主 静止图像数据的重放处理。在这种情况下，CPU IO经由介质接口 26从记 录介质27读出与所选择的静止图像縮略图41相对应的压縮静止图像数 据，并且发送到缓冲存储器21以便临时记录。此时，静止图像处理单元25从缓冲存储器21读出压縮静止图像数据 并通过对已被读出的压縮静止图像数据进行解码来生成原始主静止图像数 据，并且将所生成的主静止图像数据发送到图像修改单元22。通过在不改变静止图像宽高比的情况下从主静止图像中稀疏像素，图 像修改单元22对从静止图像处理单元25提供来的主静止图像数据执行图 像縮小处理。图像修改单元22生成其中主静止图像被縮小到能够显示在 显示单元5的显示屏幕5A上的静止图像垂直长度和静止图像水平长度的 主静止图像数据，并将所生成的主静止图像数据发送到CPU 10。此时，CPU 10通过D/A转换器23执行从图像修改单元22提供的主 静止图像数据的D/A转换，并且作为模拟主静止图像信号发送到显示控制 器24。显示控制器24将从CPU 10提供来的主静止图像信号发送到显示单 元5，从而主静止图像基于主静止图像信号被显示在显示单元5的显示屏 幕5A上。从而，CPU可以播放通过仅对对象进行静止图像拍摄而生成的 主静止图像数据，并且向用户示出主静止图像。在主静止图像数据已被播放了预定量的时间之后，CPU 10结束静止图 像数据的播放处理。如果在主静止图像数据被播放预定量的时间之前播放 停止命令被输入，则CPU 10在该时刻停止静止图像数据的播放，并且结 束静止图像数据的播放处理。在以这种方式结束静止图像数据的播放处理后，CPU IO再次在显示单 元5的显示屏幕5A上显示合成縮略图40、静止图像縮略图41和单位图像 縮略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合 成縮略图40、静止图像縮略图41和单位图像縮略图42中选择将要被播放 的主静止图像数据和主运动图像数据。如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显 示的合成縮略图40、静止图像縮略图41和单位图像縮略图42中选择单位 图像縮略图42，则CPU IO执行与所选择的单位图像縮略图42相对应的主 运动图像数据的重放处理。在这种情况下，CPU IO经由介质接口 26从记 录介质27读出与所选择的单位图像缩略图42相对应的压缩运动图像数 据，并且发送到缓冲存储器21以便临时记录。CPU IO将运动图像流分成 压縮图像数据和压縮音频数据，并且将压縮图像数据和压縮音频数据发送 到缓冲存储器21以便被临时记录。此时，运动图像处理单元28从缓冲存储器21读出压縮运动图像数据 并通过对已被读出的压縮运动图像数据进行解码来生成原始主运动图像数 据，并且将所生成的主运动图像数据发送到图像修改单元22。图像修改单元22使主运动图像数据经历在不改变宽高比的情况下从 主运动图像中稀疏像素的图像縮小处理。从而，图像修改单元22生成其 中主运动图像被縮小到能够显示在显示单元5的显示屏幕5A上的运动图 像垂直长度和运动图像水平长度的主运动图像数据，并将所生成的主运动 图像数据发送到CPU 10。此时，CPU 10通过D/A转换器23执行从图像修改单元22提供的主 运动图像数据(即，多个主单位图像数据的序列)的D/A转换，并且作为 模拟主运动图像信号(即，多个主单位图像信号)发送到显示控制器24。 显示控制器24将从CPU IO提供来的主运动图像信号(即，多个主单位图 像数据的序列)发送到显示单元5，从而主运动图像基于主运动图像信号 (即，通过基于在时间上连续的多个主单位图像信号来顺序切换主单位图 像)被显示在显示单元5的显示屏幕5A上。另外，此时，音频处理单元31从缓冲存储器21读出压縮音频数据并 对已被读出的压縮音频数据进行解码，并且生成原始音频数据。音频处理 单元31随后利用D/A转换器33执行音频数据的D/A转换以形成模拟音频 信号并发送到扬声器34，从而基于音频信号的音频可以伴随着显示单元5 的显示屏幕5A上主运动图像的显示被从扬声器34输出。从而，CPU可以播放通过仅对对象进行运动图像拍摄而生成的主运动图像数据和音频数据，并且向用户展现主运动图像和音频。在主运动图像数据和音频数据已被播放到结束之后，CPU 10结束运动图像数据的播放处理。如果在主运动图像数据和音频数据被播放到结束之前播放停止命令被输入，则CPU 10在该时刻停止运动图像数据的播放，并且结束运动图像数据的播放处理。在以这种方式结束运动图像数据的播放处理后，CPU IO再次在显示单 元5的显示屏幕5A上显示合成縮略图40、静止图像縮略图41和单位图像 縮略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合 成縮略图40、静止图像縮略图41和单位图像縮略图42中选择将要被播放 的主静止图像数据和主运动图像数据。如果我们假定用户利用操作单元15从显示单元5的显示屏幕5A上显 示的合成縮略图40、静止图像縮略图41和单位图像縮略图42中选择合成 縮略图40,则CPU IO执行与所选择的合成縮略图40相对应的主静止图像 数据和主运动图像数据的重放处理。在这种情况下，CPU IO经由介质接口 26从记录介质27读出与所选择 的合成縮略图40 (即，作为合成縮略图40的成分的静止图像縮略图 40A)相对应的压縮静止图像数据，并且发送到缓冲存储器21以便临时记 录。另外，CPU 10经由介质接口 26从记录介质27读出与所选择的合成 縮略图40 (即，作为合成縮略图40的成分的运动图像縮略图40B)相对 应的运动图像流。CPU IO还将运动图像流分成压縮图像数据和压縮音频数 据，并且还将压縮图像数据发送到缓冲存储器21以便临时记录。也就是说，CPU 10从记录介质27读取相关联的压縮静止图像数据 (即，主静止图像数据)和运动图像流(即，主运动图像数据)，以及静 止图像縮略图40A和单位图像縮略图40B。此时，静止图像处理单元25从缓冲存储器21读出压縮静止图像数据 并通过对已被读出的压縮静止图像数据进行解码来生成原始主静止图像数 据，并且将所生成的主静止图像数据发送到图像修改单元22。另外，运动 图像处理单元28从缓冲存储器21读出压縮运动图像数据并通过对己被读出的压縮运动图像数据进行解码来生成原始主运动图像数据，并且将所生成的主运动图像数据发送到图像修改单元22。通过在不改变静止图像宽高比的情况下从主静止图像中稀疏像素，图 像修改单元22对从静止图像处理单元25提供来的主静止图像数据执行图 像縮小处理。图像修改单元22生成其中主静止图像被縮小到能够显示在 显示单元5的显示屏幕5A上的静止图像垂直长度和静止图像水平长度的 主静止图像数据，并将所生成的主静止图像数据发送到CPU 10。另外，图像修改单元22使主运动图像数据经历在不改变宽高比的情 况下从主运动图像中稀疏像素的图像縮小处理。从而，图像修改单元22 生成其中主运动图像被縮小到能够显示在显示单元5的显示屏幕5A上的 运动图像垂直长度和运动图像水平长度的主运动图像数据。此时，图像修改单元22对主静止图像数据和前端单位图像数据两者 都执行图像縮小处理，从而生成主静止图像和主前端单位图像的主静止图 像数据和前端单位图像数据，使得静止图像垂直长度和运动图像垂直长度 相同。图像修改单元22随后将以这种方式经历了图像縮小处理的前端单 位图像数据发送到CPUIO。此时，CPU 10通过对从图像修改单元22提供来的主静止图像数据和 前端单位图像数据进行合成来生成合成图像的合成图像数据(在下文中， 合成图像数据可以被称为"主合成图像数据"，并且合成图像数据的合成 图像可以被称为"主合成图像")。此时，CPU 10通过D/A转换器23执行主合成图像数据的D/A转换， 并且作为模拟主合成图像信号发送到显示控制器24。显示控制器24将从 CPU 10提供来的主合成图像信号发送到显示单元5，从而如图8所示的主 合成图像45基于主合成图像信号被显示在显示单元5的整个显示屏幕5A 上。此时，主合成图像45由相关联的主静止图像45A和前端单位图像 45B (即，充当与主静止图像45A相关联的主运动图像的前端单位图像 45B)配置而成。具体而言，主合成图像45是利用叠加在具有运动图像宽 高比的前端单位图像縮略图45B的中央部分处的具有静止图像宽高比的主静止图像縮略图45A形成的，其中二者的顶部和底部在垂直方向上匹配，以便整体上具有运动图像宽高比。注意，前端单位图像縮略图45B在静止图像縮略图45A上的叠加指的 是这样一种状态，其中前端单位图像縮略图45B和静止图像縮略图45A通 过前端单位图像縮略图45B的中央部分被覆写在静止图像縮略图45A处 (即，前端单位图像縮略图45B的中央部分被覆写在静止图像縮略图45A 上)而被合成。因此，利用縮略图45，可以示出整个静止图像縮略图45A，并且同时 还可以示出前端单位图像縮略图45B的左端和右端未被叠加的静止图像縮 略图45A所覆盖而是被暴露的暴露部分(即，前端单位图像縮略图45B从 静止图像縮略图45A伸出的部分)。在执行相关联的主静止图像数据和主运动图像数据的连续重放处理 时，CPU IO首先将主静止图像数据与主运动图像的前端单位图像数据一起 作为主合成数据播放并且显示主合成图像45，因此可以利用主合成图像 45向用户示出主静止图像45A。如图9所示，在主合成图像45已在显示单元5的显示屏幕5A上显示 了预定量的时间后，CPU 10仅使前端单位图像45B的前端单位图像数据 而不是主合成图像数据经历利用D/A转换器23的D/A转换，并且作为模 拟前端单位图像信号发送到显示控制器24。因此，显示控制器24将从 CPU 10提供来的前端单位图像信号发送到显示单元5，并且在显示单元5 的整个显示屏幕5A上仅显示基于前端单位图像信号的前端单位图像 45B。从而，CPU 10从在显示单元5的显示屏幕5A上显示主合成图像45 切换到只显示构成主合成图像45的主静止图像45A和前端单位图像45B 中的前端单位图像45B。在以这种方式在显示单元5的显示屏幕5A上将 显示从主合成图像45切换到前端单位图像45B后，CPU 10以与上述相同 的方式开始运动图像流的播放处理。从而，CPU 10控制运动图像处理单元28和图像修改单元22生成主运 动图像数据，并且还控制音频处理单元31生成音频数据。因此，在主运动图像数据被从图像修改单元22提供来之后，CPU 10利用D/A转换器23 执行主运动图像数据的D/A转换处理并且作为模拟主运动图像信号发送到 显示控制器24。因此，显示控制器24将从CPU10提供来的主运动图像信 号发送到显示单元5,从而在显示单元5的显示屏幕5A上显示基于主运动 图像信号的主运动图像，来取代前端单位图像45B。另外，CPU 10利用D/A转换器33执行由音频处理单元31生成的音 频数据的D/A转换处理，并且作为模拟音频信号发送到扬声器34，从而 基于音频信号的音频可以伴随显示单元5的显示屏幕5A上主运动图像的 显示被从扬声器34输出。从而，在通过以时分方式对对象进行的静止图像拍摄和运动图像拍摄 生成的主静止图像数据和主运动图像数据中，CPU IO可以首先播放主静止 图像数据，在此之后也可以自动播放主运动图像数据。在自动连续播放相关联的主静止图像数据和主运动图像数据的情况 下，当主运动图像数据已被播放到结束时，CPU10结束运动图像数据的播 放处理。在播放主运动图像数据的中途用户输入播放停止命令的情况下， CPU IO在该时刻停止运动图像数据的播放，并且结束运动图像数据的播放 处理。在以这种方式结束连续播放处理后，CPU 10再次在显示单元5的显示 屏幕5A上显示合成縮略图40、静止图像縮略图41和单位图像縮略图42 的列表显示，从而用户可以从显示单元5的显示屏幕5A上的合成縮略图 40、静止图像縮略图41和单位图像縮略图42中选择将要播放的主静止图 像数据和主运动图像数据。现在，在将主合成图像45显示在显示单元5的显示屏幕5A上的情况 下，CPU 10在主合成图像45中将具有静止图像宽高比的主静止图像45A 叠加在具有运动图像宽高比的主合成图像45上。因此，用户可以从主合 成图像45直观地识别出与前端单位图像45B相对应的主运动图像和主静 止图像45A通过以时分方式对对象进行的静止图像拍摄和运动图像拍摄而 相关联。也就是说，在CPU 10可以使得用户通过在显示单元5的显示屏幕5A上显示的合成縮略图40识别出主静止图像45A和主运动图像相互关联的 同时，主静止图像45A和主运动图像相互关联这一事实也可以从主合成图 像45被识别出来。但是，对于主合成图像45来说，与合成縮略图40的情况中一样，如 果在主静止图像45A和前端单位图像45B之间几乎不存在图片差异，那么 主静止图像45A的右边缘部分和左边缘部分与前端单位图像45B的右端暴 露部分和左端暴露部分的图片可能连接起来，就好像它们是单个图像一 样，并且可能看起来像是仅仅由前端单位图像45B配置而成的。因此，虽然CPU 10可以生成主合成图像45使得主静止图像45A只是 被简单地叠加在前端单位图像45B上(图8)，但是也可以使主静止图像 45A和前端单位图像45B中的至少一个经历叠加增强处理，以便强调主静 止图像45A在前端单位图像45B上的叠加。CPU 10可以允许用户在生成 主合成图像45时随意选择是否执行叠加增强处理，或者可以允许用户选 择并设定是否自动判定是否要执行叠加增强。另外，可以设想对主静止图像45A和前端单位图像45B中的至少一个 执行的若干类型的叠加增强。因此，在预先设定了叠加增强的执行的情况 下，或者在自动判定是否执行叠加增强的情况下，要对主静止图像45A和 前端单位图像45B中的至少一个执行的一种叠加增强处理可以被从多类叠 加增强中选择出来并被用户设定。现在，以与上述合成縮略图40中相同的方式，存在这样一种叠加增 强处理，其中边界线图像被叠加在主静止图像45A和前端单位图像45B中 的至少一个上。另一类叠加增强是将前端单位图像46A的至少右端暴露部分和左端暴 露部分改变成与原始亮度不同的亮度(即，低于原始亮度的亮度)，如图 IO所示。利用这种叠加增强，前端单位图像46A的亮度低于(暗于)主合 成图像46中的主静止图像45A，因此充当中央部分的主静止图像45A和 充当背景的前端单位图像46A (即，前端单位图像46A的右端暴露部分和 左端暴露部分)被清楚地区分，并且其间的边界可以被清楚地辨别。另一种类型的叠加增强是将前端单位图像47A的至少右端暴露部分和左端暴露部分改变成与原始颜色饱和度不同的颜色饱和度(即，低于原始 颜色饱和度的颜色饱和度)，如图11所示。利用这种叠加增强，前端单位图像47A的颜色饱和度低于主合成图像47中的主静止图像45A (或者 说比主静止图像45A更黑白或暗淡)，因此充当中央部分的主静止图像 45A和充当背景的前端单位图像47A (即，前端单位图像47A的右端暴露 部分和左端暴露部分)被清楚地区分，并且其间的边界可以被清楚地辨 别。另一种类型的叠加增强是将前端单位图像47A的至少右端暴露部分和 左端暴露部分改变成与原始色调不同的色调。利用这种叠加增强，前端单 位图像47A的色调不同于主合成图像47中的主静止图像45A,因此充当 中央部分的主静止图像45A和充当背景的前端单位图像47A (即，前端单 位图像47A的右端暴露部分和左端暴露部分)被清楚地区分，并且其间的 边界可以被清楚地辨别。另一种类型的叠加增强是在前端单位图像47A的右端暴露部分和左端 暴露部分的一部分上叠加怀旧式电影边缘的装饰性图像49A和49B，如图 12所示。利用这种叠加增强，由于显示了装饰性图像49A和49B，也可以 将主合成图像48与仅显示主静止图像或仅显示主运动图像的情况清楚地 区分开来。在已经预先进行了执行叠加增强处理的设定的情况下，CPU IO根据用 户设定对主静止图像45A和前端单位图像47A中的至少一个执行上述叠加 增强处理，并且生成主合成图像46至48。另外，在设定成自动判定是否执行叠加增强处理的情况下，在主静止 图像45A的右端部分和左端部分与前端单位图像45B的右端暴露部分和左 端暴露部分处的边界部分处，CPU 10将主静止图像45A和前端单位图像 45B上的彼此相邻的像素相比较。CPU 10比较主静止图像45A和前端单位图像45B之间的边界部分处 的像素，检测其中所比较的像素的像素值(例如，亮度或颜色)的差异超 过预设差异的像素的百分比。在其结果表明主静止图像45A和前端单位图 像45B的边界处的超过预设差异的像素值的百分比等于或超过某个阈值的情况下，判定主静止图像45A和前端单位图像45B之间的图片差异相对较 大。在这种情况下，CPU 10不对主静止图像45A和前端单位图像45B执 行叠加增强处理，因为只要通过叠加就能清楚地辨别主静止图像45A和前 端单位图像45B之间的边界。另一方面，在其结果表明主静止图像45A和前端单位图像45B的边界 处的超过预设差异的像素值的百分比低于某个阈值的情况下，判定主静止 图像45A和前端单位图像45B之间的图片差异相对较小。在这种情况下， 因为通过简单的叠加不容易辨别主静止图像45A和前端单位图像45B之间 的边界，所以CPU 10根据用户设定对主静止图像45A和前端单位图像 45B中的至少一个执行上述叠加增强处理之一，并且生成主合成图像46至 48。如图13至15所示，如果在经历了叠加增强处理(即，改变亮度、颜 色饱和度或色调，或者叠加装饰性图像49A和49B)的主合成图像46至 48被显示在显示单元5的显示屏幕5A上的状态中执行连续重放处理，则 根据用户设定，执行从显示主合成图像46至48到单独显示前端单位图像 45B的切换(即，擦除主静止图像45A)以及前端单位图像45B、 46A和 47A上的叠加增强处理效果的取消(即，将前端单位图像45B恢复到叠加 增强处理之前的状态)(不一定按该顺序执行)。在将显示单元5的显示屏幕5A上的主合成图像46至48切换到仅限 构成主合成图像46至48的前端单位图像45B后，CPU 10在单独显示前 端单位图像45B之后以与上述相同的方式自动开始运动图像流播放处理。但是，如果在经历了其中装饰性图像49A和49B被叠加在前端单位图 像45B上的叠加增强处理的主合成图像48被显示在显示单元5的显示屏 幕5A上的状态中执行连续重放处理，如图16所示，则根据用户设定，从 显示主合成图像48切换到单独显示构成主合成图像48的前端单位图像 45B (即，擦除主静止图像45A)。另外，CPU IO可以在单独显示在显示单元5的显示屏幕5A上的前端 单位图像45B上保留叠加增强处理效果(即，保持装饰性图像49A和49B 叠加在前端单位图像45B上)。另外，如果在从在显示单元5的显示屏幕5A上显示主合成图像48切换到显示其上叠加了装饰性图像49A和49B的 前端单位图像45B之后开始运动图像流的播放处理，则CPU 10可以根据 用户设定显示其中装饰性图像49A和49B仍被显示出来的主运动图像。另 外，CPU 10可以在显示单元5的显示屏幕5A上执行没有叠加装饰性图像 49A和49B的主运动图像的显示。注意，当在显示单元5的显示屏幕5A上显示主合成图像45至48 时，CPU 10例如在缓冲存储器21处生成主合成图像数据。具体而言， CPU 10通过将前端单位图像数据临时记录在缓冲存储器21中来呈现缓冲 存储器21中的前端单位图像数据，从而形成前端单位图像45B、 46A和 47A。 CPU 10同时进行呈现缓冲存储器21中的前端单位图像数据和从缓 冲存储器21读出前端单位图像数据作为主合成图像数据的处理。另外，在结束缓冲存储器21中前端单位图像数据的临时记录后，在 呈现缓冲存储器21中的主静止图像数据并将主静止图像45A覆写(叠 加)在前端单位图像45B、 46A和47A的中央部分处的同时，CPU 10同 时进行在缓冲存储器21中临时记录主静止图像数据的处理。另外，在将主静止图像数据的已被临时记录的部分与前端单位图像一 起从缓冲存储器21读出以作为主合成图像数据的同时，CPU 10同时进行 在缓冲存储器21中临时记录主静止图像数据的处理。因此，从通过用户对操作单元15的操作而从显示单元5的显示屏幕 5A任意选择一个主合成縮略图40到在显示单元5的显示屏幕5A上显示 主合成图像45至48的时间量大大的减小了 。但是，这意味着在将前端单位图像数据和主静止图像数据作为主合成 图像数据从缓冲存储器21读出之后，在显示单元5的显示屏幕5A上显示 的主合成图像45至48的内容被逐渐从仅限前端单位图像45B、 46A和 47A的显示改变到叠加有主静止图像45A的显示。如果CPU 10根据其处 理能力以相对较高的速度在显示单元5的显示屏幕5A上执行主合成图像 45至48的显示，那么主合成图像45和48的内容看起来可能是闪烁的， 这可能降低视觉识别度。因此，在从用户通过操作单元15从显示单元5的显示屏幕5A任意选择一个合成縮略图40到前端单位图像数据和主静止图像数据被顺序记录在缓冲存储器21中并且主合成图像数据的生成完成为止的时间期间，CPU 10执行生成主合成图像数据并将其发送到显示控制器24的操作，但是关 断显示单元5的显示屏幕5A (即，显示屏幕5A处于关断状态)。在主合 成图像数据的生成完成的时刻，CPU 10接通显示单元5的显示屏幕5A (即，显示屏幕5A处于接通状态)，以便显示主合成图像45至48。因此，CPU 10在主合成图像45至48被显示在显示单元5的显示屏幕 5A上时避免其可能导致视觉识别度降低的闪烁。另外，利用对显示单元5 的显示屏幕5A的类似显示控制，CPU10执行上述的合成縮略图40、静止 图像縮略图41和单位图像縮略图42的列表显示的显示。另一方面，当处于重放模式中时，如果在数字静态相机1连接到外部 设备的状态中通过用户操作从操作单元15输入用于显示静止图像縮略图 和运动图像縮略图的列表的列表显示命令的情况下，则静止图像縮略图数 据和单位图像縮略图数据经由介质接口 26被从记录介质27读出。CPU 10 随后以与上述相同的方式生成列表显示数据，并且经由外部接口 35和外 部端子8将所生成的列表显示数据顺序输出到外部设备。因此，CPU10基于列表显示信号，在外部设备的显示屏幕上以矩阵形 式显示合成縮略图40、静止图像縮略图41和单位图像縮略图42，如图6 所示。如果我们假定用户利用操作单元15从外部设备的显示屏幕上显示的 合成縮略图40、静止图像縮略图41和单位图像縮略图42中选择了静止图 像縮略图41，则CPU IO执行与所选择的静止图像縮略图41相对应的主静 止图像数据的重放处理。在这种情况下，CPU10以与上述相同的方式控制 静止图像处理单元25和图像修改单元22生成主静止图像数据。在主静止图像数据被从图像修改单元22提供来后，主静止图像数据 经由外部接口 35和外部端子8被输出到外部设备。从而，CPU IO可以在 外部设备的显示单元的显示屏幕上显示主静止图像数据的主静止图像，以 便被用户观看。另外，如果用户利用操作单元15从外部设备的显示屏幕上显示的合成縮略图40、静止图像縮略图41和单位图像縮略图42中选择了单位图像 縮略图42，则CPU IO执行与所选择的单位图像縮略图42相对应的主运动 图像数据的重放处理。在这种情况下，CPU 10控制运动图像处理单元28 和图像修改单元22生成主运动图像数据，并且还控制音频处理单元31生 成音频数据。在主运动图像数据被从图像修改单元22提供来后，主运动图像数据 经由外部接口 35和外部端子8被输出到外部设备。另外，CPU IO从音频 处理单元31获取音频数据，并且还经由外部接口 35和外部端子8将音频 数据输出到外部设备。从而，CPU10可以在外部设备的显示单元的显示屏 幕上显示主运动图像数据的主运动图像，并且伴随着主运动图像的显示从 外部设备的扬声器输出基于音频数据的音频，以便被用户观看。另外，如果用户利用操作单元15从外部设备的显示屏幕上显示的合 成縮略图40、静止图像缩略图41和单位图像缩略图42中选择了合成縮略 图40，则CPU 10执行与所选择的合成縮略图40相对应的主静止图像数据 和主运动图像数据的连续重放处理。在这种情况下，CPU10以与上述相同 的方式控制静止图像处理单元25、运动图像处理单元28和图像修改单元 22生成前端单位图像和主静止图像数据。在主静止图像数据和前端单位图像数据被从图像修改单元22提供来 后，主单位图像数据和主静止图像数据被合成，并且生成了主合成图像数 据。CPU 10随后经由外部接口 35和外部端子8将所生成的合成图像数据 输出到外部设备。从而，CPU10可以基于合成图像数据在外部设备的显示 单元的显示屏幕上显示主合成图像45至48。CPU10通过播放相关联的主静止图像数据和主运动图像数据的前端单 位图像数据，从而在外部设备处显示主合成图像45至48，因此用户可以 以合成图像45至48的形式看到主静止图像45A。在主合成图像45至48已在外部设备处显示了预定量的时间后，CPU 10将外部设备上主合成图像45至48的显示切换到仅限构成主合成图像45 至48的主静止图像45A和前端单位图像45B之中的前端单位图像45B的 显示，然后切换到主运动图像的显示，并且还伴随主运动图像的显示输出音频，如上所述。因此，在播放主静止图像数据之后，CPU10还可以自动播放与该主静止图像数据相关联的主运动图像数据，以便被用户观看。 同样，当在外部设备处显示主静止图像和主运动图像的情况下，如上所述，在以这种方式结束连续重放处理后，CPU10再次在外部设备的显示 单元的显示屏幕上显示合成縮略图40、静止图像縮略图41和单位图像缩 略图42的列表显示，以便用户可以从显示单元5的显示屏幕5A上的合成 縮略图40、静止图像縮略图41和单位图像縮略图42中选择将要播放的主 静止图像数据和主运动图像数据。接下来，将参考图17所示的流程图来描述在处于重放模式中时显示 合成縮略图40的合成縮略图显示处理过程RT1 。例如，在通过用户在操作单元15处的输入而输入列表显示命令后， CPU IO根据预先存储在ROM 12中的显示控制程序，开始图17所示的合 成縮略图显示处理过程RT1 。在开始合成縮略图显示处理过程RT1后，在步骤SP1中，CPU 10从 记录介质27中读出多组静止图像縮略图数据和多组单位图像縮略图数 据，并且前进到下一步骤SP2。在步骤SP2中，CPU 10从多组静止图像縮略图数据和多组单位图像 縮略图数据中检测相关联的静止图像縮略图数据和单位图像縮略图数据， 并且前进到下一步骤SP3。在步骤SP3中，CPU 10对相关联的静止图像縮略图数据和单位图像 縮略图数据进行合成以生成合成縮略图数据，并且前进到下一步骤SP4。在步骤SP4中，CPU 10将合成縮略图数据与其他静止图像縮略图数 据和单位图像縮略图数据一起发送到数字静态相机1 (或外部设备)的显 示单元5，以作为列表显示数据。从而，CPU IO基于列表显示数据，在显 示单元5的显示屏幕5A上(外部设备的显示单元的显示屏幕上)显示作 为合成縮略图40的叠加在具有运动图像宽高比的单位图像縮略图40B的 一部分上的具有静止图像宽高比的静止图像縮略图40A，并且还显示其他 静止图像縮略图41和单位图像縮略图42，以作为列表，并且前进到下一 步骤SP5。在步骤SP5中，CPU10结束合成縮略图显示处理过程RT1。接下来，将参考图18所示的流程图描述在重放模式中连续播放相关 联的主静止图像数据和主运动图像数据的连续重放处理过程RT2。在合成缩略图40被显示在显示单元5的显示屏幕5A (或者外部设备 的显示单元的显示屏幕)上的状态中，在通过用户在操作单元15处的操 作而在显示屏幕5A (或者外部设备的显示单元的显示屏幕)上选择合成 縮略图40之后，CPU IO根据预先存储在ROM 12中的显示控制程序，开 始图18所示的连续重放处理过程RT2。在连续重放处理过程RT2开始后，在步骤SP11中，CPU IO使显示单 元5的显示屏幕5A (或外部设备的显示单元的显示屏幕)转换到关断状 态，并且前进到下一步骤SP12。在步骤SP12中，CPU 10从记录介质27读出与用户选择的合成縮略 图40相对应的、相关联的压縮静止图像数据和运动图像流中的压縮静止 图像数据。CPU 10随后利用静止图像处理单元25和图像修改单元22基于 压縮静止图像数据生成主静止图像数据，并且前进到下一步骤SP13。在步骤SP13中，CPU 10从记录介质27读出与用户选择的合成縮略 图40相对应的、相关联的压縮静止图像数据和运动图像流中的运动图像 流。CPU 10随后利用运动图像处理单元28和图像修改单元22基于运动图像流中包括的压縮运动图像生成前端单位图像数据，并且前进到下一步骤 SP14。在步骤SP14中，CPU 10判定是否对主静止图像数据和前端数据中的 至少一个执行叠加增强处理。在步骤SP14中获得肯定结果意味着用户已经预先执行了设定以便执 行叠加增强处理，或者已经基于主静止图像45A和前端单位图像45B的像 素自动判定应当执行叠加增强处理。在获得这种肯定结果的情况下，CPU 10前进到下一步骤SP15。在步骤SP15中，CPU 10例如对相关联的主静止图像数据和前端单位 图像数据中的前端单位图像数据执行叠加增强处理，并且前进到下一步骤 SP16。在步骤SP16中，CPU 10对主静止图像数据和前端单位图像数据进行 合成以生成主合成数据，并且前进到下一步骤SP17。另一方面，在步骤SP14中获得否定结果意味着用户没有预先执行设 定以便执行叠加增强处理(或者已经作了相反的设定)，并且也没有基于 主静止图像45A和前端单位图像45B的像素自动判定应当执行叠加增强处 理。如果在步骤SP14中获得这种否定结果，CPU 10则跳过步骤SP15中 的处理，并前进到下一步骤SP16。注意，在执行步骤SP16的处理并生成主合成图像数据的同时，相机 块16还在向数字静态相机1的显示单元5 (或者向外部设备)发送主合成 图像数据。在主合成数据的生成完成后，在步骤SP17中，CPU IO接通显示单元 5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)，并且前进到下 一步骤SP18。在步骤SP18中，CPU10在显示单元5的显示屏幕5A (外部设备的显 示单元的显示屏幕)上显示叠加在具有运动图像宽高比的前端单位图像 45B、 46A和47A的一部分上的具有静止图像宽高比的主静止图像45A， 以作为基于主合成图像数据的主合成图像45至48。从而，CPU IO使得用 户能够以主合成图像45至48的形式观看相关联的主静止图像45A和主运 动图像中的主静止图像45A，并且前进到下一步骤SP19。在步骤SP19中，CPU 10在开始主合成数据45至48的显示之后待机 某一时间段，并且在该时间段经过之后进行到下一步骤SP20。在步骤SP20中，CPU IO在叠加增强的效果被取消的情况下在显示单 元5的显示屏幕5A (外部设备的显示单元的显示屏幕)上仅显示构成主 合成图像45至48的前端单位图像45B来取代主合成图像45至48，并且 前进到下一步骤SP21。在步骤SP21中，CPU IO开始播放与到该时刻为止向用户示出的主静 止图像45A的主静止图像数据相关联的主运动图像数据。因此，CPU 10 可以通过运动图像处理单元28和图像修改单元22生成与主静止图像数据 相关联的主运动图像数据以及压縮运动图像数据，并且将所生成的主运动图像数据发送到显示单元5 (或者外部设备)。从而，CPU IO可以显示将 要在显示单元5的显示屏幕5A (外部设备的显示单元的显示屏幕)上显 示的基于主运动图像数据的主运动图像，来取代前端单位图像45B。现在，在主运动图像数据的播放结束或者其播放响应于播放停止请求 而被取消的情况下，CPU10前进到下一步骤SP22。在步骤SP22中，CPU 10结束连续重放处理过程RT2。1-3操作和优点利用上述配置，在数字静态相机1的CPU以时分方式执行对对象的静 止图像拍摄和运动图像拍摄的情况下，CPU IO生成具有静止图像宽高比的 主静止图像45A的主静止图像数据，以及由具有不同于静止图像宽高比的 运动图像宽高比的多个时间上连续的主单位图像形成的主运动图像的主运 动图像数据，并且将它们关联起来。另外，数字静态相机1的CPU 10生成相关联的主静止图像数据和主 运动图像的、作为用来搜索静止图像数据的索引的、具有静止图像宽高比 的静止图像縮略图40A的静止图像縮略图数据。另外，数字静态相机1的CPU 10生成相关联的主静止图像数据和主 运动图像的、作为用来搜索运动图像数据的索引的、具有运动图像宽高比 的单位图像縮略图40B的单位图像縮略图数据。另外，数字静态相机1的CPU 10将静止图像縮略图数据和单位图像 縮略图数据关联起来，并且将相关联的静止图像縮略图数据和单位图像縮 略图数据与主静止图像数据和主运动图像数据一起记录。数字静态相机1的CPU 10随后在处于重放模式中时合成相关联的静 止图像缩略图数据和单位图像縮略图数据，以生成合成縮略图数据。另外，数字静态相机1的CPU IO将合成缩略图数据发送到显示单元5 (或者外部设备)，从而使得静止图像縮略图40A在叠加于单位图像縮略 图40B的一部分上的情况下作为基于合成縮略图数据的合成縮略图40被 显示在显示单元5的显示屏幕5A (或外部设备的显示单元的显示屏幕) 上。因此，数字静态相机1的CPU 10可以在显示单元5的显示屏幕5A (或外部设备的显示单元的显示屏幕)上执行显示，使得示出相关联的主 静止图像和主运动图像的内容的静止图像縮略图40A和单位图像縮略图 40B以能够与示出不相关联的主静止图像和主运动图像的内容的其他静止 图像縮略图和运动图像縮略图相区别开来的方式被作为合成縮略图40显不。因此，数字静态相机1的CPU 10可以使得通过以时分方式对对象进行静止图像拍摄和运动图像拍摄而生成并且相关联的主静止图像和主运动 图像能够很容易地与通过对对象单独执行静止图像拍摄和运动图像拍摄获 得的主静止图像和主运动图像相区别开来。根据以上配置，数字静态相机1针对相关联的主静止图像和主运动图 像，通过对与主静止图像相对应的具有静止图像宽高比的静止图像縮略图40A和与主运动图像相对应的具有运动图像宽高比的单位图像縮略图40B 进行合成来生成合成縮略图40，并且在显示单元5的显示屏幕5A (或者 外部设备的显示单元的显示屏幕)上显示叠加在单位图像縮略图40B的一 部分上的静止图像縮略图40A,来作为合成縮略图40。因此，数字静态相机1可以通过以能够与示出不相关联的主静止图像 和主运动图像的内容的其他静止图像縮略图和运动图像縮略图相区别开来 的方式在显示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏 幕)上显示与相关联的主静止图像和主运动图像相对应的静止图像縮略图 40A和单位图像縮略图40B，来作为合成縮略图40。从而，数字静态相机 1使得用户能够很容易地辨别相关联的主静止图像和主运动图像。另外，利用数字静态相机l，当合成縮略图40在显示单元5的显示屏 幕5A (或者外部设备的显示单元的显示屏幕)处被选择后，主静止图像 数据和主运动图像数据中包括的前端单位图像数据被合成，并且生成了关 于相关联的主静止图像数据和主运动图像数据的主合成縮略图数据。数字静态相机1将主合成图像数据发送到显示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)，并且在显示单元5的显示屏幕 5A (或者外部设备的显示单元的显示屏幕)上显示在前端单位图像45B的一部分上的主静止图像45A，来作为基于主合成图像数据的主合成图像 45。因此，在将主合成图像45显示在显示单元5的显示屏幕5A (或者外 部设备的显示单元的显示屏幕)上的情况下，数字静态相机1仍能够以与 不相关联的静止图像和主运动图像的前端单位图像相区分开来的方式来显 示相关联的主静止图像和主运动图像的主静止图像和前端单位图像。因 此，数字静态相机1使得用户能够很容易地辨别相关联的主静止图像和主 运动图像。另外，数字静态相机1在显示单元5的显示屏幕5A (或者外部设备的 显示单元的显示屏幕)上显示前端单位图像45B的水平方向上的右端部分 和左端部分，以便在水平方向上从主静止图像45A的右端和左端略微伸 出，以作为主合成图像45。当在显示单元5的显示屏幕5A (或外部设备的显示单元的显示屏 幕)上显示主合成图像45之后过去一定量的时间后，构成主合成图像45 的主静止图像45A和前端单位图像45B中的前端单位图像45B被单独显 示，并且在显示前端单位图像45B之后，主运动图像数据被自动播放，从 而前端单位图像作为其一部分的主运动图像取代前端单位图像45B被显 示。因此，在对相关联的主静止图像和主运动图像进行自动连续播放并且 从主静止图像45A切换到宽高比不同的主运动图像时，可以避免引起不自 然的感觉的、在显示单元5的显示屏幕5A (或外部设备的显示单元的显 示屏幕)上顺序显示的整体图像形状和图像长度(垂直长度和水平长度) 的突变。另外，在生成合成縮略图40时，数字静态相机1使前端单位图像45B 和主静止图像45A中的至少一个经历叠加增强处理。因此，当在显示单元 5的显示屏幕5A (或外部设备的显示单元的显示屏幕)处显示合成縮略图 40时，即使在合成縮略图40中单位图像縮略图40B和将要叠加在其上的 静止图像縮略图40A的图片几乎相同的情况下，由于叠加增强处理的效 果，数字静态相机1也使得用户能够清楚辨别单位图像縮略图40B和静止图像縮略图40A的边界。因此，数字静态相机1可以避免这样一种情形，即合成縮略图40被 错误地识别为具有相同的运动图像宽高比并被独立显示的单位图像縮略图 42，从而使得难以将与相关联的主静止图像和主运动图像相对应的静止图 像縮略图40A和单位图像縮略图40B和与不相关联的主静止图像和主运动 图像相对应的其他静止图像縮略图和单位图像縮略图区别开来。另外，对于数字静态相机1来说，在生成主合成图像45时，对主静 止图像45A和前端单位图像45B中的至少一个执行叠加处理。因此，当在 显示单元5的显示屏幕5A (或外部设备的显示单元的显示屏幕)上显示 主合成图像45时，即使在主合成图像45中前端单位图像45B和将要叠加 在其上的主静止图像45A的图片几乎相同的情况下，由于叠加增强处理的 效果，数字静态相机1也使得前端单位图像45B和前端单位图像45B的边 界能够被清楚地辨别。因此，在显示主合成图像45的情况下，数字静态相机1也能够避免 主合成图像45被错误地识别为未叠加有主静止图像45A的前端单位图像 45B，这种错误识别会使得难以将相关联的主静止图像和主运动图像与不 相关联的主静止图像和主运动图像区别开来。其他实施例2-1第二实施例利用上述的第一实施例，己经描述了将通过以时分方式执行对对象的 静止图像拍摄和运动图像拍摄而获得的主静止图像数据和主运动图像数据 关联起来的情况，但是本发明并不限于该布置，也可以进行这样一种布 置，其中通过以时分方式执行对对象的静止图像拍摄和运动图像拍摄而获 得的主静止图像数据和主运动图像数据例如可以根据拍摄的日期和时间、 拍摄的位置、对象等等被任意地选择和关联。在以这种方式任意选择和关联主静止图像数据和主运动图像数据的情 况下，仍能通过合成縮略图40和主合成图像45将相关联的主静止图像数 据和主运动图像数据与其他不相关联的主静止图像数据和主运动图像数据区别开来。此外，本发明并不限于将单个主静止图像数据和单个主运动图像数据 关联起来，主静止图像数据和主运动图像数据中的至少一种的数目可以是 两个或更多个。在该配置的情况下，如图19A所示，进行这样一种布置，其中，例 如，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏 幕)上，作为主合成图像(或合成縮略图)50，在多个主运动图像的每个 前端单位图像(或单位图像縮略图)的一部分上叠加并显示一个主静止图 像数据(或者一个静止图像缩略图)52。或者，在该配置的情况下，如图19B所示，进行这样一种配置，其 中，例如，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显 示屏幕)上，作为主合成图像(或者合成縮略图)53，在单个主运动图像 的前端单位图像(或单位图像縮略图)54的一部分上叠加并显示多个主静 止图像(或者多个静止图像縮略图)55A至55D。或者，在该配置的情况下，如图19C所示，进行这样一种配置，其 中，例如，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显 示屏幕)上，作为主合成图像(或者合成縮略图)56，在多个主运动图像 的每个前端单位图像(或单位图像縮略图)51A至51D的一部分上叠加并 显示多个主静止图像(或者多个静止图像縮略图)55A至55D。2-2第三实施例另外，虽然已将第一实施例描述为在显示单元5的显示屏幕5A (或 者外部设备的显示单元的显示屏幕)上，在前端单位图像45B (或者前端 单位图像縮略图40B)的中央部分处叠加并显示主静止图像45A (或者静 止图像縮略图40A)作为主合成图像45 (或者合成縮略图40)，但是， 本发明并不限于这种布置，而是也可以进行如图20所示的这样一种布 置，其中，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显 示屏幕)上，作为主合成图像60 (或者合成縮略图)，在前端单位图像 60A (或者前端单位图像縮略图)上右对齐地叠加并显示主静止图像60B(或者静止图像缩略图)。或者，可以进行如图21所示的这样一种布置，其中，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显 示屏幕)上，作为主合成图像61 (或者合成縮略图)，在前端单位图像 61A (或者前端单位图像縮略图)上左对齐地叠加并显示主静止图像61B (或者静止图像縮略图)。另外，可以进行如图22所示的这样一种布置，其中，在显示单元5 的显示屏幕5A (或者外部设备的显示单元的显示屏幕)上，作为主合成 图像62 (或者合成縮略图)，在前端单位图像62A的中央部分处叠加并 显示具有比前端单位图像62A的运动图像垂直长度更短的静止图像垂直长 度的主静止图像62B (或静止图像縮略图)。2-3第四实施例另外，虽然已将第一实施例描述为响应于列表显示命令的输入而在显 示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)上以矩 阵形式显示合成縮略图40、静止图像縮略图41和单位图像縮略图42，但 是，本发明并不限于这种布置，例如，如图23和24所示，可以在屏幕的 垂直方向上的一列中或者屏幕的水平方向上的一行中显示至少t个合成縮 略图，以便在适当时被滚动。2-4第五实施例另外，虽然己将第一实施例描述为静止图像縮略图40A被显示成叠加 在单位图像縮略图40B的一部分上，使得单位图像縮略图40B的一部分被 静止图像縮略图40A所替换(即，静止图像縮略图40A被覆写在单位图像 縮略图40B的一部分上)，来作为显示单元5的显示屏幕5A (或者外部 设备的显示单元的显示屏幕)上显示的合成縮略图，但是本发明并不限于 这种布置，而是也可以进行这样一种布置，其中，作为在显示单元5的显 示屏幕5A (或者外部设备的显示单元的显示屏幕)上显示的合成縮略图 40，静止图像縮略图40A被显示成叠加在单位图像縮略图40B的一部分 上，使得单位图像縮略图40B的该部分被透射(即，处于单位图像縮略图40B的该部分透过静止图像縮略图40A可见的状态中)。另外，对于主合 成图像45来说，也可以进行这样一种布置，其中，作为在显示单元5的 显示屏幕5A (或者外部设备的显示单元的显示屏幕)上显示的主合成图 像45，主静止图像45A被显示成叠加在前端单位图像45B的一部分上， 使得前端单位图像45B的该部分被透射(g卩，处于前端单位图像45B的该 部分透过主静止图像45A可见的状态中)。2-5第六实施例另外，以上己经利用第一实施例描述了这样一种布置，其中在显示单 元5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)上，列表显 示由合成縮略图40、静止图像縮略图41和单位图像縮略图42构成，使得 可以从中选择将要播放的主静止图像数据或者主运动图像数据，但是本发 明并不限于这种布置，而是也可以进行这样一种布置，其中，例如，不进 行合成縮略图40、静止图像縮略图41和单位图像縮略图42的列表显示， 而是不论相关联与否，都例如按记录的日期和时间的顺序来播放主静止图 像数据和主运动图像数据。还可以进行这样一种布置，其中，仅在相关联的主静止图像数据和主 运动图像数据将要被播放的情况下，才在主合成图像45被如上所述地显 示的情况下自动连续播放主静止图像数据和主运动图像数据。2-6第七实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中主运 动图像数据中包括的多组主单位图像数据的前端单位图像数据被用来生成 合成縮略图40或主合成图像45，但是本发明并不限于这种布置，而是也 可以进行这样一种布置，其中，在主运动图像数据中包括的多组主单位图 像数据中，在时间上晚于前端单位图像数据的主单位图像数据(末端的主 单位图像数据，或者前端单位图像数据和末端单位图像数据之间的主单位 图像数据)被用来生成合成縮略图40或主合成图像45。2-7第八实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中相关 联的主静止图像数据和主运动图像数据被自动连续播放，并且在主运动图 像数据的播放结束后，显示返回到列表显示，但是本发明并不限于这种布 置，而是也可以进行这样一种布置，其中，相关联的主静止图像数据和主 运动图像数据被自动连续播放，并且在主运动图像数据的播放结束后，主 合成图像45再次被显示。在该布置的情况下，可以通过将主运动图像数 据与主运动图像数据中包括的除前端单位图像数据之外的主单位图像数据 (例如，末端主单位图像数据)相合成，来生成在主运动图像数据的播放 结束的时刻将要显示的主合成图像45。2-8第九实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中在显 示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)上，列 表显示由合成縮略图40、静止图像縮略图41和单位图像縮略图42构成， 并且在用户任意选择合成縮略图40的情况下，与所选择的合成縮略图40 相对应的、相关联的主静止图像数据和主运动图像数据被自动连续播放， 但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中，例 如，在以时分方式对对象进行的静止图像拍摄和运动图像拍摄时，对构成 主运动图像数据的多个主单位图像数据中的每一个执行图像縮小处理。利用该布置，生成由在时间上连续的多个单位图像縮略图(即，多个 单位图像縮略图数据)形成的运动图像(在下文中称为"运动图像縮略 图")的运动图像数据(在下文中称为"运动图像縮略图数据")，其中 该运动图像縮略图数据与静止图像縮略图数据相关联并被记录。利用该布置，在显示单元5的显示屏幕5A (或者外部设备的显示单 元的显示屏幕)上，列表显示由合成縮略图40、静止图像縮略图41和单 位图像縮略图42构成，并且在用户任意选择合成缩略图40的情况下，列 表显示例如被维持，并且其中只有构成合成縮略图40的静止图像縮略图 40A和单位图像縮略图40B中的单位图像縮略图40B取代所选择的合成縮略图40被显示，在此之后运动图像縮略图数据被自动播放。因此，利用该布置，基于运动图像縮略图数据的运动图像縮略图(即 在时间上连续的多个单位图像縮略图)取代作为合成縮略图40的成分的 单位图像縮略图40B被显示在显示单元5的显示屏幕5A (或者外部设备 的显示单元的显示屏幕)上。从而，可以进行这样一种布置，其中，在显示单元5的显示屏幕5A (或者外部设备的显示单元的显示屏幕)上列表显示由合成縮略图40、静 止图像縮略图41和单位图像縮略图42构成的状态中，相关联的静止图像 縮略图数据和运动图像縮略图数据作为合成縮略图数据和运动图像縮略图 数据被自动连续播放。根据此配置，即使在显示单元5的显示屏幕5A (或者外部设备的显 示单元的显示屏幕)上列表显示由合成縮略图40、静止图像縮略图41和 单位图像縮略图42构成的状态中，与主静止图像数据相关联的主运动图 像数据也可作为运动图像縮略图被播放，从而基于主运动图像数据的主运 动图像作为运动图像縮略图被示出。另外，可以进行这样一种布置，其中，如图25所示，编制播放列表 70，其中多组相关联的主静止图像数据和主运动图像数据通过文件名被按 顺序注册。这里还可以进行这样一种布置，其中，根据播放列表，对于每 个相关联的主静止图像数据和主运动图像数据，主静止图像数据作为主合 成图像数据被播放，之后主运动图像数据被自动播放(即，充当主静止图 像数据的主合成图像数据的播放和主运动图像数据的播放按顺序交替)。注意，图25所示的播放列表70例如可以形成为文件，并且被利用文 件名(例如LINKOOOO.DAT)来管理。利用该文件名，序号可被存储在文 件名主体中，以便能够单独管理多类播放文件。2-9第十实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中生成 了具有16:9的运动图像宽高比的主运动图像的主运动图像数据和具有4:3 的静止图像宽高比的主静止图像的主静止图像数据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其中生成不同种类的具有运动 图像宽高比的主运动图像的主运动图像数据和具有静止图像宽高比的主静止图像的主静止图像数据，例如生成具有4:3的运动图像宽高比的主运动 图像的主运动图像数据和具有3:2的静止图像宽高比的主静止图像的主静 止图像数据。2-10第十一实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，当 通过对对象的静止图像拍摄和运动图像拍摄而生成主运动图像数据和主静 止图像数据时，也生成静止图像縮略图数据和单位图像縮略图数据，但是 本发明并不限于这种布置，而是也可以进行这样一种布置，其中，静止图 像縮略图数据和单位图像縮略图数据是在请求合成縮略图40、静止图像縮 略图41和单位图像縮略图42的列表显示时生成的，并且合成縮略图是利 用这些来生成的。2-ll第十二实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，针 对静止图像拍摄的一个图像数据经历修剪处理(或剪切处理)，并且经历 图像縮小处理，以便生成具有4:3的宽高比的主静止图像的主静止图像数 据，但是本发明并不限于这种布置，而是也可以进行这样一种布置，其 中，根据为静止图像预设的静止图像大小，针对静止图像拍摄的一个图像 数据经历修剪处理(或者剪切处理)以生成具有4:3的宽高比的主静止图 像的主静止图像数据。以相同的方式，可以进行这样一种布置，其中，根 据为运动图像预设的运动图像大小，针对运动图像拍摄的多个图像数据经 历修剪处理(或者剪切处理)，以生成由多个时间上连续的、具有16:9的 宽高比的单位图像形成的主运动图像的主运动图像数据。2-12第十三实施例另外，虽然以上己经利用第一实施例描述了这样一种布置，其中，不论静止图像縮略图40A和单位图像缩略图40B的图片差异度如何，都对合 成縮略图40执行叠加增强处理，但是本发明并不限于这种布置，而是也 可以进行一种针对合成縮略图40的布置，其中，与主合成图像45的情况 一样，在生成合成縮略图40时是否执行叠加增强处理是由用户预先选择 和设定的，或者是否自动判定是否执行叠加增强处理被设定，并且在设定 之后在适当时对合成縮略图40执行叠加增强处理。另外，与主合成图像的情况一样，对于要对合成縮略图40执行的叠 加增强处理的类型，用户可以从多类叠加增强处理中任意选择一种叠加增 强处理。2-13第十四实施例另外，虽然以上已经利用第一实施例描述了这样一种布置，其中，根 据本发明实施例的显示控制程序被应用于预先存储在数字静态相机1的 ROM 12中的显示控制程序，并且数字静态相机1的CPU 10根据存储在 ROM 12中的显示控制程序来执行图17所示的合成縮略图显示处理过程 RT1和图18所示的连续重放处理过程RT2，但是本发明并不限于这种布 置，而是也可以进行这样一种布置，其中显示控制程序通过其中安装了显 示控制程序的计算机可读介质而被安装到数字静态相机1中，并且数字静 态相机1的CPU 10根据所安装的显示控制程序来执行合成縮略图显示处 理过程RT1和连续重放处理过程RT2。数字静态相机1还可以利用诸如局域网、因特网、数字卫星广播等等 之类的线缆或无线通信介质或者计算机设备从外部来源安装显示控制程 序。另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算 机可读记录介质例如可以包括诸如柔性盘之类的封装介质。另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算 机可读记录介质例如可以包括诸如CD-ROM (致密盘-只读存储器)之类 的封装介质。另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算机可读记录介质例如可以包括诸如DVD (数字多功能盘)之类的封装介 质。另外，用于在数字静态相机1中安装显示控制程序以便可执行的计算 机可读记录介质并不限于封装介质，而是也可以通过其中可以临时或永久 记录各种类型的程序的半导体存储器或磁盘等等来实现。另外，可以利用诸如局域网、因特网、数字卫星广播等等之类的线缆 或无线通信介质来提供显示控制程序以便记录在计算机可读记录介质中。 另外，可以利用诸如路由器和调制解调器之类的各种类型的通信接口来提 供显示控制程序以便记录在计算机可读记录介质中。2-14第十五实施例另外，虽然以上己经利用第一实施例描述了这样一种布置，其中显示 控制设备被应用于参考图1至25描述的数字静态相机1，但是本发明并不 限于这种布置，而是可以广泛地应用于各种配置的显示控制设备，这些显 示控制设备能够记录具有不同宽高比的主静止图像的主静止图像数据和主 运动图像的主运动图像数据，或者从诸如个人计算机、蜂窝电话、PDA (个人数字助理)以及类似的信息处理设备、硬盘记录器以及类似的记录/ 重放设备等等之类的外部获取并播放它们。2-15第十六实施例另外，虽然以上己经进行了描述，其中以上参考图1至25描述的 CPU IO被应用作为合成图像生成单元，用于通过对单位图像和静止图像进 行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽 高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具 有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上， 但是本发明并不限于这种布置，而是也可以应用很多种其他合成图像生成 单元，例如微处理器和V-RAM (视频-随机访问存储器)，或者硬件电 路配置的合成图像生成电路，用于通过对单位图像和静止图像进行合成来 生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图 像宽高比的单位图像形成的运动图像的单位图像的一部分之上。2-16第十七实施例另外，虽然以上已经进行了描述，其中以上参考图1至25描述的 CPU 10被应用作为用于在显示单元的显示屏幕上显示合成图像的显示控制 单元，但是本发明并不限于这种布置，而是也可以应用很多种其他显示控 制电路，例如微处理器，或者用于在显示单元的显示屏幕上显示合成图像 的硬件电路配置的显示控制电路。2-17第十八实施例另外，虽然以上已经进行了描述，其中以上参考图1至25描述的 CPU IO被应用作为叠加增强处理单元，用于向合成图像的前端单位图像和 静止图像之间的边界部分应用强调静止图像在前端单位图像上的叠加的叠 加增强处理，但是本发明并不限于这种布置，而是也可以应用很多种其他 叠加增强处理单元，例如微处理器，或者硬件电路配置的叠加增强处理电 路，用于向合成图像的前端单位图像和静止图像之间的边界部分应用强调 静止图像在前端单位图像上的叠加的叠加增强处理(例如叠加怀旧式的照 片边框、电视监视器边框等等的图像)本领域的技术人员应当理解，取决于设计要求和其他因素，可以进行 各种修改、组合、子组合和变更，只要它们处于所附权利要求或其等同物 的范围之内。本发明包含与2007年10月3日向日本专利局提交的日本专利申请JP2007- 260113和2008年8月7日向日本专利局提交的日本专利申请JP2008- 204567相关的主题，这里通过引用将上述申请的全部内容并入。
权利要求
1.一种显示控制设备，包括合成图像生成单元，该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及显示控制单元，该显示控制单元被配置为在显示单元的显示屏幕上显示所述合成图像。
2. 根据权利要求1所述的显示控制设备，其中，当在所述显示单元的 所述显示屏幕上显示所述合成图像之后，所述显示控制单元仅显示作为所 述合成图像的成分的所述单位图像，并且在仅显示所述单位图像之后，自 动显示取代所述单位图像的所述运动图像。
3. 根据权利要求1所述的显示控制设备，其中，所述合成图像生成单 元通过对以下图像进行合成来生成所述合成图像所述静止图像，以及作为所述运动图像的所述单位图像的、在时间上处于构成所述运动图 像的多个所述单位图像的前端的前端单位图像。
4. 根据权利要求3所述的显示控制设备，其中，所述合成图像生成单 元通过对所述前端单位图像和所述静止图像进行合成以使得所述前端单位 图像在水平方向上的右端部分和左端部分在水平方向上从所述静止图像的 左端和左端伸出，来生成所述合成图像。
5. 根据权利要求4所述的显示控制设备，还包括叠加增强处理单元，该叠加增强处理单元被配置为在所述合成图像中 的所述前端单位图像和所述静止图像之间的边界部分处执行用于强调所述 静止图像在所述前端单位图像上的叠加的叠加增强处理。
6. 根据权利要求5所述的显示控制设备，其中，所述合成图像生成单 元执行生成以下各项中的至少一种通过对以下图像进行合成来生成所述合成图像作为所述运动图像的所述前端单位图像的、用于记录所述运动图 像的运动图像大小的主单位图像，以及作为所述静止图像的、用于记录所述静止图像的静止图像大小的 主静止图像；以及通过对以下图像进行合成来生成所述合成图像作为所述运动图像的所述前端单位图像的、通过从所述运动图像 大小的所述主单位图像中稀疏像素而获得的单位图像縮略图，以及作为所述静止图像的、通过从静止图像大小的所述静止图像中稀 疏像素而获得的静止图像縮略图。
7. —种显示控制方法，包括以下步骤通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动 图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像 被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运 动图像的单位图像的一部分之上；以及显示所述合成图像。
8. —种显示控制程序，用于使得计算机以下步骤通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动 图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像 被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运 动图像的单位图像的一部分之上；以及显示所述合成图像。
全文摘要
本发明提供了显示控制设备、显示控制方法和显示控制程序。一种显示控制设备包括合成图像生成单元，该合成图像生成单元被配置为通过对单位图像和静止图像进行合成来生成合成图像，以使得与运动图像相关联并且具有与运动图像宽高比不同的静止图像宽高比的静止图像被叠加在由多个时间上连续的、具有运动图像宽高比的单位图像形成的运动图像的单位图像的一部分之上；以及显示控制单元，该显示控制单元被配置为在显示单元的显示屏幕上显示该合成图像。
文档编号H04N5/232GK101404724SQ20081016711
公开日2009年4月8日 申请日期2008年9月27日 优先权日2007年10月3日
发明者福山敬 申请人:索尼株式会社