图像处理设备及图像显示方法.pdf

一种图像处理设备包括：输入接收单元，用于接收关于输入图像的操作输入；时序区间生成单元，用于接收指定包括指定人物面部的帧出现在输入图像中的时序区间的信息和指定时序区间代表帧的信息，并用于基于该信息描绘时序区间的显示和代表帧；以及图像控制单元，用于根据操作输入使时序区间生成单元描绘时序区间的显示。

1.  一种图像处理设备，包括：
输入接收装置，用于接收关于输入图像的操作输入；
时序区间生成装置，用于接收指定时序区间的信息和指定所述时序区间的代表帧的信息，以及用于基于所述信息描绘所述时序区间的显示和所述代表帧，其中，所述时序区间是所述输入图像中出现包括指定人物面部的帧的时序区间；以及
图像控制装置，用于根据所述操作输入使所述时序区间生成装置描绘所述时序区间的显示。

2.  根据权利要求1所述的图像处理设备，
其中，所述时序区间生成装置还接收识别所述人物面部的信息，并且在描绘所述时序区间的显示同时描绘所述信息。

3.  根据权利要求1所述的图像处理设备，
其中，如果所述输入图像包括多个人物的面部，则所述时序区间生成装置对所述多个人物的面部中的每一个描绘所述时序区间的显示。

4.  根据权利要求1所述的图像处理设备，
其中，如果在所述操作输入中选择了所述时序区间的再生处理，则所述图像控制装置再生对应于所选时序区间的所述输入图像。

5.  根据权利要求1所述的图像处理设备，
其中，如果在所述操作输入中选择了所述时序区间新的生成处理，则所述图像控制装置基于与所选时序区间相对应的所述输入图像生成新图像。

6.  一种图像处理设备，包括：
输入接收装置，用于接收关于输入图像的操作输入；
时序区间生成装置，用于接收指定时序区间的信息和指定所述时序区间的代表帧的信息，以及用于基于所述信息描绘所述时序区间在时间轴方向上的显示和所述代表帧，其中，所述时序区间是所述输入图像中出现包括指定人物面部的帧的时序区间；以及
图像控制装置，用于根据所述操作输入使所述时序区间生成装置描绘所述时序区间的显示。

7.  根据权利要求6所述的图像处理设备，
其中，如果所述输入图像包括多个人物的面部，则所述时序区间生成装置对所述人物中的每一个描绘所述时序区间的显示，使得所述多个人物的面部被置于垂直于所述时间轴方向的方向上。

8.  一种图像显示方法，包括以下步骤：
接收指定时序区间的信息和指定所述时序区间的代表帧的信息，其中，所述时序区间是输入图像中出现包括指定人物面部的帧的时序区间；
基于指定所述时序区间的所述信息，在所述输入图像的时间轴上的相应位置处描绘所述时序区间；以及
基于指定所述代表帧的所述信息获得所述代表帧，并且在描绘所述时序区间的同时描绘所述代表帧。

9.  一种使计算机执行以下步骤的程序：
接收指定时序区间的信息和指定所述时序区间的代表帧的信息，其中，所述时序区间是输入图像中出现包括指定人物面部的帧的时序区间；
基于指定所述时序区间的所述信息，在所述输入图像的时间轴上的相应位置处描述所述时序区间；以及
基于指定所述代表帧的所述信息获得所述代表帧，并且在描绘所述时序区间的同时描绘所述代表帧。

10.  一种图像处理设备，包括：
输入接收单元，被配置为接收关于输入图像的操作输入；
时序区间生成单元，被配置为接收指定时序区间的信息和指定所述时序区间的代表帧的信息，以及用于基于所述信息描绘所述时序区间的显示和所述代表帧，其中，所述时序区间是所述输入图像中出现包括指定人物面部的帧的时序区间；以及
图像控制单元，被配置为根据所述操作输入使所述时序区间生成单元描绘所述时序区间的显示。

11.  一种图像处理设备，包括：
输入接收单元，被配置为接收关于输入图像的操作输入；
时序区间生成单元，被配置为接收指定时序区间的信息和指定所述时序区间的代表帧的信息，以及用于基于所述信息描绘所述时序区间在时间轴方向上的显示和所述代表帧，其中，所述时序区间是所述输入图像中出现包括指定人物面部的帧的时序区间；以及
图像控制单元，用于根据所述操作输入使所述时序区间生成单元描绘所述时序区间的显示。

图像处理设备及图像显示方法
相关申请的交叉参考
本发明包含于2006年4月4日向日本专利局提交的日本专利申请JP 2006-103125的主题，其全部内容结合于此作为参考。
技术领域
本发明涉及一种图像处理设备，具体地，涉及一种处理包括指定人物面部的图像的图像处理设备，用于该设备的处理方法，以及使计算机执行该方法的程序。
背景技术
通常，当用户想要再生或编辑运动图像的时序帧时，用户浏览所有帧并选择期望的场景。这是一种直接方法，但因为掌握各个场景的技巧因人而异，所以其未必有效。
另一方面，已提出了一种运动图像记录和再生设备，其从运动图像中检测面部并采用所检测面部的估计值是最大值的帧作为代表帧，使得用户可以掌握运动图像的内容(例如，参见专利文件1：日本未审查专利申请公开第2000-350124号(图1))。
发明内容
在上述的已知技术中，计算在预定时间间隔内估计值的最大值，从而选出每个区间(section)中的代表帧。然而，在这种方法中，时间间隔是固定的，并且选取的代表帧可能与用户所期望的不同。此外，为了精确地确定代表帧，计算估计值最大值的时间间隔必需很短。因此，代表帧的数量变得极大，这造成了不便。
因而，本发明旨在显示所检测人物面部的列表，使得用户可以看到所有时序帧。
根据本发明实施例的图像处理设备包括：输入接收装置，用于接收关于输入图像的操作输入；时序区间生成装置，用于接收指定时序区间的信息和指定时序区间代表帧的信息，以及用于基于该信息描绘时序区间的显示和代表帧，其中，该时序区间是输入图像中出现包括指定人物面部的帧的时序区间；以及图像控制装置，用于根据操作输入使时序区间生成装置描绘出时序区间的显示。通过这种配置，可根据时间推移来显示在图像中出现的人物面部。
时序区间生成装置还可接收识别人物面部的信息，并在描绘时序区间显示的同时描绘该信息。从而，可以识别在图像中出现的人物面部。
如果输入图像包括多个人物的面部，则时序区间生成装置可以对多个人物面部中的每一个描绘时序区间的显示。从而，可以显示每个人物出现在图像中的时间推移。
如果在操作输入中选择了时序区间的再生处理，则图像控制装置可再生对应于选取时序区间的输入图像。从而，可通过参考人物面部来再生图像。
如果在操作输入中选择了时序区间新的生成处理，则图像控制装置可基于对应于选取时序区间的输入图像生成新图像。从而，可通过组合参考人物面部所选取的帧来生成新图像。
根据本发明另一实施例的图像处理设备包括：输入接收装置，用于接收关于输入图像的操作输入；时序区间生成装置，用于接收指定时序区间的信息和指定时序区间代表帧的信息，以及用于基于该信息来描绘时间轴方向上时序区间的显示和代表帧，其中，该时序区间是输入图像中出现包括指定人物面部的帧的时序区间；以及图像控制装置，用于根据操作输入使时序区间生成装置描绘时序区间的显示。通过这种配置，可以根据时间推移沿时间轴显示在图像中出现的人物面部。
如果输入图像包括多个人物面部，则时序区间生成装置可对每个人物描绘时序区间显示，使得多个人物的面部被设置到与时间轴方向垂直的方向上。
根据本发明的另一实施例，提供了一种包括以下步骤的图像显示方法或使计算机执行以下步骤的程序。该步骤包括：接收指定时序区间的信息和指定时序区间代表帧的信息，其中，该时序区间是输入图像中出现包括指定人物面部的帧的时序区间；基于指定时序区间的信息在输入图像的时间轴上的相应位置处描绘时序区间；以及基于指定代表帧的信息来获得代表帧，并且在描绘时序区间的同时描绘代表帧。从而，可根据时间推移显示在图像中出现的人物面部。
根据本发明的实施例，可以获得显示从时序帧中检测的人物面部列表的极好效果。
附图说明
图1示出了根据本发明实施例的图像处理设备300的配置实例；
图2示出了根据本发明实施例的面部信息表400的构造实例；
图3示出了根据本发明实施例的图像处理设备中的显示实例；
图4示出了根据本发明实施例的图像处理设备中的另一显示实例；
图5示出了由根据本发明实施例的图像处理设备执行的编辑处理的显示实例；
图6A和6B示出了由根据本发明实施例的图像处理设备执行的编辑处理实例；
图7示出了由根据本发明实施例的图像处理设备执行的调整时序区间的过程实例；
图8示出了由根据本发明实施例的图像处理设备执行的静止图像的显示实例；
图9A、9B、9C、和9D示出了作为根据本发明实施例的图像处理设备实例的成像设备100a和100b的外观；
图10示出了作为根据本发明实施例的图像处理设备实例的成像设备100的配置；
图11示出了由根据本发明实施例的图像处理设备执行的显示修改；
图12示出了由根据本发明实施例的图像处理设备执行的全部处理；
图13示出了由根据本发明实施例的图像处理设备执行的时序区间的操作过程；
图14示出了由根据本发明实施例的图像处理设备执行的拖动过程；以及
图15示出了由根据本发明实施例的图像处理设备执行的定点操作过程。
具体实施方式
下文中，参照附图详细描述了本发明的实施例。
图1示出了根据本发明实施例的图像处理设备300的配置实例。图像处理设备300从图像文件200中获得图像的时序帧，并使显示单元305显示图像或使图像存储单元309存储图像。此外，基于由面部信息生成单元301生成的面部信息，图像处理设备300显示包括指定人物面部的帧出现在图像文件200中的时序区间。
图像文件200是用于保存图像(主要是运动图像)时序帧的文件。然而，与运动图像一起拍摄的静止图像也可保存在其中。在该实例中，假定输入至图像处理设备300的图像是由图像文件200提供的图像。可选地，也可实时地使用通过成像设备拍摄的图像。此外，可以使用通过广播接收装置所接收的图像。即，可将曾经存储在文件中的图像用作输入图像。另外，也可将图像流用作输入图像。
面部信息生成单元301检测由图像文件200提供的输入图像中的指定人物的面部，并生成面部信息，该信息指定了包括面部的帧出现的时序区间。面部信息生成单元301考虑从输入图像的各个帧中检测到的面部之间的相似性和时间连续性，并对各个帧的面部进行分组。在属于一组的帧中，时间最早的帧对应于该区间的时间开始位置，而时间最晚的帧对应于该区间的时间结束位置。开始和结束位置之间的区域对应于包括人物的时序区间。例如，作为时序区间的单位，使用时间或帧数。当采用MPEG(运动图像专家组)方法作为编码方法时，可使用GOP(图像组)数作为时序区间的单位。
此外，面部信息生成单元301提供在检测到指定人物面部的时序区间中指定代表帧(例如，缩略图)的信息。面部信息生成单元301可将组内面部帧中时间最早的面部帧设置为区间的代表帧。可选地，可将具有组中最大估计值的面部帧设置为代表帧。指定代表帧的信息可以是从图像文件200中获得的静止图像，或者可以是表示图像文件200中位置的地址。
此外，面部信息生成单元301提供用于识别在输入图像中检测到的面部的信息，该信息包括面部标签。面部标签可以是作为内部码的标识符，或者名称等可以以字符串的形式保存。
显示单元305显示图像文件200中的包括指定人物面部出现的帧的时序区间和其内容，并通过LCD(液晶显示器)等来实现。
图像存储单元309存储由图像处理设备300编辑的图像。例如，可以使用诸如闪存的外部记录介质。
图像处理设备300包括时序区间生成单元320、图像控制单元330、以及输入接收单元340。时序区间生成单元320接收来自面部信息生成单元301的面部信息，并且描绘包括指定人物面部的帧出现的时序区间。此外，时序区间生成单元320描绘时序区间中的代表帧。输入接收单元340接收来自用户的关于输入图像的操作输入，并通过鼠标或触摸面板来实现。图像控制单元330根据操作输入使时序区间生成单元320描绘时序区间。此外，图像控制单元330根据操作输入从图像文件200中获得图像，并使显示单元305显示图像或使图像存储单元309存储图像。
时序区间生成单元320可使面部信息表400保存从面部信息生成单元301接收的面部信息。可通过由输入接收单元340接收的操作输入来改变保存在面部信息表400中的面部信息。
图2示出了根据本发明实施例的面部信息表400的构造实例。面部信息表400包括下列项：面部标签410；开始时间420；结束时间430；以及代表帧440。面部标签410用于识别包括在输入图像中的人物面部。如上所述，各个面部标签可以是作为内部码的标识符，或者名称可以字符串的形式保存。
开始时间420是由面部标签410识别的面部开始出现的时间。结束时间430是由面部标签410识别的面部结束出现的时间。开始时间420和结束时间430可以是输入图像开头的相对时间，或者可以是实际的绝对时间。当采用相对时间时，可通过帧数或GOP数表示时间。在这种情况中，帧数被用作时间单位。
代表帧440指定通过面部标签410识别的面部的代表帧，并且可以是代表帧本身或是表示图像文件200中位置的地址。
图3示出了在根据本发明实施例的图像处理设备中的显示实例。在该显示实例中，水平设置时间轴，使得时间从左到右推进。在时间轴下方，在垂直方向上设置各个人物的时序区间。
在时间轴方向上显示表示各个时间的时间标签511。在其下方显示表示输入图像总长度的条513。例如，输入图像可以是一段运动图像。当输入图像被再生时，在时间轴上的相应位置处显示当前再生位置512。
在条513下方，示出了对应于各个人物(两个人物)的面部标签520的时序区间条541和542。在时序区间条541和542附近分别显示相应的代表帧531和532。代表帧531和532中的每一个均显示了人物面部。通过参考与其对应的时序区间条541和542，用户可第一眼就掌握各个人物出现的区间。
图4示出了在根据本发明实施例的图像处理装置中的另一显示实例。在该显示实例中，如果同一个人出现了多次，则其时序区间条被显示在垂直方向上的同一水平高度中。
在该实例中，时序区间条543和代表帧533被显示在关于面部A的时序区间条541和代表帧531的右侧。即，时序区间条543和代表帧533被显示在与时序区间条541和代表帧531相同的垂直方向上的水平高度处。从而，用户可第一眼就掌握面部A出现了多次。
图5示出了在根据本发明实施例的图像处理设备中编辑处理的显示实例。在该实例中，在上部设置编辑输入区550。如果通过拖动操作将代表帧放置到编辑输入区550中，则在对应时序区间中的帧被记录为待编辑。在该实施例中，代表帧531已经被记录为将编辑的对象551，并且代表帧532即将被记录为将编辑的对象552。
在记录之后，如果按了影片生成按钮559，则组合将编辑的帧，从而生成新图像。在该实施例中，将对应于代表帧531的时序区间中的帧和对应于代表帧532的时序区间中的帧组合为存储在图像存储单元309中的新图像。
仅当连接了诸如闪存的外部记录介质时才可以显示影片生成按钮559。
图6A和6B示出了在根据本发明实施例在图像处理设备中执行的编辑处理的实例。图6A示出了记录为将编辑的对象的时序区间彼此不重叠的实例。在这种情况下，连接时序区间条541和542，以生成新图像564。在图像564中，以时序来显示时序区间条纹541中的帧，然后显示时序区间条542中的帧。然而，可以任意指定帧的显示顺序。例如，可以放置到编辑输入区550中的顺序来显示帧。
图6B示出了记录为将编辑的时序区间彼此重叠的情况。在这种情况下，重叠部分不被显示为重叠帧，但是基于时序区间条541和542时间轴上的总集合来生成新图像565。在这种情况下，如果顺序以时序为基础，则从图像565的开头开始显示帧。在另一方面，如果以被放置到编辑输入区550中的顺序来显示帧，例如，如果将对应于时序区间条542的帧放置到编辑输入区550中，然后将对应于时序区间条541的帧放置到编辑输入区550中，则首先显示对应于时序区间条542的帧，然后显示对应于时序区间条541的帧中未显示的帧。
图7示出了在根据本发明实施例的图像处理设备中执行的调整时序区间的处理实例。当在时间轴上显示时序区间时，用户可以改变其时间长度。
例如，如果用户想要改变对应于代表帧531的时序区间条541的结束位置，则用户将光标移动至时序区间条541的右端，使得光标变为改变指针(changing pointer)561，并且可以接收改变输入。当输入接收单元340通过鼠标等接收改变输入时，根据输入重新描绘时序区间条541的结束位置，并重置面部信息表400中的结束时间430。
也可以相同操作改变时序区间条541的开始时间。从而，可以通过简单操作来编辑图像。
图8示出了在根据本发明实施例的图像处理设备中的静止图像的显示实例。上述显示实例基于通过面部信息生成单元301提取的图像为运动图像的假设。然而，本发明不限于运动图像。例如，假设通过成像设备在拍摄运动图像的同时拍摄静止图像，则该静止图像可被认为是其开始时间和结束时间一致的图像。
在本发明的该实施例中，如图8所示，通过与运动图像相同的界面来显示静止图像的时序区间条535。从而，可以一起显示运动图像和静止图像。
图9A至图9D示出了作为根据本发明实施例的图像处理设备实例的成像设备100a和100b的外观。成像设备100a主要拍摄静止图像，而成像设备100b主要拍摄运动图像。
图9A是成像设备100a的前视图。成像设备100a通过透镜单元110a拍摄目标图像。一旦按下快门单元120a，成像设备100a就生成静止图像。图9B是成像设备100a的后视图。在显示单元130a上显示通过透镜单元110a拍摄的目标的运动。此外，生成的静止图像也显示在显示单元130a上。
图9C是成像设备100b的前视图。成像设备100b通过透镜单元110b拍摄目标图像。一旦按下记录按钮(未示出)，成像设备100b就生成运动图像。图9D是成像设备100b的后视图。在显示单元130b上显示通过镜头单元110b拍摄的目标的运动。此外，在显示单元130b上显示生成的运动图像。另外，成像设备100b具有在生成运动图像的同时生成静止图像或单独生成静止图像的功能。生成的静止图像也显示在显示单元130b上。
图10示出了作为根据本发明实施例的图像处理设备实例的成像设备100的配置。成像设备100包括成像单元10、记录/再生单元20、控制单元30、总线40、键入单元50、触摸面板单元60、以及存储装置70。
成像单元10包括成像器件单元11、成像控制单元12、以及图像处理单元13。成像器件单元11包括用于拍摄目标图像的透镜组(对应于图9A和9C中所示的透镜单元110a和110b)、光圈调节机构、焦距调节机构、以及诸如CCD(电荷耦合器件)的成像器件。通过透镜组拍摄的图像被聚焦在诸如CCD的成像器件的成像表面上。成像器件单元11根据快门操作接收由控制单元30通过总线40提供的图像拍摄定时信号，将聚焦在成像器件成像表面上的目标图像转换为成像信号，并将成像信号提供给图像处理单元13。
成像控制单元12接收由控制单元30通过总线40提供的控制信号，并生成将提供给成像器件单元11的控制信号。此外，成像控制单元12将生成的控制信号提供给成像器件单元11，以执行变焦控制、快门控制、以及曝光控制。
图像处理单元13基于由控制单元30通过总线40提供的控制信号对成像信号执行伽马校正或AGC(自动增益控制)，并将成像信号转换为数字图像信号。
记录/再生单元20包括图像编码器/解码器21、记录控制单元22、以及SDRAM(同步动态随机存取存储器)23。图像编码器/解码器21具有对由成像单元10通过总线40提供的图像信号进行编码和多路复用以将图像信号转换为压缩数据的编码功能。此外，图像编码器/解码器21具有解码压缩数据以生成图像信号的解码功能。
记录控制单元22接收来自图像编码器/解码器21的压缩数据，并将压缩数据写入存储装置70。此外，记录控制单元22从存储装置70读取压缩数据，并将压缩数据提供给图像编码器/解码器21。存储装置70可附加到成像设备100，或者可包括在成像设备100中。存储装置70的实例包括存储卡(封装在卡中的闪存)、磁盘(例如，硬盘)、光盘(例如，DVD(数字通用盘))、以及磁光(MO)盘，但是也可以使用其他类型的装置。SDRAM 23被用作由图像编码器/解码器21执行的编码或解码处理的工作区。
控制单元30包括系统控制单元31、输入控制单元32、显示控制单元33、输出图像处理单元34、外部设备控制单元35、以及网络控制单元36。
系统控制单元31控制控制单元30的所有处理。连接至输入控制单元32的键入单元50设置有多个键，例如，在拍摄模式和另一种模式(例如，再生模式)之间切换的模式切换键、变焦调节键、曝光调节键、快门键(对应于图9A中所示的快门单元120a)、以及运动图像拍摄键。连接至输入控制单元32的触摸面板输入单元62接收在显示单元61中显示的菜单选择和图像数据预定区域的说明。
输入控制单元32将来自键入单元50或触摸面板输入单元62的操作信号传送到系统控制单元31。系统控制单元31确定操作了键入单元50或触摸面板输入单元62中的哪个键，并根据确定结果执行控制。
连接至显示控制单元33的显示单元61包括LCD(液晶显示器)等，并且在系统控制单元31的控制下显示由成像单元10通过总线40提供的图像信号和从存储装置70读取的图像信号。显示单元61对应于图9B和9D中所示的显示单元130a和130b。
在图像数据再生期间，输出图像处理单元34对图像数据执行预定的修改处理。例如，修改处理包括图像数据的颜色校正。可选地，可在系统控制单元31中执行在输出图像处理单元34中对图像数据执行的处理。
连接至外部设备控制单元35的外部设备80可以是个人计算机，但也可以使用另一设备。外部设备80可以通过USB(通用串行总线)电缆连接至外部设备控制单元35，但也可以使用其他连接方法。外部设备控制单元35控制成像设备100和外部设备80之间的数据通信。
网络控制单元36控制成像设备100和网络90之间的数据通信。网络包括互联网或LAN(局域网)，但也可以使用其他类型的网络。
在该成像设备100中，考虑到显示单元61的显示区域，如图3所示的时序区间的显示不一定合适。下文中，描述了用于以更简单的方式来显示时序区间的变更例。
图11示出了在根据本发明实施例的图像处理设备中的显示变更例。在该显示实例中，时序区间显示单元670设置在右侧。在时序区间显示单元670中，显示了每个人物的代表帧671和关于该人物的信息672。
信息672包括面部标签、开始时间、结束时间、以及时间长度。代表帧671、面部标签、开始时间、以及结束时间可以从面部信息表400中的代表帧440、面部标签410、开始时间420、以及结束时间430中获得。可基于结束时间和开始时间之差来获得时间长度。
这里，帧数被用作时间单位。可选地，可显示等效时间，并且也可以使用GOP数。
滚动条673显示在时序区间显示单元670的右侧边缘处。通过操作滚动条673，用户可以显示与显示区域外人物相对应的时序区间。
在时序区间显示单元670的左侧，图像显示单元610设置在上面，操作按钮设置在下面。操作按钮包括再生位置条620、再生按钮631、停止按钮632、再生时间显示633、面部提取开始按钮640、时间线显示按钮650、以及影片生成按钮660。
再生位置条620表示图像当前再生帧的位置。用户可通过操作再生位置条620跳到期望位置。再生按钮631用于再生和显示图像。一旦用户按下再生按钮631，就在图像显示单元610中显示再生的帧。停止按钮632用于停止再生和显示操作。一旦用户按下停止按钮632，则停止在显示单元610中的显示。
可通过按下再生按钮631来再生整个图像，但是只可以再生对应于在时序区间显示单元670中所选区间的帧。可选地，在通过双击进行选择之后，可直接再生时序区间显示单元670中的区间。
再生时间显示633显示对应于当前在图像显示单元610中再生的帧的时间。这里，帧数被用作时间单位。可选地，可显示等效时间，并且也可以使用GOP数。
面部提取开始按钮640用于从原始图像中提取对应于时序区间显示单元670的信息。时间线显示按钮650用于显示上面参照图3描述的二维时序区间。影片生成按钮660与影片生成按钮559相同，并用于重新生成包括与在时序区间显示单元670中所选区间相对应的帧的图像。
现在，参照附图描述根据本发明实施例的图像处理设备的操作。
图12示出了在根据本发明实施例的图像处理设备中执行的整个处理。首先，通过输入接收单元340接收请求显示时序区间的操作输入(步骤S901)，然后将面部信息从面部信息生成单元301输入到时序区间生成单元320(步骤S902)。
时序区间生成单元320通过使用如图3所示在时间轴方向上表示帧区间的时序区间条541和如图11所示的文字信息672来描绘时序区间(步骤S903)。此外，时序区间生成单元320在描绘时序区间的同时也描绘代表帧531和671(步骤S904)。在显示单元305中显示描绘的结果。从而，用户可以执行用于时序区间显示的操作输入(步骤S910)。
图13示出了在根据本发明实施例的图像处理设备中操作时序区间的过程。通过应用图5中所示的显示实例来进行以下描述。然而，根据与图11所示实例一致的过程，在其修改中可以执行同样的处理。
输入接收单元340等待关于时序区间的操作输入，并且如果拖动操作开始(步骤S912)，则执行拖动(步骤S920)，如果定点(pointing)操作开始(步骤S913)，则执行定点(步骤S930)，以及如果执行了改变时序区间范围(参见图7)的操作(步骤S914)，则执行范围改变操作(步骤S940)。重复这些操作，直到通过输入接收单元340接收到来自用户的结束请求(步骤S919)。
图14示出了在根据本发明实施例的图像处理设备中执行的拖动(步骤S920)过程。当通过鼠标等拖动代表帧531或532时，开始拖动。
在通过输入接收单元340接收拖动操作期间，图像控制单元330获得拖动位置(步骤S921)，并且描绘拖动图像(步骤S922)。在显示单元305中显示描绘的图像。重复该操作，直到拖动操作结束(步骤S923)。
如果拖动操作在编辑输入区550中的位置处结束(步骤S924)，则图像控制单元330描绘在编辑输入区550中的拖动的代表帧(步骤S925)。在显示单元305中显示描绘的帧。因而，记录将编辑的相应时序区间。
图15示出了在根据本发明实施例的图像处理设备中定点操作(步骤S930)的过程。例如，该定点操作在点击鼠标时开始。
在输入接收单元340接收定点操作之后，图像控制单元330获得定点位置(步骤S931)。如果定点位置在图3所示的代表帧531或时序区间条541中(步骤S932)，则图像控制单元330基于由面部信息生成单元301提供的面部信息来获得时序区间的开始时间和结束时间(步骤S933)。然后，图像控制单元330再生对应于获得的开始时间到结束时间的图像文件200中的区间的帧(步骤S934)。在显示单元305中显示再生的帧。
如上所述，根据本发明的实施例，时序区间生成单元320基于又面部信息生成单元301提供的面部信息描绘时序区间，并使显示单元305显示时序区间。从而，可以显示检测的人物面部的列表，使得用户可以看到排列在时序中的所有帧。
本发明的上述实施例是实现本发明的实例，并且与以下权利要求中的具体元件相对应。然而，本发明不限于该实施例，在不背离本发明范围的情况下，可以进行各种修改。
即，输入接收装置对应于输入接收单元340。时序区间生成装置对应于时序区间生成单元320。图像控制装置对应于图像控制单元330。
接收指定包括指定人物面部的帧出现在输入图像中的时序区间的信息和指定时序区间代表帧的信息对应于步骤S902。基于指定时序区间的信息来描绘输入图像时间轴上的相应位置中的时序区间对应于步骤S903。基于指定代表帧的信息来获得代表帧以及在描绘时序区间同时描绘代表帧对应于步骤S904。
本发明实施例中描述的处理过程可以被认为是包括一系列步骤的方法，或者是使计算机执行这一系列步骤的程序以及存储该程序的记录介质。
本领域技术人员应当理解，在所附权利要求及其等同物的范围之内，根据设计要求和其他因素，可以对本发明做出各种修改、组合、再组合和变更。