视频内容正向和反向扫描时的图像概要

优选实施例详细说明

图1给出的流程图示明本发明的第一方面。

在步骤105上，从视频源中自动抽取多个关键帧以产生初始的图像概要。

可借助任一种通常的视频抽取方法进行自动抽取，诸如块比较法，亮度差和色度差法，以及应用诸如CCIR-601的普通广播标准创建亮度和色度宏块。

此外，专利申请人在此引入Dimitrova等人的美国专利U.S.Patent 6,137,544，该参考文献作为背景资料以指明一种方法：例如，图像索引系统的创建可通过选择视频关键帧，这是根据DCT(离散余弦变换)系数的计算以及比较在场景检测法中所应用的各种门限值而得到的。此外，专利申请人在此又引入George Marmmaropoulos和John Zimmerman提交的美国专利申请01/023,800以作参考，它基于2000年7月28日提交的美国专利临时申请60/221,404，名称为“Vishalization And playback of Television Shows at a Sub-Show Level”，它公开了分段呈现以及如何使之与播出内容相关联。

帧捕获器可以在不压缩的视频段中实施帧捕获技术，诸如由Intel^Smart Video Recoder III采用的技术。另一种情况，在诸如Motion SPEG和/或MPEG1、2或3之类的压缩视频段中，应用帧解析器可以将信号拆散成各帧。

并且，借助多处理器、计算机、增强VCR、录制/重放装置或是电视机，可实现场景检测。图像索引可以存储入诸如磁盘、文档、磁带、DVD或其他存储媒介之类的存储器内，或者在录像带信源或广播磁带情况下写回到磁带上。

步骤110中，对于表示视频源内特定场景的至少一个特定的关键帧组，在初始的图像概要中对其指配以加权值。例如，对于表示电影中演员John Wayne讲话场景的关键帧可指配一定的预定加权值。然而，对于同一场景中John Wayne投入枪战或是亲吻女主角的随后的关键帧可指配以比最初的关键帧高的加权值，因为随后的关键帧比之最初的关键帧有更好的代表性。完全可能应用多个关键帧来表示视频中的特定场景，因而可以有一个相对的加权系统对用户喜好/不喜好的内容附加加权值，或是根据研究，大多数人们偏爱以什么内容用作关键帧来标识视频中的特定场景，而在加权系统中对各个因素进行预编程。所选定演员的影像也可以应用于关键帧。

步骤115中，借助于过滤掉相对于加权值较高的关键帧来说具有最低加权值的关键帧，可精选初始的图像概要。虽然此方面的加权例子是就视频中的特定场景而言的，但也可能根据用户的偏爱来加权所有关键帧。例如，加权系统可以做到应用时间长度作为基础来标识(并加权)关键帧，比之代表较长时间视频序列的关键帧，对于代表相对较短时间视频序列的关键帧给以不同的或较低的加权值。

然而，本技术领域内的一般熟练人员应该知道，有时节目中的紧要部分(诸如枪械开火)，出现的时间相当短暂，但尽管如此，它是图像概要/索引中的重要部分。

步骤120中，对修正的图像概要的关键帧显示速率进行调节，使之符合于视频源的快进/快倒速度。例如，它可以基于通常录像带倒卷的标准速度(画面在监视器上同时显示)，或者可以考虑能由用户控制的可变的快进/快倒速度。

应当指出，伴随关键帧可以提供音频，该音频可能是节目声轨的一部分，或是由关键帧表示的节目部分的公告(例如，开场独白，特约嘉宾，收场白，结束时的致谢名单等等)。在广告情形下，可以配音入诸如“Philips”之类广告出资方的名字，从而用户可以在视频源快进/快倒时听到该名字。

此外，关键帧替换地可以用捕获特定场景中的运动的、短的图像帧集合取代。例如，如果视频源为体育赛事，棒球运动员击中棒球(就此而言，或是击空)可以代表特定运动员的击球轮次，而以击球手的击中(或是三振出局)结束。类似地，或是从视频本身或是从系统产生的橄榄球比赛中有人突入底线区域而触地得分的影像，可以应用来替代表示橄榄球比赛触地赢分的关键帧。

图2示明按照本发明之方法的另一方面。该例子中，作为关键帧自动抽取的替代，由用户选择关键帧。这种选择可以在录制下广播节目后作出，在录制的同时作出，或者在重放诸如录像带、DVD等视频源时作出选择。

步骤205中，用户从视频源中指定多个图像帧作为关键帧。例如，用户可以在录制节目时或是随后的观看期间作出此种指定。家庭用户可以在录制或者此后编辑家庭录像(home footage)时作出指定。另一种情况，可以由录像带、DVD或是其他类型视频的有商业编辑者作出此种指定，以供销售、出租或下载。在商业设定中，可以有广告或者其他类型的商业消息，公司付钱以期望观众将观看到它们。

此外，此种指定还可以只包含关键帧的一部分，例如，登广告者的产品将会在节目期间的广告段出现。用户可以用它们的号码标识各图像帧，例如，选择图像帧8、16和87来表示节目第一部分的图像概要。

另一种情况下，用户只需点击按钮或指针来选择特定的图像帧。考虑到视频每秒的帧数较多，除非指针仅仅抽取在触动指针的准确时刻显示的图像帧，否则由用户选定的一般序列中会包括多个接连的帧，它们是在点击鼠标或指针的时间段内出现的。另外的情况是，在作出选择时用户可以减慢观看速度，从正常的速度降低至它的几分之一。

步骤210中，用户选择关键帧的显示速率，以便在观看图像索引时使所述关键帧在图像概要中显示预定的时间量。然而，当用户在操作正放/倒卷视频源时，可按照正放/倒卷速度改变显示长度或显示内容。

步骤215中，本步骤中能可选地提供替代的音频部分，例如，当要在几秒钟内掠过一个长段的广告时。例如，代替整支广告，可以只通知产品或服务的录制。另一种情况是，可以用短的广告词替代音频。

步骤220钟，本步骤中能可选地提供替代的画面图像(诸如广告内容为软饮料时替代以汽水瓶的静止画面帧)，或是广告项目为汽车时替代以车辆的标志符号。

图3示明按照本发明在正向和反向扫描时用以创建图像概要的系统的一个实施例。

依据视频源为不压缩或是压缩的，分别地将帧捕获器301或帧解析器302之一初始地用于向主处理器303提供图像帧。主处理器可以是视频编辑器、计算机、视频录放装置的部件等，其中包括：检测加权指配的装置304，它通常为场景检测器；精选装置305，通常对于从检测加权指配装置接收到的图像帧过滤掉冗余/低加权值的帧。显示速率调节装置306根据快进/快倒速度调节图像概要的输出，然后将概要存储于视频源307上，以便快进/快倒视频源时供观看用。可以实施的一种方式是在快进/快倒视频源时在显示的磁轨上录制图像概要。还有其他的方式使熟练技术人员在快进/快倒视频源时能够显示图像概要。

在不背离本发明精神和所附权利要求书范围的前提下，本技术领域内的一般熟练人员对本发明可作出各种修改。例如，帧抽取的类型、图像帧的加权、过滤的方式和显示速率的调节，对它们的功能都能予以修改，但是，此类修改不可偏离本发明的权利要求。