开放式API数字录像机及其制造和使用方法

技术领域

本发明针对应用软件，尤其涉及开放式API(open-API)数字录像机及其制造和使用方法。

本发明根据USC 35 119(e)要求于2007年7月13日提交的题为OPEN API DIGITAL VIDEO RECORDER AND METHOD OFMAKING AND USING SAME的美国专利申请No.60/959,395的优先权，其发明人为Chad Steelberg和Ryan Steelberg，其全部内容在此引入以供参考。

发明内容

公开了一种数字录像机。该数字录像机包括至少一个存储器装置、用于接收至少一个节目播放(program play)的多个通信接入点、与所述至少一个存储器装置相关联的开放式应用编程接口、以及与所述开放式应用编程接口通信的至少一个关联引擎。与所述开放式应用编程接口相对应的所述多个应用允许用户操纵与所述节目播放中的节目播放相关联的元数据且所述元数据涉及与所述节目播放中的节目播放的详细方面的帧间交互性。所述至少一个关联引擎把至少所述节目播放的帧间之间的关联提供给所述节目播放中的其它节目播放的帧间中的帧间以及把所述节目播放的帧间的帧间交互性之间的关联提供给与所述节目播放中的其它节目播放的帧间中的其它帧间的帧间交互性。

附图说明

在下文将结合以下附图来描述本发明，在附图中同样的标号表示同样的项，并且在附图中：

图1是图示其中具有至少一个电视机的家庭的框图，所述至少一个电视机具有与之相关联的至少一个数字录像单元；

图2图示了将作为节目播放被显示给用户的视频；以及

图3是图示与消息总线相交互且并且具有与之相关联的核心应用的一定应用和/或过滤器的示例，且可以以类似于感兴趣的基础视频的方式由元标签包围。

具体实施方式

应当理解的是本发明的附图和说明已被简化成图示为清楚地理解本发明而相关的元素，而出于简明目的删除了存在于典型交互式和应用编程接口(application programming interface，API)系统和方法中的许多其它元素。本领域普通技术人员将认识到其它元素是希望和/或需要的以便实现本发明。然而，由于此类元素在本领域中众所周知，并且由于它们不便利于对本发明的较佳理解，所以在本文不提供对此类元素的讨论。

图1是图示在其中具有至少一个电视机的家庭的框图，所述至少一个电视机具有与之相关联的至少一个数字录像单元(在下文中为“DVR”)。如本文所定义的，DVR优选包括诸如硬驱动器、RAM、闪速存储器等之类的至少一个存储器单元、至少一个通信接入点、读取经由所述通信接入点之一接收到的元数据的能力、以及写入与用户使用DVR有关的元数据的能力。此类通信接入点可以包括例如卫星通信、同轴电缆通信、WiFi通信、WiMax通信(诸如斯普林特/纳克斯泰尔(Sprint/Nextel)，级(Tier)1，和科维(Clearwire)，级(Tier)3)、其它无线LAN(局域网)通信、电话或DSL通信、T-111或以太网通信等中的一个或多个。此外，DVR优选包括具有与之相关联的至少一个应用程序接口(application program interface，API)的操作环境。所述至少一个API允许程序员编写与该操作环境一致的应用。如对于本领域普通技术人员来说显而易见的是，API优选包括一套例程、协议、和/或工具以允许程序员创建与该操作环境一致的软件应用。与API一致的程序可以响应于或作为对操作环境的命令而通过一个或多个通信接入点被DVR推(push)或拉(pull)。

本发明的DVR因此可以具有可对其进行访问的多种通信媒体类型，包括但不限于有线电视频道、卫星电视频道、万维网、电子邮件能力、数据(包括视频和音频)库等等，其中每种通信媒体类型可以形成用于创建“节目播放”的基础，在所述“节目播放”中，一个或多个节目(音频或视频)被呈现给用户。在现有实施例中，通过DVR播放的电视节目具有与之相关联的有限量的元数据，其仅仅指示“主题(thematic)”，主要是电视节目的外剪辑(outerclip)方面，诸如节目播放的时间、节目播放的长度、节目播放的标题、节目播放的描述和与节目播放的节目相关联的重要男演员或女演员。在现有技术中，随后使得与通过各通信接入点中的一个或多个接收到的、与节目播放相关联的有限元数据可用于用户仅相对于所述主题元数据与之相关联的节目播放的那些方面进行的有限操纵。由于现有技术DVR技术的API是关闭的，所以程序员普遍地没有机会更好地使用任何相应节目播放中的信息。

本发明经由开放式API DVR提供由DVR通过在上文中提及的多个通信接入点类型中的任何对节目播放或应用的可访问性以及播放如上文所提及的任何通信媒体类型的节目播放。同样地，程序员可以编写无数的应用以便在任何种类的通信媒体上或中操作，或者通过几乎任何通信接入点类型进行操作，并且此类应用可以在任何上述通信接入点上被推、拉或访问。此外，此类应用可以允许针对众多交互性类型进行推或拉，所述众多交互性类型例如包括服务器交互性、对等交互性(包括点到点共享)、以及节目播放馈送交互性。此类交互性可以是经由暴露应用钩子(exposed application hook)对上述元数据的访问。

为本发明的开放式API编写的此类应用例如可以通过经由与任何给定通信媒体上的节目播放的每一和每个方面相关联的应用元数据进行暴露(expose)来提供改进的交互性。例如，元数据可以与任何给定节目播放中所说的每个词语、所发出的声音、和所示出的画面相关联，所述给定节目播放诸如电视或广播节目，以及同样地，程序员可以经由不仅仅包括在节目播放内或直接与之相关联的，而且与跟节目播放相关联的元数据相关联的开放式API信息进行暴露。在下文中相对于图2和3来进一步讨论本发明中所采用的元数据。可以使得用户例如可以经由节目播放覆盖(overlay)形式的应用软件来访问元数据，在该应用软件中，考虑到用户，覆盖用户界面目前被放置在该节目播放的最前部，在紧接着的上文的示例中该节目播放是电视节目。此类覆盖例如可以采取提供链接、下拉菜单、窗口、或其它易访问用户界面的形式的覆盖。此外，对于本领域普通技术人员来说显而易见的是可以编写应用，该应用同时向单个用户提供多个窗口、菜单等等，其中，每个窗口通过电视界面播放并提供不同的节目播放，并因此向用户提供不同的覆盖，从而提供已知的“画中画”节目播放的增强版。

如上文所提及，与特定通信媒体的特定节目播放相关联的元数据可以允许“钩子”对节目播放的任何方面的可访问性，包括但不限于外部可访问媒体，诸如相同演员主演的其它节目播放、相同音乐家表演的其它节目播放、与在节目播放中所图示的货物有关的广告、针对在节目播放中所图示的货物的购买点、外部信息、诸如关于在节目播放中所图示的物品的万维网(www或Web)信息等等。此类外部信息可以经由节目播放上的覆盖的各方面的用户激活来访问，或者节目播放本身或者覆盖的一定方面的访问可以将用户引导至节目播放外面的菜单、窗口等等，或者可以从此类菜单、窗口等访问期望的信息。

在本发明的示例性实施例中，开放式API DVR可以允许在诸如“古董路演(The Antiques Roadshow)”之类的特定电视表演上放置具有覆盖的应用，且用户从而可以经由该覆盖来访问与在该表演中所图示的那些物品类似的上可获得的物品。可替换地，不是将覆盖放置在由DVR经由通信接入点电缆或卫星接收的古董路演(通信媒体电视的节目播放)上，而是分支机构或第三方程序员可以创建用于由DVR通过不同的通信接入点接收的唯一频道，该频道显示与货物的买主频繁感兴趣的物品有关的静止照片、视频、音频等等，且可以将覆盖放置在其上面以便诸如通过在由覆盖的各方面的用户激活时使用户移动到万维网来允许用户访问关于购买的接入点或者那些货物的进一步信息。同样地，可以创建其自己的唯一通信媒体频道以供通过电视显示，并且可以经由WiMax等将用于通信的此新频道发送到DVR，以及同样地，可以创建新的“电视频道”以便经由目前电视一般不使用的通信接入点来访问。

在附加示例性实施例中，用户可能正在观看高度时尚有关的节目播放，诸如在ABC上的绝望主妇(Desperate Housewives)，在其中不同的时尚和/或配饰非常流行。如果将与该节目播放相关联的所有此类信息加元标签，则用户可以访问关于穿戴的时尚、或者使用的配饰的信息，并且此类信息可以包括对其它外部信息的可访问性，诸如来自时尚编辑的评论、感兴趣的物品的可用购买点、以及允许购买那些感兴趣物品的外部支付站点。

在附加示例性实施例中，用户可以向被经由开放式API拉到DVR的应用输入用户的梦幻体育(fantasy sports)运动员的列表。本发明可以使得该用户可获得列出那些梦幻体育运动员的菜单，和可以实时地经由任何通信接入点在任何通信媒体上观看、记录、或自动记录那些梦幻体育运动员的位置。另外，一定运动员可能被突出显示，诸如当特定运动员的球队占有球时，以便用户可以在通信媒体或通信接入点之间进行切换以便以目标方式允许该用户观看、记录、或自动记录该用户的运动员。相对于本示例性实施例，另外且可替换地，应用可以允许用户打开多个窗口以实时地观看多个该用户的运动员，且可以在每个窗口中保持覆盖，或者可以在单独的窗口中显示梦幻运动员的菜单，或者可以允许用户在菜单与正在播放的比赛的视频或音频之间转换。

因此，例如，用户可以选择DVR所进行的一定动作将触发什么事件，诸如自动记录一定事件，诸如每次足球跑卫进入梦幻足球菜单界面对触地进行记分。同样地，用户可以创建他或她最喜欢或最常访问的元标签，并且可以将该元标签放置在所有内容上和所有内容的用户访问上。

在广义上，这些示例性实施例图示了经由开放式API被拉或推到DVR的一个或多个应用可以允许用户实时地评估和/或观看、或自动记录任何节目播放内部或外部的感兴趣的多个节目、节目的各部分、片断、广告等等(诸如经由依照唯一应用而生成的可选工具条)，同时使用用感兴趣的多个覆盖呈现、用感兴趣的多个菜单呈现的感兴趣的多个窗口，其全部都可以允许用户经由电视节目播放来访问当前用户不可获得的多片信息或外部信息。又例如，如上文所讨论的那样，用户例如在观看足球赛时可以使用诸如软件覆盖之类的任何应用访问与该节目播放的所有部分或任何部分有关的任何信息，诸如关于用户最喜欢的运动员穿的鞋的类型的信息，其中用户可以购买该用户最喜欢的运动员所穿的运动衫，可以访问针对那些鞋或该运动衫的在线购买点，和/或可以使用诸如PayPal之类的支付帐户的在线点对来自本发明的DVR的所有内容进行支付。

同样地，本发明还为登广告者提供一种具有高度目标性的营销工具，因为每个用户将访问该特定用户感兴趣的信息，从而保证登广告者的广告被播放给对出售的物品最感兴趣的用户。从而，登广告者将减少对在节目播放中放置广告的需要，其中，节目播放的99％的观看者对出售的物品不感兴趣。此外，本发明将允许唯一地跟踪每个用户所进行的此类商业互动。

不仅元数据的添加将增加更多的目标营销机会，诸如以使电视广告深入而非只三十秒视频，元数据的添加另外还将允许目前在网页上在线找到的与电视表演相关联的“附加节目安排”返回到电视媒体。例如，为了与电视上的表演相关联而创建的在线宇宙(on-line universes)可以经由元数据、菜单、和/或访问元数据的覆盖来允许那些在线宇宙返回到电视上。

此外，如上文所述，为本发明的DVR而编写的应用可以如本DVR一样收集关于DVR的用户的使用的元数据。在不违背隐私法律的情况下，此类信息可以使用针对本文所讨论的开放式API的应用而被传递给第三方，且可以收集元数据，从而允许第三方生成更具目标性的广告、更具目标性的节目播放、和最多数目的用户感兴趣的更多通信媒体(诸如通信频道)。

根据上文所讨论的内容，本发明的DVR的开放式API可以提供到感兴趣的所有物品中和DVR的操作环境中的钩子，且经由该开放式API实现的那些钩子的暴露允许第三方结合(tie into)那些钩子。此外，用户可以经由与那些钩子相关联的元数据标签来访问与那些钩子相关联的应用。此类元数据标签例如可以允许利用覆盖、视频覆盖、水印、自动暂停、自动记录、工具条、菜单等之类的应用。这样生成的应用可以在DVR上被本地处理(诸如对于经证明的应用)，或者可以被流传输(stream)到DVR，或者可以使其与完全新的在外部生成的通信频道相关联。另外，如上文所讨论的那样，虽然DVR可以具有与之相关联的一些本地存储器，但可以使得大量的远程存储器可用，诸如在可经由WiMax等访问的外部站点。同样地，可以针对用于节目安排的期望存储的任何级别对用户进行收费，其对于存在于用户家庭内的DVR的硬件所进行的存储来说将不受到限制。

因此，本发明可以使得多种通信频道中的任何通信频道和多种应用中的任何应用可用，所述应用用于访问在那些通信频道的任何通信频道上播放的与通信媒体相关联的元标签。例如，可以使得房地产频道可用，并且可以使在房地产频道上可用的房地产以感兴趣的用户所输入的偏好为目标。可替换地，可以使得完全交互式游戏频道可用，其中可以依照用户偏好使得小游戏、纸牌游戏等可用，并且用户采取的动作可以被DVR接收为可以对第三方可用的元数据。可替换地，可以经由元数据馈送使得复杂界面是可获得的。例如，用户可以观看探索频道(Discovery Channel)上的自然展示，或者可以听或看对该用户感兴趣的动物的讲述。用户随后可以诸如经由重叠来访问与该感兴趣的动物相关联的链接。该链接可以为用户提供对例如谷歌地球(Google Earth)的访问，其可以允许向用户示出世界上任何地方的那种类型的所有动物，该动物已被加标签并放回到原野中且对用户的赞助开放。然后可以向用户提供赞助用户感兴趣的位置上的动物之一的选项，并且在用户选择了要赞助的动物的情况下，可以使用户可访问诸如PayPal之类的在线支付界面以便支付赞助费。可替换地，在探索频道上的节目播放内，或者在深入到感兴趣的动物之后，可以向用户呈现对用户感兴趣的国家的讲述，诸如博茨瓦纳(Botswana)。用户可以经由覆盖来暂停并退出节目播放，或者可以退出显示感兴趣的动物的谷歌地球界面，以及可以改向以诸如在Wikipedia上找到关于“博茨瓦纳”的信息。在用户已经改向足够的次数以接收关于博茨瓦纳的用户感兴趣的信息之后，用户可以选择改向回到感兴趣的初始位置，该初始位置在本示例中为节目播放或者关于感兴趣的动作的信息。

本发明还可以包括社交联网。此类社交联网可以包括视频会议、视频消息发送、或个人信息或个人广告的在线放置、或由用户生成的用户期望可由第三方从用户可经由开放式API DVR访问的通信接入点访问的视频或音频的放置，由此使用户成为“他或她自己的表演的明星”。

另外本发明例如可以包括移动DVR，其中经由任何上述通信接入点可访问的移动电视、不在家庭住宅内的电视、车辆内的导航屏幕等所访问的DVR特征和此类移动DVR可以与家庭开放式API DVR通信。

关于上文参考的加元标签更具体地，本发明的加元标签典型地在剪辑间发生，且可以是有关主题或非主题的。更具体地，可以在剪辑间和帧间和/或逐帧地进行加标签，并且加标签可以涉及在帧内出现的词语、图片等等，无论是否与节目的主题性质有关。此类标签例如可以通过随后运行的应用的自动性质而与帧间节目安排相关联，可以在用于显示的节目安排的节目安排处远程地插入，或者可以由用户在观看节目安排时插入。此外，此类加标签允许对整个节目播放的各离散部分采取动作，不同于由现有技术可用的动作。另外，如下文中将立即详细地讨论的那样，可以在内容中或在结合于节目播放的单独元流(metastream)中对此类元标签进行流传输。

如将本领域技术人员显而易见的那样，本文所使用的元标签是诸如xml、html等之类的计算机可读语言和语法语句，所述语法语句可以连同节目播放一起发送，诸如通过作为连同流传输的节目播放一起被馈送给用户的次级流来发送，或者可以作为节目播放的一部分来发送，诸如在描述节目播放的计算特性的“报头”信息中。所述元标签可以传送关于与其相关联的信息(即在本示例中为节目播放)，并且此类信息实际上可以或可以未在此类节目播放中找到。例如，此类元标签可以是钩子，诸如用于用户命令，或者可以进行用户的请求，或者可以在搜索节目播放或节目播放部分中被用作关键字。每个此类元标签必须被给予唯一名称、或标签，且具有与之相关联的唯一内容。可以自动地进行关键字与内容的此类关联，诸如通过对诸如节目播放的脚本之类的文档的自动搜索，或者诸如通过蜘蛛搜索，或者诸如通过索引搜索，或者可以手动地进行。

此外，包括在帧内的元标签可以被链接和/或关联到其它元标签，在视野(view)内的节目内或外面。例如，可以例如在帧中从元标签到元标签、从一个节目播放的帧到单独的节目播放中的帧的从元标签到元标签、或者从元标签到内容流执行关联。可替换地，元标签到元标签的关联可以从一个节目播放内的帧到相同节目播放内的另一帧发生，或者在节目播放之间的帧间发生。可以使用创作标准技术和/或语言来采用关联，诸如同步多媒体集成语言(Synchronized Multimedia IntegrationLanguage，SMIL)或微软同步访问媒体交换(Synchronized AccessibleMedia Interchange，SAMI)，除了别的以外，其可以与(一个或多个)节目播放流分开且在与其不同的语法中。此外或可替换地，相对于开放式API DVR可访问的每个节目播放的每个帧或帧部分，被编程到本发明的开放式API中的应用可以采用数学领域的技术人员公知的关联函数和关联分支。

在一定示例性实施例中，在存在或不存在对典型元标签数据流或报头的修改的情况下，可以使用通常被用于嵌入关联视听交互信息的水印技术来关联本发明中的帧、帧间、或节目播放(参见例如Xu等人在ICITA′05Proceedings，IEEE中所著的“Stream Based Interactive VideoLanguage Authoring Correlated Audiovisual Watermarking”)。此外，同样地，在放置到或放置成与节目播放相关联时，帧间元标签不仅可以具有与之关联的其它节目播放的帧间的各方面，而且另外可以具有将由本文自始至终所讨论的各应用所执行的任何数目的功能。

元标签到其它元标签的关联实际上可以创建“可点击视频”。可点击视频向将视频呈现给用户的任何节目播放的观看者提供真实交互性。同样地，例如，用户可以暂停视频并使用诸如鼠标光标之类的本领域的技术人员所知的显示对象来与视频的各部分交互，或者可以调用此类交互光标以便在播放视频时与视频相交互。此外，加元标签可以允许在鼠标光标出现在屏幕上时允许对应于当前播放的视频的那些方面的鼠标光标的变化。例如，如果视频的一部分包括喝罐可乐的视频中的演员，则鼠标光标如果在该部分视频期间被调用，则可能显示为可乐罐的缩图。

因此，一旦定义了元流，则可以创建可点击视频帧，可以执行到相同或其它元流的关联，并且可以用第三方API来执行被动处理。此类第三方处理例如可以包括诸如DVR命令之类的远程命令，其例如可以允许录制较大节目表演内的感兴趣的某些片断。

在本发明中使用的加元标签的方式例如可以是本领域的技术人员所知的加元标签的任何方法。此外，可以在初始广播之前、在重播之前、或在广播流的流传输期间对节目播放加元标签。同样地，此类加元标签中的权利可以被例如初始前广播、广播中、和重播获得和划分。

可以如图2所示地分级组织本发明。图2图示了作为本发明的焦点的视频，其将被作为节目播放显示给用户。如所示地对视频加元标签，在元标签外面但与之相关联的分级结构(hierarchy)随后可以经由消息总线与元标签通信并使用元标签。在消息总线周围可以是多个过滤器(filter)，并且在过滤器周围可以是多种应用。所述应用可以访问多个过滤器中的任何过滤器，并且应用和过滤器两者均有可对其进行访问的消息总线。所述消息总线可以使得多种操作命令可用于与元标签相交互，且所述元标签可以提供命令与视频的互操作性。

所述过滤器可以被映射到在消息总线中可用的多种命令，因此，过滤器可以具有多种类型。例如，过滤器可以包括关键字过滤器、商业类型过滤器、位置过滤器、地理位置过滤器、关联过滤器、诸如用于辅助馈送之类的插入过滤器、以及社会过滤器、节目发布过滤器、自动发布过滤器等等。由过滤器执行和由运行过滤器的应用执行的用户命令的映射可以促使一种过滤器类型的应用成为另一种类型的过滤器的应用的起因。同样地，应用可以同样相互馈送，诸如，其中诸如搜索应用之类的一种类型的应用访问诸如Wikipedia引擎之类的另一种类型的应用，由此可以获得对到搜索引擎中的用户查询的应答。

此外，例如，一个应用和/或过滤器可以允许基于指示用户希望寻找与一定主题相关联的一定片断的另一应用的应用来保存节目的一定方面。此外，一旦此类片断被保存，则另一应用可以允许基于说明此类帧感兴趣的元数据，诸如经由例如电子邮件程序、因特网邮件或WiFi，在用户之间运送(shipment)感兴趣的帧或片断。另外，如上文所述，本发明的DVR的开放式API方面允许节目发布，其中，应用例如经由自动发布来将接收到的一定元数据或一定信息发布到节目安排中(其中此类发布被动地发生)。

在图3所示的更具体示例中，一定应用和/或过滤器与消息总线相交互。如所示，应用和/或过滤器可以具有与之相关联的核心应用，且可以以类似于感兴趣的基础视频的方式被元标签围绕。在示例性实施例中，用户表达出对世界的一定动物的位置的兴趣的应用的元标签可以来自地图绘制应用，其中，如所示，交互B基于来自用户的交互B而与消息总线相交互。交互B到达的元标签可以是随后在用户的视野内的节目内的地理位置，且可以引起达到进行用户的感兴趣映射位置的其它评估的交互A。例如，然后可以由第一应用基于交互A和B的关联来访问不同的应用，并且此不同的应用可以评估存在于该特定地理位置上的多种不同的动物、可获得的动物赞助、国家灾难的记录、电话簿、植物群等等。此类信息然后可以经由消息总线接口被向回反馈给用户，或者来自用户的兴趣可以被简单地写入外部应用，或者可以被应用设计员跟踪。同样地，多个应用可以如在应用之间合作，可以在应用之间关联，可以在应用之间过滤，此类动作可以自动地发生、经由节目发布发生、和/或可以基于一定许可。

经由开放式API DVR接口使其可用的本发明的过滤和应用因此可以取决于创建不一定在主题上与显示给用户的任何节目有关的流内元流(instream metastream)的能力。此类流内元流可以包括与任何流内节目安排相关联的元流，所述流内节目安排不仅可以包括感兴趣的节目安排，而且可以包括与感兴趣的节目安排相关联的广告或可从感兴趣的节目安排访问的广告。

虽然已在一定程度上详细地以优选形式描述并描绘了本发明，但应理解的是优选形式的本公开内容是通过示例进行的，并且在不脱离本发明的精神和范围的情况下可以进行部分和步骤的构造及组合和布置的细节进行许多改变。