[发明专利]用于电子视觉作品的配音的动态音频重放

说明书

相关申请案的交叉参考

本申请案是根据35U.S.C.§119主张2009年11月10日申请的美国临时专利申请案第61/259,995号的优先权和权利的非临时申请案，其以引用的方式并入本文中。

技术领域

背景技术

电子书是一种主要包括文本但也可包含其它视觉媒体(例如图形和图像)的多媒体作品。虽然电子书中的文本可伴随有其它视觉媒体，但通常希望从头到尾阅读电子书，但未必一口气阅读完。

存在若干用于电子书的文件格式，其包含但不限于各种类型的标示语言文档类型(举例来说，SGML、HTML、XML、LaTex等等)，和其它数据文件类型，例如.pdf文件，纯文本文件等等。各种文件格式与电子书阅读器一起使用，电子书阅读器是例如来自Amazon.com的KINDLE阅读器。这种电子书阅读器通常为经设计成在平台上运行的计算机程序，平台是例如个人计算机、笔记本计算机、膝上型计算机、平板计算机、移动装置或用于阅读电子书的专用硬件系统(例如KINDLE阅读器)。

发明内容

一种电子书具有配音，读者可在阅读电子书的同时听配音。配音的目的是伴随并提高阅读体验，其中读者通常基于为电子书的部分的故事或其它视觉媒体而在他们的头脑中形成图像。配音的重放与电子书的视觉显示同步。

在读者阅读电子书的同时使配音的重放与电子书的视觉显示同步是一个挑战性问题。不同个人以不同速度阅读，且不同个人将在不同时间以不同速度阅读。电子书的部分的视觉显示的持续时间在从读者到读者的持续时间方面变化，且在不同时间点之间变化。换句话说，取决于用户与电子书的互动，电子书的部分的视觉显示的持续时间可变。然而，配音(一种时间相依媒体)的重放与此视觉显示同步。

为了以适用于多个读者的方式用配音提供良好的阅读体验，使音频提示与文本中的不同点相关联，且基于用户与电子书的互动而与电子书的视觉显示同步地动态重放这些提示。动态重放包括编辑并播放音频提示，使得音频提示具有一持续时间，所述持续时间是基于对电子书中提示与之同步的部分的持续时间的预测。当系统开始播放音频提示时，系统预测下一个音频提示应该何时开始。播放当前提示达预测的持续时间，且在适当时间起始到下一个音频提示的转变。

这种配音通常不只是任何音乐或声音；一些音乐和声音可分散读者注意力而非提高阅读体验。取而代之，配音包含经设计成在读者中所唤起的情感类似于由文本所唤起的那些情感的的音乐和声音。通常，当存在很少欢快的瞬时声音、无杂音且存在备用的有点催眠感觉的音乐时，用于电子书的配音受益。太快或太激烈的流派型音乐可分散注意力或难以阅读。

在本发明的各种方面中，本发明可体现于计算机实施过程、机器(例如电子装置，或通用计算机，或提供可供执行计算机程序的平台的其它装置)、由这些机器执行的过程或制造物品中。这些物品可包含计算机程序产品或数字信息产品(其中计算机可读存储媒体含有存储于其上的计算机程序指令或计算机可读数据)，和建立并使用这些制造物品的过程和机器。

因此，在一方面中，音频动态重放包括接收有关用户与电子视觉作品的部分的互动的数据。根据用户与电子视觉作品的互动而使待重放的与电子视觉作品的部分相关联的音频区段动态调整长度。在一个实施方案中，根据有关用户与电子视觉作品的部分的互动的接收数据来估计电子视觉作品的部分的视觉显示的持续时间。选择与电子视觉作品的部分相关联的音频的次混合序列，以便提供将匹配估计的持续时间的音频要素。此估计可使用阅读速度的历史记录而进行。

在另一方面中，与电子视觉作品的显示同步地播放配音。将电子视觉作品接收到存储器中，也将使电子视觉作品的部分与标签相关联的信息接收到存储器中。响应于用户互动而显示电子视觉作品的部分。存取具有标签的音频文件。根据与电子视觉作品的部分相关联的标签来选择待与电子视觉作品的部分相关联的音频文件。接收有关用户与电子视觉作品的部分的互动的数据，且根据用户互动来动态调整与电子视觉作品的那个特定部分相关联的音频重放的持续时间。

在另一方面中，产生用于电子视觉作品的配音。将电子视觉作品接收到存储器中。在存储器中处理电子视觉作品，使得用将与加标签的音频文件的特定部分相关联的标签来标记电子视觉作品的部分。然后存取具有适当标签的音频文件，且选择电子视觉作品的部分的目标音频文件并使目标音频文件相关联以建立并重放所得配音。电子视觉作品可包含文本且处理包含处理文本。标签可包含情感描述符。