[发明专利]基于万维网的图像内容的检测、提取以及识别

说明书

技术领域

本发明涉及一种图像内容的检测(detection)、提取(extraction)以及识别(recognition)技术。特别地，本发明涉及一种使用万维网浏览器插件(web browser plug-in)来进行图像内容的检测、图像帧的提取以及图像内容的识别的系统和方法。

背景技术

计算机和电子文档仅限于在电子文档被计算机控制并且被计算机输出至打印机并被打印在纸件上的环境中使用。电子文档一旦被打印在纸件上，则该文档的纸件版和电子版的操作就各自独立。另外，目前，打印和复印技术还不能把静态打印媒介(例如，纸件媒介)和动态电子媒介连接起来；这里，动态电子媒介包括数字通信、网络、电子信息传播、电子广告、在线娱乐以及电子商务等。

在过去的几年中，个人数字助理(PDA)装置、手机(例如，相机手机)、数码相机等的便携式计算装置和个人用电子装置的出现和普及已经拓展了文档的概念，即：通过将文档制作成可供电子阅读和检索的形式，并且通过引进互动多媒体的功能，使文档还包含其电子版，这是现有技术中的打印媒介所无法比拟的。

但是，在连接电子文档和纸件文档的现有技术中存在一个问题，即：使用打印文档来访问或检索用于生成纸件文档的电子文档仍然非常困难和/或非常耗时。识别和检索与打印文档对应的电子文档的主要障碍是打印文档向电子形式的转换，该电子形式被用来对打印文档和电子文档进行比较。由于相机手机和扫描仪的激增，已经可以非常容易地获取打印文档的图像，但是也还没有办法使用这些劣质图像对电子文档进行检索。另外，即使图像的质量很好，用于识别的计算量也很大，并且计算结果的精度也不高。

现有技术中还存在着一个问题，即：在运行之前，几乎没有几个类型的识别处理不需要专用的识别/通信软件安装至客户终端。

另外，现有技术中还存在着一个问题，即：没有办法通过使用纸件和日常计算装置(例如，计算机等)的结合来有效地与电子文档进行接口。目前，尽管已经有很多种方法可以实现与电子文档的接口，例如工具条、按钮以及其他界面等，它们即可以单独地显示在计算机屏幕上，也可以与鼠标控制器和键盘等的输入装置一起来使用，但是，还没有一种接口可以与纸件(或其他有形媒介)和电子文档同时进行操作。

发明内容

本发明是鉴于上述问题而提出的，其目的在于，提供一种通过使用万维网浏览器插件来实现基于万维网的图像内容检测和图像提取的系统。

该系统的优点在于，可以在用户终端进行初期图像处理，以此来确定图像是否适于识别处理以及是否适于提取用作处理的视频帧。用户终端的图像处理最好通过万维网浏览器插件(以下简称“插件”)或者其他不需要安装至客户终端的小程序来实现。需要说明的是，这里所说的“安装”是指将插件或其他小程序保存在永久存储装置中、以及/或者、对注册表(registry)进行修改。

在一个实施例中，插件执行用于进行检测和提取视频帧的初期图像分析，并且为服务器预留计算强化(compute-intense)的识别处理。在一个实施例中，本发明的系统包括：图像采集装置、万维网浏览器(以下简称“浏览器”)、插件以及识别服务器。插件还包括图像采集控制模块、分析模块以及传送模块；该传送模块用于将数据传送至识别服务器。插件对采集到的图像进行处理，以确定该图像是否包含预定的内容，例如，图像是否为文档文本。然后，系统通过图像采集装置和浏览器让用户能够将文档或其他类型的图像连接至电子数据。

本发明还包括基于万维网的图像内容类型的检测方法。当插件的初期图像处理检测到图像中的预定内容之后，该图像就被传送至识别服务器进行内容识别。例如，如果初期图像处理确定了图像包含文档文本，该图像就被传送至识别服务器进行文档识别。文档识别可以与档案服务器或本地存储器(例如，客户终端的硬盘等)等各种文档资源一起来使用。另外，在任何可上网的客户终端上，用户可以不需要安装任何软件就能进行文档识别。运行时，还可以基于客户终端的参数对插件进行修改。在服务器一侧，可以容易地与档案服务器等进行整合，并且还可以容易地进行质量保证和软件升级。

附图概述

图1是本发明的一个实施例中的、基于万维网的图像内容检测和图像提取的系统的示意图。

图2是本发明的一个实施例中的、客户终端或识别服务器的功能框图。

图3A是本发明的一个实施例中的、客户终端的存储单元的框图。

图3B是本发明的一个实施例中的、万维网服务器的存储单元的框图。