[发明专利]远程指示系统和远程指示方法

说明书

技术领域

本发明总体上涉及一种远程指示系统，通过该远程指示系统可使用图像来给出指示。

背景技术

在远程修理系统、远程维护系统、远程医疗系统、远程会议系统等中，例如需要将诸如对作业程序的指示等的可能包括真实物体的各种指示从远程地点给到真实物体。作为利用其可将指示从远程地点给到真实物体的这种远程指示系统，已知有如下一种技术，即，在通过摄像机对真实物体侧存在的真实物体进行拍摄以送到远程终端的同时，在真实物体侧通过投影仪将该远程终端根据所拍摄的图像而指示的注释图像投影到真实物体上，如例如在美国专利申请公报No.2004/0070674中所公开的。

然而传统上，为了根据上述远程指示系统的远程终端给出的指示将注释图像投影到真实物体上，必须使用在远程地点预先准备好的专用绘制功能来绘制注释图像。为此，在实际应用中，只能从远程终端指示简单的图等，并难以形成多种多样的注释图像。此外，尽管可以通过使用通用的应用程序软件来生成复杂的注释图像，也不可能实时地形成并发送注释图像。

发明内容

鉴于以上情况提出了本发明，本发明提供了一种远程指示系统，通过该远程指示系统可以容易而快速地创建多种注释图像，并从远程终端将其投影到真实物体上。

本发明的一方面提供了一种远程指示系统，该远程指示系统包括：控制部，该控制部将由图像拍摄部拍摄的目标的图像发送到远程终端，并控制投影部将注释图像投影到所述目标上，该注释图像是根据所述远程终端基于所拍摄的图像发出的指示而生成的；所述远程终端，该远程终端从所述控制部接收所拍摄的图像，在应用程序软件的显示区域中叠加显示(overlay display)由所述图像拍摄部拍摄的所述目标的图像，使用所述应用程序软件在所述显示区域中显示编辑图像，根据显示所述编辑图像之前的显示区域和显示所述编辑图像之后的显示区域之差来提取所述编辑图像，根据所述远程终端基于所拍摄的图像而给出的指示，使用所提取的编辑图像形成注释图像，以由投影部将所述注释图像投影到所述图像拍摄部的图像拍摄区域上，并且将所形成的注释图像发送给所述控制部。

利用上述结构，从显示数据中提取所述编辑图像。在采用显示并编辑图像的任何应用程序时，无需特别的链接功能即可将使用该应用程序所创建的编辑图像形成为注释图像。

上述远程指示系统还包括：服务器，其对所述图像拍摄部和所述投影部进行控制；和远程终端，其从所述服务器接收所述拍摄图像，具有所述注释形成部，并将所述注释图像发送给所述服务器。

在上述的远程指示系统中，所述注释形成部可被构造为使得将在所捕捉的图像的指定区域内包括的编辑图像设置为注释图像。

在上述远程指示系统中，所述注释形成部可获取所述显示区域中在根据用户操作生成编辑图像之前和之后的显示图像。

在上述远程指示系统中，所述注释形成部可从所述显示区域的所述显示图像中提取所述编辑图像，按照给定时间周期来捕捉所述显示图像。

在上述远程指示系统中，可通过使用所述应用程序软件的自身功能来形成所述编辑图像。

在上述远程指示系统中，所述编辑图像可包括从另一种应用程序软件复制的图像。另外，在上述远程指示系统，所述注释形成部可通过使用并行执行的多种应用程序软件来形成所述注释图像。

本发明的另一方面提供了一种远程指示方法，该远程指示方法包括以下步骤：控制部向远程终端发送目标的图像；所述远程终端接收所述目标的图像；所述远程终端控制投影部将注释图像投影到目标上，该注释图像是根据所述远程终端基于所述目标的图像发出的指示而生成的；所述远程终端在应用程序软件的显示区域中，叠加显示所述目标的图像；所述远程终端使用所述应用程序软件在所述显示区域中显示编辑图像；所述远程终端根据显示所述编辑图像之前的显示区域和显示所述编辑图像之后的显示区域之差来提取所述编辑图像；所述远程终端根据所述远程终端基于所述目标的图像而给出的指示，使用所提取的编辑图像形成注释图像，以将所述注释图像投影到图像拍摄区域上；以及所述远程终端将所形成的注释图像发送到所述控制部。

本发明的又一方面提供了一种计算机可读介质，该计算机可读介质存储有使计算机执行远程指示处理的程序，该远程指示处理包括以下步骤：在应用程序软件的显示区域中，叠加显示所拍摄的目标的图像；通过使用所述应用程序软件在所述显示区域中显示编辑图像；根据所述编辑图像生成之前和生成之后的显示图像之差来提取所显示的编辑图像；并且按照基于所拍摄图像而给出的指示，根据所提取的编辑图像形成注释图像，以将所述注释图像投影到图像拍摄区域上。