[发明专利]一种生成多媒体概念图的方法

说明书

技术领域

本发明属于人机交互领域，具体涉及一种生成支持多通道输入的多媒体概念图的方 法。

背景技术

概念图是某个主题的概念及其关系的图形化表示，是用来组织和表征知识的工具(参 考文献：Novak，J.D.and A.J.The Theory Underlying Concept Maps and How to Construct Them，Technical Report IHMC CmapTools 2006-01，Florida Institute for Human and Machine Cognition，2006.)。它包括概念和概念之间的关系，使用节点表示概念、连线表 示概念之间的关系。概念图由一系列具有时序信息的手绘笔划组成，每个笔划由一组包含 二维坐标信息的点序列组成，概念图以直观形象的方式进行表达和思考，非常接近人的自 然思维过程。它有助于创造性思维，可以用于表示知识、组织知识、协同与沟通、教育等 领域(参考文献：Novak，J.D.Learning，Creating，and Using Knowledge：Concept Maps as Facilitative Tools in Schools and Corporations.Lawrence Erlbaum Associates：Mahwah，NJ， 1998.)。关于概念图在上述领域作用的研究正逐渐成为热点。2004年，首届概念图国际 会议在西班牙召开，该会议主要侧重于研究如何绘制概念图、概念图在教育、协同等方面 的应用、计算机辅助的概念图工具的作用等。目前出现了一些计算机辅助的概念图绘制工 具，如MindManager，Inspiration，FreeMind。这些工具主要采用基于键盘和鼠标的交互方 式制作概念图，其中一些工具支持包含图片和超链接的多媒体概念图。目前，也出现了基 于数字笔的手绘概念图制作方法，可以提取用户用数字笔绘制的概念图中的结构。

人与人之间的交流通过使用多个通道而变得简单，多通道界面也从多个通道的使用中 获益，它拓宽了用户到计算机的通信带宽(参考文献：董士海，王坚，戴国忠.人机交互和 多通道用户界面[M].北京：科学出版社，1999.)。近年来，随着计算设备的不断发展，越 来越多的设备(如智能手机、UMPC、Tablet PC等)开始支持数字笔、语音、视频、图片 等类型的输入。人与计算设备之间的交流也可以通过使用多个通道变得更加简单。

目前已有的概念图制作方法，大部分是基于键盘和鼠标的交互方式，部分方法采用数 字笔的交互方式。它们并没有充分利用多通道输入的优势。

发明内容

本发明的目的在于利用多通道输入，提供一种生成多媒体概念图的方法，从而提高生 成概念图的效率。基于多媒体概念图，用户可以将多媒体信息以概念图的方式组织，从而 支持多媒体信息的快速查看。

本发明概念图中的多媒体对象由多个通道采集得到，这些通道既可以是配备数字笔的 设备上的通道，也可以是独立的多媒体设备。配备数字笔的设备，如MID(Mobile Inernet Device，移动互联网设备)、PDA(Personal Digital Assistant个人数码助理)、Tablet PC 等；独立的多媒体设备，如麦克风、摄像机、相机和摄像头等。

具体来说，本发明的技术方案如下：

1、用数字笔创建包含节点和连线的概念图，同时多媒体设备通过设备驱动程序创建 多媒体对象，并保存到音频文件、图片文件或视频文件。

多媒体设备可以是配备了数字笔的设备，也可以是支持采集多媒体对象的设备；本发 明创建的多媒体对象包括视频、音频、图片。

保存多媒体文件时，用户可以修改多媒体对象的名称并为多媒体对象手动添加属性 (如作者信息、备注等)，以更好的描述多媒体对象，并便于多媒体对象的检索和察看。 每个属性的具体内容为文本，文本的添加方式可以采用传统的键盘输入，也可以通过手写 输入或语音输入，并将输入识别为文本。

2、采用解析装置解析上述概念图的结构，获得概念图中的节点、连线以及节点连线 之间的关系，利用识别装置识别出概念图中节点含义，得到步骤1)创建的概念图节点对 应的正规汉字或数字。这里可以通过输入支持多字符识别的识别引擎(如汉王手写识别引 擎)进行识别；也可以通过将手绘概念图的一个节点切分为多个字符的装置，进行识别。