[发明专利]用于选择图形对象的方法和对应装置

说明书

本发明涉及一种在计算装置上的方法，包括：在显示区域(200)中显示图形对象(OB1‑OB11)，该显示区域包括具有文本对象(OBI、OB2)的结构化文本部分(202)和具有文本或非文本对象(OB5‑OB11)的块部分(BL)；定位起始点(PT1)，从所述起始点开始用户选择手势(GT1)；确定形成选择区域(212)的选择路径(210)；以及选择包含在所述选择区域(212)内的每个图形对象。如果所述起始点位于所述结构化文本部分中，则可以选择第一模式，从而允许在所述显示区域中绘制所述选择路径以选择任何图形对象。如果所述起始点位于所述块部分(BL)中的目标块部分内，则可以选择第二模式，从而将所述选择路径(210)限制在所述目标块部分内。

技术领域

本公开总体上涉及能够识别各种图形和文本的用户输入笔迹的计算装置接口领域。特别地，本公开涉及用于检测和处理输入的手写元素的计算装置和对应方法。

背景技术

计算装置在日常生活中变得越来越普遍。它们可以采用各种形式，诸如台式计算机、笔记本电脑、平板计算机、混合计算机(二合一)、电子书阅读器、移动电话、智能手机、可穿戴计算机(包括智能手表、智能眼镜/耳机)、全球定位系统(GPS)单元、企业数字助理(EDA)、个人数字助理(PDA)、游戏控制台等。此外，计算装置正在被整合到车辆和设备中，诸如汽车、卡车、农用设备、制造设备、建筑环境控制(例如照明、HVAC)以及家用和商用电器。

每种类型的计算装置都配备有特定的计算资源并用于给定用途。计算装置通常包括至少一个处理元件(诸如中央处理单元(CPU))、某种形式的存储器以及输入和输出装置。计算装置的多样性及其后续使用需要各种输入装置和接口以允许用户与其计算装置交互。

一种此类输入装置是诸如触摸屏或触摸板的触敏表面，其中用户输入通过用户身体部位(例如手指)或仪器(例如笔或触控笔)与触敏表面之间的接触来接收。另一种输入装置是输入表面，其感测用户在输入表面上方做出的手势。再另一种输入装置是位置检测系统，其检测触摸或非触摸交互与非触摸物理或虚拟表面的相对位置。

手写识别可以在计算装置中实现以输入和处理由用户手绘或手写的各种类型的图形对象(也称为输入元素)，诸如文本内容(例如，字母数字字符)或非文本内容(例如形状、绘图)。一旦在计算装置上输入，输入元素通常显示为数字墨水并经过手写识别以转换为排版版本。用户手写输入典型地使用实时手写识别系统或方法来解释。为此，可以使用在线系统(使用基于云的解决方案等执行的识别)或离线系统。

用户输入可以是绘图、图示或文本的任何其他内容、非文本或文本和非文本的混合内容。可以根据引导和约束用户输入的引导行(基准行)在结构化文档上进行手写输入。替代地，用户可以在自由模式下手写，即对要遵循的行或要遵守的输入大小(例如在空白页上)没有任何限制。

图1A示出了包括显示装置1的计算装置1的示例，所述显示装置显示由用户使用适当的用户界面手绘或手写的数字墨水图形对象。在当前情况下，计算装置1检测并显示文本内容4和6以及非文本内容8、10和12。这些元素中的每一者都由一个或多个数字墨水笔划形成。如稍后所讨论的，文本和非文本各自可以采用各种形式。图形对象可能包括文本笔迹、图示、音乐注释等……在该示例中，形状8是构成包含文本内容6的容器(框)的矩形等，使得可以一起选择和操纵元素6和8两者。

如前所述，可以对文本输入元素执行手写识别。也可以对非文本输入元素执行手写识别。此外，每个输入元素可以被转换并显示为排版输入元素，如图1B中的该示例所示。

图1A至图1B中描绘的内容仅是示例，并且除了所描绘的那些之外的其他元素或其其他类型或形式可以作为补充或作为替代呈现。

在手写识别应用程序中，通常可以对显示在计算装置上的用户输入执行某种级别的编辑。然而，常规地，此类应用程序在处理编辑功能的能力方面受到限制，并且典型地约束用户采用不反映用户原始意图的行为或接受妥协。结果，一些常规的手写识别应用程序迫使用户导航菜单以选择和编辑墨水元素。