[发明专利]一种自动识别和朗读药品说明书的方法有效
申请号: | 201710027181.0 | 申请日: | 2017-01-16 |
公开(公告)号: | CN106652673B | 公开(公告)日: | 2020-09-22 |
发明(设计)人: | 秦华标;梁志坚;吴朝晖;林小颖;许华杰 | 申请(专利权)人: | 华南理工大学 |
主分类号: | G09B21/00 | 分类号: | G09B21/00;G10L13/00;G10L15/22 |
代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 何淑珍 |
地址: | 510640 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 自动识别 朗读 药品 说明书 方法 | ||
本发明公开了一种自动识别和朗读药品说明书的方法。所述方法包括:系统通过拍摄一张药品说明书的图片,自动识别国药准字并以此通过调用互联网接口获取具体药品信息;通过霍夫直线检测算法实现基于傅里叶变换的旋转文本校正,将拍摄得到有旋转偏差的文本旋转至水平;通过识别药品说明书上是否有文字来检测纸张是否翻转,并通过语音提示将翻转的纸张翻转回来;通过同时识别经过旋转文本校正的图片和翻转180°后得到的图片获取国药准字;通过调用互联网提供的药品信息接口,上传识别得到的国药准字并返回药品信息并进行朗读。本发明能帮助老人、盲人、视力障碍及文盲等群体阅读药品说明书,并通过语音播放出来,提高他们的生活质量。
技术领域
本发明涉及药品说明书的识别技术领域,具体涉及自动识别和朗读药品说明书的方法。
背景技术
在中国,视障人数达1731万,占到了世界盲人总数的18%。盲人和弱视朋友在生活中有许多的不便,读书看报在我们普通人看来易如反掌的事情对他们来说是异常艰难。尽管如此,还是有一些盲文书籍书报可以供他们学习阅读。可是药品说明书一般是没有盲文的,当他们需要用药的时候真的是没有任何办法。
目前中国老年人口已超过2亿,老龄化程度进一步加深。老年人在日常生活中也经常和药物打交道,他们的眼睛一般不好使,而且药品说明书上的文字一般较小,用药对他们来说是一件头痛的事。而今中国文盲群体超过5000万,如何识别和阅读药品说明书上的文字对他们来说更是一件艰难的事。
基于以上的存在问题,本发明核心功能是给盲人、弱视群体阅读药品说明书并通过语音的形式让他们获取。当然,此功能也能很好地应用到老年人和文盲群体上,因为他们有共同的需求。考虑到用户群体的特殊性,本作品是通过语音来操作控制的,实际运行起来更加高效简便。除此之外,本发明还添加了语音播报最新社会热点的功能,为盲人朋友和老年人打开了一扇与外界接触的心灵之窗。
发明内容
为了实现上述技术目的,本发明提供一种自动识别和朗读药品说明书的方法,本发明具有识别说明书、旋转文本校正、纸张翻转检测、文本翻转检测、获取药品信息、语音唤醒、语音合成、语音识别功能。
一种自动识别和朗读药品说明书的方法,采用具有摄像头、处理器、语音播放模块的识别系统,包括如下步骤:
(1)识别说明书,系统通过拍摄一张药品说明书的图片,自动识别国药准字并以此通过调用互联网接口获取具体药品信息;
(2)旋转文本校正,通过霍夫直线检测算法实现基于傅里叶变换的旋转文本校正,将拍摄得到有旋转偏差的文本旋转至水平;
(3)纸张翻转检测,通过识别药品说明书上是否有文字来检测纸张是否翻转,并通过语音提示将翻转的纸张翻转回来;
(4)文本翻转检测,通过同时识别经过旋转文本校正的图片和翻转180°后得到的图片获取国药准字;
(5)获取药品信息,通过调用互联网提供的药品信息接口,上传识别得到的国药准字并返回药品信息;
(6)语音唤醒,通过使用语音唤醒库设定唤醒短语,将系统从睡眠状态唤醒过来;
(7)语音合成,通过使用语音合成库,将药品的文本信息朗读出来。
进一步地,步骤(1)包括如下步骤:
(1.1)分析连通区域,检测出字符区域的区域轮廓和子轮廓,集成为区块域;
(1.2)找到块区域,检测出字符轮廓,得到文本行;再通过空格得到单词;
(1.3)找文本行和单词,采用自适应分类器,分析单词;进行两次单词分析;
(1.4)得出识别文本,识别含有模糊的空格,笔画高度,小写字母。
进一步地,步骤(2)包括如下步骤:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学,未经华南理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710027181.0/2.html,转载请声明来源钻瓜专利网。