[发明专利]一种基于脑电和眼动仪的图像感兴趣区域快速检出方法在审
| 申请号: | 201810800853.1 | 申请日: | 2018-07-20 |
| 公开(公告)号: | CN108958489A | 公开(公告)日: | 2018-12-07 |
| 发明(设计)人: | 葛盛;江碧涛;张砚;李晓斌;郑文明 | 申请(专利权)人: | 东南大学;北京市遥感信息研究所 |
| 主分类号: | G06F3/01 | 分类号: | G06F3/01;G06K9/32;G06F17/30 |
| 代理公司: | 南京经纬专利商标代理有限公司 32200 | 代理人: | 熊玉玮 |
| 地址: | 210096 *** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 脑电 眼动仪 检出 图像感兴趣区域 感兴趣区域 目标物 眼动 认知神经科学 图像分割技术 混合方式 开关信号 图像处理 信息特点 眼动信号 地检 图像 | ||
1.一种基于脑电和眼动仪的图像感兴趣区域快速检出方法,其特征在于,
采集观察者观察待测试图像时所产生脑电信号,检测所采集脑电信号中的P300成分;
采集观察者注视待测试图像时的眼动信号;
在检测到P300成分时,根据所采集眼动信号和待测试图像检出注视点,根据观察者注视待测试图像时的眼动信号生成眼动热图后再结合图像分割技术筛选感兴趣区域,在未检测到P300成分时,结束感兴趣区域检出。
2.根据权利要求1所述一种基于脑电和眼动仪的图像感兴趣区域快速检出方法,其特征在于,检测所采集脑电信号中的P300成分的方法为:以观察者观察含有目标物图像序列产生的脑电信号的均值为P300信号模板,对所采集的脑电信号和P300信号模板进行典型相关分析,在典型相关系数符合阈值设定条件时判定所采集脑电信号含有P300成分,在典型相关系数不符合阈值设定条件时判定所采集脑电信号无P300成分。
3.根据权利要求1所述一种基于脑电和眼动仪的图像感兴趣区域快速检出方法,其特征在于,根据观察者注视待测试图像时的眼动信号生成眼动热图后再结合图像分割技术筛选感兴趣区域的方法为:将待测试图像分割为若干子区域,将待测试图像显示时间分为若干个固定时间片段,采用高斯平滑算法处理各时间片段内的所有眼动信号以生成对应固定时间片段内的热图,生成上述各固定时间片段内所有热图的平均值,由平均值高于设定阈值的固定时间片段内的所有热图生成该待测试图片在显示时间内的眼动热图,将生成的眼动热图叠加显示在待测试图像上,以眼动热图局部最大值所坐落的子区域为感兴趣区域。
4.根据权利要1所述一种基于脑电和眼动仪的图像感兴趣区域快速检出方法,其特征在于,观察者观察待测试图像时所产生脑电信号通过配置在观察者头皮的Fz、Cz、Pz处的电极采集。
5.根据权利要2所述一种基于脑电和眼动仪的图像感兴趣区域快速检出方法,其特征在于,阈值设定条件为典型相关系数的绝对值大于设定阈值。
6.实现权利要求1至5中任意一项所述图像感兴趣区域快速检出方法的装置,其特征在于,包括:
脑电信号检出模块,检测观察者观察待测试图像时所产生脑电信号中的P300成分,
基于P300检出模块输出信号动作的开关模块,在检测到P300成分时闭合,在未检测到P300成分时关断,
眼动信号检出模块,采集观察者注视待测试图像时的眼动信号,
图像显示模块,显示待测试图像,及,
感兴趣区域检出模块,其输入端通过所述开关模块与眼动信号检出模块的输出端、图像显示模块的输出端连接,在开关模块闭合时,根据所采集眼动信号和待测试图像检出注视点,根据观察者注视待测试图像时的眼动信号生成眼动热图后再结合图像分割技术筛选感兴趣区域,在开关模块关断时,结束感兴趣区域检测。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现以下步骤:
检测观察者观察待测试图像时所产生脑电信号中的P300成分;
采集观察者注视待测试图像时的眼动信号;
在检测到P300成分时,根据所采集眼动信号和待测试图像检出注视点,根据观察者注视待测试图像时的眼动信号生成眼动热图后再结合图像分割技术筛选感兴趣区域,在未检测到P300成分时,结束感兴趣区域检测。
8.实现权利要求1至5中任意一项所述图像感兴趣区域快速检出方法的系统,其特征在于,包括:显示待检测图像和检测目标的显示器,配置在显示器下方的眼动检测设备,配置在观察者头皮用于采集观察者观察待测试图像时所产生脑电信号的电极,及,计算机设备;
所述计算机设备包含存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以下步骤:
检测观察者观察待测试图像时所产生脑电信号中的P300成分,
采集观察者注视待测试图像时的眼动信号,
在检测到P300成分时,根据所采集眼动信号和待测试图像检出注视点,根据观察者注视待测试图像时的眼动信号生成眼动热图后再结合图像分割技术筛选感兴趣区域,在未检测到P300成分时,结束感兴趣区域检测。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学;北京市遥感信息研究所,未经东南大学;北京市遥感信息研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810800853.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种人脸指令识别方法
- 下一篇:电子装置及其手势识别方法、计算机可读存储介质





