[发明专利]一种机械视觉听觉触觉以时间相互映射的设计方法

摘要

一种机械视觉听觉触觉以时间相互映射的设计方法的技术领域，是属于，机器人、人工智能、计算机、图像处理、触觉传感器技术、听觉传感器、数学等技术领域，主要技术是通过摄像头采集的图像、听觉传感器采集的数据和触觉传感器采集的数据，同时记录下来，然后通过计算处理，让图像中的特征物质、接触这个物质的感觉和听到这个物质的声音对应起来，并且通过运算要保存时，同时保存起来，把这个时间也同时保存起来，并且以这个时间为映射，这样当接收到已保存的触觉，可以在数据库里找到，并通过记录的时间，同时找到对应的图像和声音，当看见那副图像，也通过时间映射找到对应的感觉和声音，当听到这样的声音，也可以通过时间映射找到对应的图像和感觉。

主权项

一种机械视觉听觉触觉以时间相互映射的设计方法，其特征是，机械视觉听觉触觉以时间相互映射的设计方法，由5部分构成，1是机械视觉处理部分，2是机械触觉处理部分，3是机械听觉处理部分，4是建立对应关系，5是以时间作为映射进行存储的方法，机械视觉处理部分主要是使用摄像机把图像拍摄下来，通过各种算法把图像进行处理，然后把图像提取的特征和储存的数据进行比较或通过深度学习方法进行识别，触觉处理的方法就是用机械手上的各种传感器对物质进行接触产生的数据，把这些信息转换成数据，然后让这些数据存储起来，听觉处理就是对声音信号频率进行处理，通过模数转换适合计算机处理，建立图像、触觉和听觉的对应关系，当摄像头拍到一个事物就把这个事物的特征提取，同时用机械手去接触物质，感知物质的形状，大少，温度，软硬各种数据，同时也通过声音传感器的不同位置排列，确定这个物质发出的声音，也可能先通过声音传感器的排列听到事物发出的声音，然后再用机械手去接触物质，得到各种数据，然后把摄像头转过去拍摄物质的图像，再进行特征提取，或先机械手接触的物质，得到各种触感信息，同时能听到物质发出的声音，然后通过摄像头拍摄，提取特征，以时间作为映射进行存储方式，这是重中之重，让机械想起这是什么时候发生的事，以时间记忆作为3者的关联，具备唯一性和实时性，因此采用如下设计，当机械手接触到物质，就产生各种感知信息，起先和存储在数据库里的数据进行匹配，如果匹配上了就知道是什么东西，如果匹配不上，就先暂存这些信息，移动机械视觉去拍摄，这时启动图片处理技术，同时接收到这个事物发出的声音，对声音进行处理，把这3者进行运算，然后确定是否要存储，如果需要存储这种现象，就去调来时间计时器的时间，同时把图片处理后的物质特征和得到的触觉数据，和听觉处理后的数据分别存储起来，储存在为它们各自设立的空间里，通过时间把它们对应起来，这样以后如果机械手接触到物质，就把这触觉数据和数据库里存储的数据进行比较，如果找到这样的数据，就调出当初记忆的时间，然后根据这个时间去寻找对应的图片和声音，同理如果机械视觉看见事物，就会和储存的数据匹配，如果匹配上了，就会调出当初记忆的时间，通过记忆的时间，对时间进行搜索找到对应的感觉和声音，如果听到声音，就会和储存的数据进行匹配，如果匹配上了，就调出当初记忆的时间，然后根据这个时间去寻找对应的图像和感觉，这样可以相互对应，并且可以知道这是什么时候发生的。