[发明专利]一种基于电子商务直播的图像信息处理云计算平台

权利要求书

1.一种基于电子商务直播的图像信息处理云计算平台，其特征在于：包括直播视频划分模块、视频段语音提取模块、视频段语义识别模块、视频段主题获取模块、视频段视频分解模块、语义模板库、目标图像筛选模块、分析云平台和图像存储数据库；

所述直播视频划分模块用于获取电子商务商家直播对应的整个视频时长，并将获取的整个视频时长按照设定的划分时间间隔划分为若干视频段，进而将划分的各视频段按照该视频段在整个视频所处的位置前后顺序进行编号，依次标记为1,2...i...n；

所述视频段语音提取模块用于对划分的各视频段提取直播语音信息，并将提取的各视频段的直播语音信息发送至视频段语义识别模块；

所述语义模板库用于存储各种语义模板；

所述视频段语义识别模块用于接收视频段语音提取模块发送的各视频段的直播语音信息，进而对接收的各视频段的直播语音信息进行语义识别，得到识别后的各视频段直播语音信息对应的文本信息，并发送至视频段主题获取模块，其具体语义识别过程包括以下几个步骤：

S1.语音信息预处理:将接收的各视频段的直播语音信息进行端点检测和去除噪声处理，得到各视频段增强的语音信息；

S2.语义模板解析：对得到的各视频段增强的语音信息进行语义特征提取，得到各视频段对应的语义特征，同时提取语义模板库中存储的各种语义模板，进而将得到的各视频段对应的语义特征分别在每种语义模板中进行解析，并统计各视频段对应的语义特征在每种语义模板中解析对应的解析相似度，筛选相似度最大的语义模板，当筛选的最大相似度大于设定的相似度阈值，则输出相似度最大的语义模板，从而得到各视频段对应的语义模板；

S3.语义文本识别：将得到的各视频段对应的语义模板根据该语义模板的定义，通过计算机查表识别获取各视频段直播语音信息对应的文本信息；

所述视频段主题获取模块用于接收视频段语义识别模块发送的各视频段直播语音信息对应的文本信息，并从接收的各视频段语音信息对应的文本信息中提取直播商品关键词，其提取的直播商品关键词作为各视频段对应的直播主题，进而将各视频段对应的直播主题分别发送至目标图像筛选模块和分析云平台；

所述视频段视频分解模块用于对划分的各视频段根据设置的视频帧数分解为若干直播图像，并统计各视频段分解的直播图像个数，进而对各视频段分解的各直播图像按照预设的顺序进行编号，分别标记为p1,p2...pj...pm，pj表示为第p个视频段对应的第j张图像，p表示为视频段编号，p＝1,2...i...n，视频段视频分解模块将各视频段分解的各直播图像发送至目标图像筛选模块；

所述目标图像筛选模块接收视频段主题获取模块发送的各视频段对应的直播主题，并接收视频段视频分解模块发送的各视频段分解的各直播图像，进而对各视频段分解的各直播图像进行图像初步处理操作，得到处理后的各视频段对应的各高清直播图像，以此对各高清直播图像进行商品特征提取，若某高清直播图像中提取不到商品特征，则剔除该直播图像，保留能够提取到商品特征的高清直播图像，并将保留的各视频段对应各高清直播图像提取的商品特征与该视频段对应的直播主题进行匹配，若某视频段对应的某张高清直播图像与该视频段对应的直播主题匹配成功，则筛选该张高清直播图像，若某视频段对应的某张高清直播图像与该视频段对应的直播主题匹配失败，则放弃该张高清直播图像，由此筛选出各视频段对应的匹配成功的高清直播图像，其匹配成功的高清直播图像记为目标图像，此时统计各视频段对应的目标图像个数及各目标图像对应的编号，并统计各视频段对应各目标图像的匹配系数，以此将各视频段对应的各目标图像编号及各目标图像匹配系数构建各视频段目标图像集合，目标图像筛选模块将各视频段目标图像集合发送至分析云平台；

所述分析云平台接收视频段主题获取模块发送的各视频段对应的直播主题，接收目标图像筛选模块发送的各视频段目标图像集合，并将接收的各视频段对应的直播主题进行对比，分析是否存在相同的直播主题，若存在相同的主播主题，则统计相同直播主题个数和不同直播主题个数，进而统计各相同直播主题对应的视频段个数及各视频段编号，以此将各相同直播主题对应的各视频段进行合并，其合并方法为根据各相同直播主题对应的各视频段编号从视频段目标图像集合中筛选对应视频段编号的视频段目标图像集合，将各相同直播主题下的各视频段对应的视频段目标图像集合进行合并，得到各相同直播主题对应的综合视频段目标图像集合，此时获取各相同直播主题对应的综合视频段目标图像集合中各目标图像对应的匹配系数，进而将各相同直播主题对应的各目标图像按照匹配系数由大到小进行排序，得到各相同直播主题对应的目标图像排序结果，对于各不同直播主题，获取各不同直播主题对应的视频段编号，并从各视频段目标图像集合中筛选对应视频段编号的视频段目标图像集合，进而获取各不同直播主题对应的视频段目标图像集合中各目标图像对应的匹配系数，以此将各不同直播主题对应的各目标图像按照匹配系数由大到小进行排序，得到各不同直播主题对应的目标图像排序结果，分析云平台将得到的各相同直播主题对应的目标图像排序结果和各不同直播主题对应的目标图像排序结果发送至图像存储数据库；

所述图像存储数据库接收分析云平台发送的各相同直播主题对应的目标图像排序结果和各不同直播主题对应的目标图像排序结果，进行存储，供直播商品电商平台详情页图像填充；所述匹配成功是指某视频段对应的某张高清直播图像提取的商品特征与该视频段对应的直播主题完全相同或部分相同，所述匹配失败是指某视频段对应的某张高清直播图像提取的商品特征与该视频段对应的直播主题完全不相同；所述完全相同是指某视频段对应的某张高清直播图像提取的商品特征与该视频段对应的直播主题文字表达完全相同，所述部分相同是指某视频段对应的某张高清直播图像提取的商品特征与该视频段对应的直播主题文字表达存在部分文字相同；所述各视频段对应各目标图像的匹配系数的具体统计方法包括以下两个步骤：

W1：若某目标图像对应的商品特征与该目标图像对应视频段的直播主题完全相同，则该目标图像与该目标图像对应视频段的直播主题完全匹配成功，该目标图像对应的匹配系数记为ε；

W2：若某目标图像对应的商品特征与该目标图像对应视频段的直播主题部分相同，则该目标图像与该目标图像对应视频段的直播主题部分匹配成功，此时统计相同文字部分的文字字数，进而将相同部分的文字字数除以该视频段的直播主题文字字数，得到该目标图像对应的匹配系数，记为δ；所述ε和δ对应的大小关系为ε＞δ。