[发明专利]基于帧间信息的视频文字处理方法

摘要

本发明公开了一种基于帧间信息的视频文字处理方法，包括以下步骤：检测当前图像的文本区域R(x，y，t)，对当前图像f(x，y，t)的文本区域R(x，y，t)进行校验，从前往后对文本区域R(x，y，t)进行背景修复，从最后一帧开始往前进行背景修复。本发明的可保证检测定位的准确性，保证修复结果的正确性，保证视频结果的时间连续性。

主权项

1.一种基于帧间信息的视频文字处理方法，包括以下步骤：(1)检测当前图像的文本区域R(x，y，t)，设所述当前图像为f(x，y，t)，其前面的N幅图像依次为f(x，y，t-1)，…，f(x，y，t-N)，所述N幅图像对应的文本区域分别为R(x，y，t-1)，…，R(x，y，t-N)，其中x代表所述当前图像的横坐标，y代表所述当前图像的纵坐标，t代表所述当前图像的帧数；(2)对所述当前图像f(x，y，t)的所述文本区域R(x，y，t)进行校验，具体包含以下子步骤：(21)判断所述文本区域R(x，y，t)中的子区域是否在文本区域R(x，y，t-1)，…，R(x，y，t-N)中出现过；(22)若没有出现过，则可确定所述子区域是虚警区域，将所述子区域排除，并将所述文本区域R(x，y，t)更新为R_new(x，y，t)，其中R_new(x，y，t)为所述当前图像中的待修复区域；(23)若出现过，则继续对所述文本区域R(x，y，t)中其他子区域进行校验；(3)从前往后对所述文本区域R(x，y，t)进行背景修复，具体包含以下子步骤：(31)分析所述当前图像f(x，y，t)及其前N帧的运动偏移，如果运动较大，则直接对下一帧进行处理，如果运动较小，则进行步骤(32)；(32)将所述当前图像的文本区域R_new(x，y，t)及其前N帧的文本区域R(x，y，t-1)，…，R(x，y，t-N)进行比较，得到所述当前图像中可利用帧间信息修复的区域为R_new(x，y，t)-R(x，y，t-1)，…，R_new(x，y，t)-R(x，y，t-N)；(33)对所述当前图像f(x，y，t)中的R_new(x，y，t)-R(x，y，t-1)，…，R_new(x，y，t)-R(x，y，t-N)区域，在所述前N帧中搜索最佳匹配块完成修复，并更新R_new(x，y，t)；(34)重复步骤(3)对后面一帧进行处理，直至处理完整段视频。(4)从最后一帧开始往前进行背景修复，具体包含以下子步骤：(41)分析所述当前图像f(x，y，t)与后N帧的运动偏移；如果运动较大，直接对前面一帧进行处理；如果运动较小，则进行步骤(42)；(42)将所述当前图像的文本区域R_new(x，y，t)与后N帧的文本区域R(x，y，t+1)，…，R(x，y，t+N)进行比较，得到当前图像中可利用帧间信息修复的区域为R_new(x，y，t)-R(x，y，t+1)，…，R_new(x，y，t)-R(x，y，t+N)；(43)对所述当前图像f(x，y，t)中的R_new(x，y，t)-R(x，y，t+1)，…，R_new(x，y，t)-R(x，y，t+N)区域，在后N帧中搜索最佳匹配块完成修复，并更新R_new(x，y，t)；(44)如果此时那么对剩余的文本区域，在本帧中搜索最佳的匹配块进行修复；否则重复步骤(4)对前面一帧进行处理，直到处理完整段视频。