[发明专利]一种自动转写与生成远程医疗会诊记录的方法

权利要求书

1.一种自动转写与生成远程医疗会诊记录的方法，其特征在于：包括如下步骤：

步骤1：建立会诊管理模块、音视频终端模块、数个数据传输模块、语音转写模块和会诊记录管理模块；

会诊管理模块、语音转写模块和会诊记录管理模块均为服务器，音视频终端模块包括数个音视频终端，音视频终端包括阵列式麦克风，数据传输模块包括控制器，音视频终端模块与数据传输模块电连接，数据传输模块通过网络与会诊管理模块、语音转写模块和会诊记录管理模块通信；

步骤2：会诊管理模块对会诊信息进行管理，并对参与会诊的说话人身份与声纹信息进行登记和管理，其步骤如下：

步骤S1：会诊管理模块对会诊信息进行存储和归档，会诊信息包括时间信息、地点信息、医院及科室信息、医护人员信息、患者信息和会场中数据传输模块的网络地址与端口信息；

步骤S2：会诊开始前，参与会诊的说话人通过一个音视频终端录入身份信息和声纹信息，数据传输模块将该说话人的身份信息和声纹信息发送给会诊管理模块进行登记；

步骤S3：会诊管理模块将说话人的身份信息和声纹信息绑定到采集该说话人音频信息的音视频终端；

步骤3：音视频终端采集所在会诊室内的音视频信息，并播放展示来自其他会诊室的音视频信息，所述音视频终端包括个人用阵列式麦克风、多人用阵列式麦克风、个人用定指向麦克风和多人用全向性麦克风；

所述个人用阵列式麦克风被设定为采集某个与会者的声音，利用说话人定位技术，根据与会者登记的声纹信息，判断某个指定的与会者发言时所在方向，采集该方向的声音，抑制来自其他方向的噪音，并形成一路音频信号；

所述多人用阵列式麦克风利用说话人定位技术，根据与会者登记的声纹信息，分别判断每个与会者发言时所在的方向，采集该方向的声音，抑制来自其他方向的噪音，为每个与会者形成一路音频信号；

所述个人用定指向麦克风根据预先设定的固定指向方向采集来自该方向的个人声音，抑制来自其他方向的噪音，并形成一路音频信号；

所述多人用全向性麦克风采集来自任意方向的声音，将所有参会人员的声音一同采集，并形成一路音频信号；

在使用个人用阵列式麦克风和个人用定指向麦克风时，说话人身份与音视频终端是绑定的，音视频终端在采集音频的同时可以得到说话人身份信息；

步骤4：音视频终端通过数据传输模块将采集到的音频信息发送给语音转写模块，语音转写模块根据所述会诊管理模块提供的所述网络地址与端口信息，从所述音视频终端中获取音频信息，

步骤5：音视频终端将说话人的身份信息同步传送给语音转写模块；

步骤6：语音转写模块分别针对每个参会方的音频信息进行语音转写，得到音频信息中每一句语音的转写结果、语音的开始结束时间以及该语音对应的说话人身份，并将上述信息通过网络传送至所述会诊记录管理模块；在转写过程中，利用说话人身份信息以获得高转写准确率；

步骤7：会诊记录管理模块根据所述会诊管理模块提供的所述会诊信息，将所述同步识别的结果收集整理，形成会诊记录。

2.如权利要求1所述的一种自动转写与生成远程医疗会诊记录的方法，其特征在于:

所述个人用阵列式麦克风为在每个参会人员面前放置一个个人用阵列式麦克风，用于采集个人声音；

所述多人用阵列式麦克风为在会诊室中放置一个多人用阵列式麦克风，用于采集所有参会人员的声音；

所述个人用定指向麦克风为在每个参会人员面前放置一个定指向麦克风，用于采集个人声音；

所述多人用全向性麦克风为在会诊室中放置一个全向性麦克风，用于采集所有参会人员的声音。

3.如权利要求1所述的一种自动转写与生成远程医疗会诊记录的方法，其特征在于:在执行步骤4时，语音转写模块通过两种途径获取音频信息：第一途径：从数据传输模块中获取所有与其连接的音视频终端采集的多通道音频信息；第二途径：从音视频终端直接获取说话人的音频信息。

4.如权利要求1所述的一种自动转写与生成远程医疗会诊记录的方法，其特征在于:所述语音转写为将音频数据转换成文本数据。

5.如权利要求1所述的一种自动转写与生成远程医疗会诊记录的方法，其特征在于:在执行步骤6时，在未知说话人身份的情况下：

如果采用的是多人用阵列式麦克风，音频信息是根据说话人方位分离出的各个说话人独立的音频信息，所述语音转写模块采用说话人身份与语音内容同步识别技术，在转写过程中，利用说话人身份信息以获得高转写准确率；

如果采用的是多人用全向性麦克风，音频信息是会诊室内所有说话人的混合音频信号形成的码流，所述语音转写模块采用说话人身份与语音内容同步识别技术，在转写过程中同步识别说话人身份，利用说话人身份信息实现多人混合语音的分离，并实现高准确率的转写。