[发明专利]用图像表达音乐的软件

说明书

技术领域

本发明用图像表达音乐的软件属于信息技术处理领域，可用于计算机系统、手持智能终端、互联网、移动互联网的音乐播放功能，为听音乐的人特别是耳聋人提供音乐的图像享受。

背景技术

国家统计部门的调查，全国有上千万的聋哑人，每年有新生聋哑儿也近20万，是残疾类型中比例最高的，听力损失作为名列第十五位的世界性疾病，对这些人造成一生的遗憾。世界上人们创造了丰富多彩的歌曲和乐曲，使人得到了精神的喜悦和享受，而耳聋人终身无法感受音乐为人生带来的快乐。学者研究发现，一些聋哑人的视觉鉴别能力和对色彩刺激的视觉记忆力较强，由于生理的补偿，他们的视觉记忆和想象力有可能高于正常人。

当前，音乐播放器中已有伴随音乐带有图像显示的软件，如微软的media player是一款音乐播放器，其中一项功能是配合音乐的播放同时显示图像，但显示的图像不规则，是按软件自身设定好的方式进行显示，图像变化的节奏同播放的音乐内容关系不大，其目的是为正常人在欣赏音乐的同时伴以图像的烘托，并不是要传达音乐的内涵和情感。另外一种《音乐图片播放器》是在欣赏MP3音乐时，可以显示用户喜欢的图片来配合，一边欣赏音乐，一边观看图片了。用户可以将喜欢的图片添加到图片清单，在欣赏音乐的同时观看图片。

在专利文献(专利申请号：200680010119.0)中所揭示的音乐图像播放装置中，旨在实现的是人物脸部各部位的表情变化，试图采用动画的形式来体现音乐，该装置选取人物的部位特征(眉毛、眼睛等)的不同形态，与从傅里叶变换单元得到的多个频率成分的各成分相对应，并根据各频率成分的振幅等级相应决定所取人物的部位，尽而完成人物绘画并进行显示。根据得到的多个频率成分的各时间变化的大小来设定控制监视器上显示的人物数，根据音乐的演奏过程，逐一地显示对应的图案。专利文献中所述虽然是根据特性来对应相应的图案，问题是音乐的频率和振幅是两个特征，不能将频率的特征和振幅的特征综合起来对应一个图像，而且专利文献中给出的频率、振幅与图形的对应关系，相近频率和振幅的对应图像之间没有任何关联，随音乐变化所显示的图像前后并没有连续性，因而不能表现出音乐的内容。

本软件发明是为了解决上述的问题而提出的，其目的在于提供一种能够根据音乐的节拍、音色、音量等特性，选取相对应的图像，用图像的色彩、大小、变化节奏来表达音乐的主题、内涵、情感，来感染耳聋人，使耳聋人能够感受人类所创造的丰富的音乐成果。

发明内容

当前，为使信息系统能够处理音乐，首先对音乐的声音采用PCM方式进行数字化处理，采样频率有11.025kHz、22.05kHz、44.1kHz。音乐数字化后的信息存储格式有WAV(波形文件)、MIDI(电子音乐文件)、CDA(CD唱片文件)、MP3(高压缩格式)、RA、RM(用于网络的流式传播格式)等，不管音乐文件采用那种格式存放，在播放音乐时，首先将数字信息进行波形数据的还原，该解压的解压，该转换的转换，将还原的波形数据送给播放电路进行播放。

本软件从音乐的波形数据信息中按时间段获取频率、振幅等多个特征的代表值；按照用户默认或自定义的时间段、图像库、颜色参数、频率点和显示比例参数，根据提取的特征值从图像库中提取图像、颜色参数、显示比例和时间段值而生成相应的图像进行显示。通过相应图像的形状变化、颜色变化、大小变化、显示速度变化来表达音乐的主题、节奏、音色、声量等，进而传达音乐要表现得意境、内涵和情感，使人(特别是耳聋的人)通过观看图像的变化来体会该乐曲的魅力。该软件可应用于各种带有显示功能的音乐播放系统中，如：电脑、智能手机、IPAD、MP4等。本软件可以单独构成一个音乐播放器，也可以嵌入其它音乐播放软件中使用。

本发明的时间段管理模块可由用户默认或自行定义特征提取的时间段的长短。音乐是有拍节的，有4分、8分、16分、32分节拍。这里的4分拍对应的一拍就是1秒钟，而32分拍对应的一拍就是1／8秒钟。这里的时间段就是一个音符延续的时间。本软件的特征提取模块利用音乐的这一特点，对波形数据按时间分段进行提取，例如按1／8秒进行分段提取特征。也可以按1／4秒、1／2秒、1秒来分段进行提取。可由用户自行选择时间段长短，时间段在1／8秒到1秒之间选择。