[发明专利]显示装置及其操作方法

说明书

提供了一种显示装置，包括：显示器；存储器，存储一个或多个指令；以及处理器，被配置为执行存储在存储器中的所述一个或多个指令以进行下列操作：选择要在显示器上显示的图像，通过使用至少一个神经网络，对图像的类别进行分类，根据图像的类别获得图像的语义信息，通过分析图像获得与图像相对应的情感信息；基于图像的语义信息和与图像相对应的情感信息，确定要与所述图像一起输出的音频，以及在显示图像的同时输出音频。

相关申请的交叉引用

本申请基于并要求于2018年10月22日向韩国知识产权局提交的韩国专利申请No.10-2018-0126305以及于2019年4月23日向韩国知识产权局提交的韩国专利申请No.10-2019-0047516的优先权，其公开内容通过引用整体并入本文。

技术领域

本公开涉及显示装置及其操作方法，更具体地，涉及适应于显示在显示装置上的图像来提供音乐的显示装置，以及操作该显示装置的方法。

背景技术

图像显示装置在显示器上显示可以由用户从广播站发送的广播信号中选择的广播。数字广播表示传送数字图像和语音信号的广播。而且，数字广播使得能够进行双向服务。

智能电视(TV)除了数字广播功能之外还提供各种类型的内容。智能电视旨在无需用户操作的情况下分析并提供用户所期望的内容，而不是根据用户选择进行手动操作。

与现有的基于规则的智能系统不同，人工智能(AI)系统是实现人类水平智能的计算机系统，是机器自行训练、作出决定并变得更加智能的系统。

发明内容

提供了一种显示装置以及该显示装置的操作方法，该显示装置通过在显示装置显示图像期间适应于图像推荐或确定音频，并且随图像显示一起提供与图像的印象相似的音频，来最大化用户的审美体验。

附加方面部分地将在接下来的描述中阐述，且部分地将通过该描述而变得清楚明白，或者可以通过对本公开所呈现实施例的实践来获知。

根据本公开的方面，显示装置包括：显示器；存储器，存储一个或多个指令；以及处理器，被配置为执行存储在存储器中的一个或多个指令以进行下列操作：选择要在显示器上显示的图像；通过使用至少一个神经网络，对图像的类别进行分类并根据图像的分类类别获得图像的语义信息；通过分析图像获得与图像相对应的情感信息；基于图像的语义信息和与图像相对应的情感信息，确定要随图像一起输出的音频；以及在显示所选择的图像的同时输出所确定的音频。

处理器还可以被配置为执行一个或多个指令以进行下列操作：从图像中提取特征；通过使用图像特征来确定图像的类别是照片还是艺术品；响应于图像的类别为照片，通过确定与照片相对应的多个语义风格中的至少一个语义风格来获得语义信息；以及响应于图像的类别为艺术品，通过确定与艺术品相对应的多个语义风格中的至少一个语义风格来获得语义信息。

处理器还可以被配置为执行一个或多个指令以进行下列操作：通过使用与图像的语义数据相对应的元数据表来获得与图像的语义数据相对应的音频语义元数据；通过使用与图像的情感数据相对应的元数据表来获得与图像的情感数据相对应的音频情感元数据；以及基于音频语义元数据和音频情感元数据来确定要随所选择的图像一起输出的音频。

处理器还可以被配置为执行一个或多个指令以进行下列操作：将音频语义元数据和音频情感元数据发送给音乐服务提供服务器；以及从音乐服务提供服务器接收基于音频语义元数据和音频情感元数据确定的音频。

处理器还可以被配置为执行一个或多个指令以进行下列操作：基于音频语义元数据和音频情感元数据配置声音；以及将配置的声音与确定的音频进行混合。

处理器还可以被配置为执行一个或多个指令以进行下列操作：获得关于对显示器上显示的图像和输出音频的反应的用户交互信息；以及通过使用用户交互信息来更新与语义信息相对应的元数据表或与情感信息相对应的元数据表中的至少一个。