人工智能设备pdf

 公司新闻     |      2024-02-23 20:42:19    |      小编

  本发明公开了人工智能设备。根据本公开的实施例的人工智能设备可以从显示装置接收与观看信息和搜索命令相对应的语音数据,将接收到的语音数据转换成文本数据,获得指示转换的文本数据的意图的第一查询,基于观看信息将第一查询转换成第二查询,获得与转换的第二查询相对应的搜索结果,并且将获得的搜索结果发送给显示装置。

  (19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 112750438 A (43)申请公布日 2021.05.04 (21)申请号 0.7 G06F 16/9038(2019.01) (22)申请日 2019.12.24 (30)优先权数据 10- 2019.10.30 KR (71)申请人 LG 电子株式会社 地址 韩国首尔 (72)发明人 李相锡 (74)专利代理机构 中原信达知识产权代理有限 责任公司 11219 代理人 杨宝霏夏凯 (51)Int.Cl. G10L 15/26(2006.01) G06F 16/953(2019.01) G06F 16/9538(2019.01) G06F 16/903(2019.01) 权利要求书2页 说明书19页 附图17页 (54)发明名称 人工智能设备 (57)摘要 本发明公开了人工智能设备。根据本公开的 实施例的人工智能设备可以从显示装置接收与 观看信息和搜索命令相对应的语音数据,将接收 到的语音数据转换成文本数据,获得指示转换的 文本数据的意图的第一查询,基于观看信息将第 一查询转换成第二查询,获得与转换的第二查询 相对应的搜索结果,并且将获得的搜索结果发送 给显示装置。 A 8 3 4 0 5 7 2 1 1 N C CN 112750438 A 权利要求书 1/2页 1.一种人工智能设备,包括: 通信接口人工智能设备pdf,所述通信接口被配置成与显示装置通信;以及 处理器,所述处理器被配置成: 通过所述通信接口从所述显示装置接收与观看信息和搜索命令相对应的语音数据, 将接收到的语音数据转换成文本数据, 获得指示转换的文本数据的意图的第一查询, 基于所述观看信息将所述第一查询转换成第二查询, 获得与转换的第二查询相对应的搜索结果,并且 将获得的搜索结果发送给所述显示装置。 2.根据权利要求1所述的人工智能设备, 其中,所述观看信息包括在所述显示装置上显示的搜索结果UI中包括的内容信息、在 所述显示装置上正在观看的节目的信息以及由用户先前说出的先前搜索词中的至少一个。 3.根据权利要求2所述的人工智能设备, 其中,所述内容信息包括以下中的至少一个:包括与所述搜索结果UI中包括的多个内 容项中的每个相对应的多个标题的标题列表、多个内容项当中的聚焦项的标题以及所述内 容项的位置关系。 4.根据权利要求3所述的人工智能设备, 其中,所述处理器被配置成: 如果所述搜索结果UI被显示在所述显示装置上并且所述第一查询是指示多个内容项 当中的第N个内容项的查询,则基于所述内容信息来提取第N个内容项;并且 使用所述第N个内容项的标题来将所述第一查询转换成所述第二查询。 5.根据权利要求3所述的人工智能设备, 其中,所述处理器被配置成: 如果所述搜索结果UI被显示在所述显示装置上并且在所述多个内容项当中存在聚焦 项,则提取聚焦的内容项,并且 使用提取的内容项的标题来将所述第一查询转换成所述第二查询。 6.根据权利要求2所述的人工智能设备, 其中,所述处理器被配置成: 如果所述搜索结果UI未显示在所述显示装置上,则使用所述先前搜索词将所述第一查 询转换成所述第二查询。 7.根据权利要求4所述的人工智能设备, 其中,所述处理器被配置成: 从所述显示装置接收与附加搜索命令相对应的语音数据, 将所述接收到的语音数据转换成文本数据,并且 获得附加搜索结果,所述附加搜索结果反映所述第N个内容项的所述转换的文本数据 的意图。 8.根据权利要求7所述的人工智能设备, 其中,所述处理器被配置成: 在从所述显示装置接收到反映取消对所述第N个内容项的选择的意图的命令的情况 2 2 CN 112750438 A 权利要求书 2/2页 下,取消所述第N个内容项的选择。 9.根据权利要求1所述的人工智能设备, 其中,所述处理器被配置成: 确定多个AI代理当中的执行与所述第二搜索查询相对应的搜索的AI代理,并且 从确定的AI代理获得与所述第二搜索查询相对应的所述搜索结果。 10.根据权利要求9所述的人工智能设备, 其中,所述第一AI代理和所述第二AI代理中的每个都是表示提供语音识别服务的主体 的代理。 11.一种人工智能设备,包括: 通信接口,所述通信接口被配置成与显示装置通信;以及 处理器,所述处理器被配置成: 通过所述通信接口从所述显示装置接收与对象的信息和语音命令相对应的语音数据; 将接收到的语音数据转换成文本数据, 获得指示转换的文本数据的意图的第一查询, 基于所述对象的信息将所述第一查询转换成第二查询, 获得与所述转换的第二查询相对应的意图执行结果,并且 将获得的意图执行结果发送给所述显示装置。 12.根据权利要求11所述的人工智能设备, 其中,所述对象的信息是用于识别包括在所述显示装置上显示的节目图像中的对象的 名称。 13.根据权利要求12所述的人工智能设备, 其中,所述处理器被配置成: 将所述对象的名称与所述第一查询结合以生成所述第二查询。 14.根据权利要求13所述的人工智能设备, 其中,所述处理器被配置成: 将所述第二查询发送到多个AI代理中的任何一个,并且 获得与所述第二查询相对应的所述意图执行结果。 15.根据权利要求14所述的人工智能设备, 其中,所述意图执行结果包括所述对象的详细搜索信息。 3 3 CN 112750438 A 说明书 1/19页 人工智能设备 技术领域 [0001] 本公开涉及能够通过多个人工智能代理提供语音识别服务。 背景技术 [0002] 使用有线或无线通信网络的数字电视服务正变得越来越普遍。数字电视服务可以 提供传统模拟广播服务无法提供的各种服务。 [0003] 例如,作为数字电视服务的一种的IPTV(互联网协议电视)和智能电视服务提供允 许用户主动选择观看节目和观看时间的类型的双向性。IPTV、智能电视服务可以基于此双 向性提供各种附加的服务,诸如互联网搜索、家庭购物和在线] 近来,已经出现用于识别用户的话语并且使用人工智能根据用户的话语提供语音 识别服务的许多技术。 [0005] 通常,显示装置配备有能够提供语音识别服务的多个人工智能(AI)代理。 [0006] 传统上,多个AI代理已经提供与用户正在观看的节目信息有关的信息或查询。 [0007] 然而,相关联的信息或查询在连接到用户先前搜索的搜索词的有限范围内被提 供。 [0008] 例如,如果先前搜索词是天气(weather),则与此相关的信息仅是明天是 (tomorrow  is),这是诱导用户的线] 换句话说,在传统的多AI代理服务中,因为链接到先前搜索词的信息的提供被限 制在有限的范围内,所以在搜寻各种连续信息中存在不便。 发明内容 [0010] 本公开的目的是为了能够通过用户的话语连续地搜寻各种信息。 [0011] 本公开的目的是为了如果通过多AI代理提供语音识别服务,则能够通过使用每个 AI代理的搜索结果来进行信息的连续搜索。 [0012] 根据本公开的实施例的人工智能设备可以从显示装置接收与观看信息和搜索命 令相对应的语音数据,将接收到的语音数据转换成文本数据,获得指示转换的文本数据的 意图的第一查询,基于观看信息将第一查询转换成第二查询,获得与转换的第二查询相对 应的搜索结果,并且将获得的搜索结果发送给显示装置。 [0013] 根据本公开的另一实施例的人工智能设备可以通过通信接口从显示装置接收与 对象的信息和语音命令相对应的语音数据,将接收到的语音数据转换成文本数据,获得指 示转换的文本数据的意图的第一查询,基于对象的信息将第一查询转换成第二查询,获得 与转换的第二查询相对应的意图执行结果,并且将获得的意图执行结果发送给显示装置。 [0014] 根据本公开的各种实施例,自然地并且连续地执行各种信息的搜索,使得用户可 以感觉到信息搜索的改善的体验。 4 4 CN 112750438 A 说明书 2/19页 附图说明 [0015] 图1是图示根据本发明的实施例的显示装置的配置的框图。 [0016] 图2是图示根据本发明的实施例的遥控装置的框图。 [0017] 图3是图示根据本发明的实施例的遥控装置的实际配置的视图。 [0018] 图4是图示根据本发明的实施例的利用遥控装置的视图。 [0019] 图5是图示根据本公开的实施例的AI服务器的配置的框图。 [0020] 图6是用于描述根据本公开的另一实施例的人工智能系统的配置的视图。 [0021] 图7是根据本公开的实施例的用于操作人工智能系统的方法的梯形图。 [0022] 图8是图示根据本公开的实施例的用于描述由NLP服务器基于第一观看信息或第 二观看信息来完成搜索查询的过程的方法的图。 [0023] 图9至图11是用于描述根据本公开的实施例的基于搜索结果UI或先前搜索词的显 示来执行与由用户说出的搜索命令相对应的操作的过程的图。 [0024] 图12A和图12B是用于图示根据本公开的实施例的通过连续话语提供搜索结果的 示例的视图。 [0025] 图12C是图示用于描述取消内容项的选择的过程的实施例的视图。 [0026] 图13是根据本公开的另一实施例的用于描述操作人工智能系统的方法的梯形图。 [0027] 图14和图15是用于描述使用对象识别技术来掌握用户的话语意图的实施例的图。 [0028] 图16是用于描述根据图13至图15的实施例的人工智能系统的另一种形式的视图。 具体实施方式 [0029] 在下文中,将参考附图详细描述与本公开有关的实施例。考虑到撰写说明书的简 便,下面描述中使用的组件的后缀“模块”和“单元”被指配或混合,并且它们本身没有区别 性的含义或作用。 [0030] 根据本公开的实施例的显示装置,例如,作为将计算机支持功能添加到广播接收 功能的人工显示装置,可以具有诸如书写输入装置、触摸屏或空间遥控装置的易于使用的 界面,因为在实现广播接收功能的同时互联网功能被添加。然后,在有线或无线互联网功能 的支持下,可以在访问互联网和计算机时执行电子邮件、web浏览、银行业务或游戏功能。为 了执行这样的各种功能,可以使用标准化的通用OS。 [0031] 因此,因为在通用OS内核上自由地添加或删除各种应用,所以例如,在此描述的显 示装置可以执行各种用户友好的功能。更详细地,显示装置可以是网络电视、混合广播宽带 电视(HBBTV)、智能电视、发光二极管(LED)电视、有机发光二极管(OLED)电视等等,并且在 一些情况下,可以被应用于智能手机。 [0032] 图1是图示根据本公开的实施例的显示装置的配置的框图。 [0033] 参考图1,显示装置100能够包括广播接收单元130、外部设备接口单元135、存储单 元140、用户接口单元150、控制单元170、无线。 [0034] 广播接收单元130能够包括调谐器131、解调单元132和网络接口单元133。 [0035] 调谐器131能够根据频道选择命令来选择特定广播频道。调谐器131能够接收用于 所选择的特定广播频道的广播信号。 5 5 CN 112750438 A 说明书 3/19页 [0036] 解调单元132能够将所接收的广播信号划分成视频信号、音频信号和广播节目相 关的数据信号,并且将所划分的视频信号、音频信号和数据信号恢复为输出可用形式。 [0037] 外部设备接口单元135能够在相邻的外部设备中接收应用或应用列表,并将其递 送到控制单元170或存储单元140。 [0038] 外部设备接口单元135能够提供显示装置100和外部设备之间的连接路径。外部设 备接口单元135能够接收从无线的外部设备输出的图像或音频 中的至少一个,并将其递送到控制单元170。外部设备接口单元135可以包括多个外部输入 端子。多个外部输入端子可以包括RGB端子、至少一个高清多媒体接口(HDMI)端子和组件端 子。 [0039] 通过外部设备接口单元135输入的外部设备的图像信号可以通过显示单元180输 出。通过外部设备接口单元135输入的外部设备的语音信号可以通过音频输出单元185输 出。 [0040] 可连接到外部设备接口单元135的外部设备能够是机顶盒、蓝光播放器、DVD播放 器、游戏控制台、条形音箱、智能手机、PC、USB存储器和家庭影院系统中的一个,但这只是示 例性的。 [0041] 网络接口单元133能够提供用于将显示装置100连接到包括因特网网络的有线/无 线网络的接口。网络接口单元133能够通过接入的网络或链接到所接入的网络的另一网络 向另一用户或另一电子设备发送数据或从另一用户或另一电子设备接收数据。 [0042] 另外,被存储在显示装置100中的一些内容数据能够被发送到用户或电子设备,其 选自在显示装置100中预先注册的其他用户或其他电子设备。 [0043] 网络接口单元133能够通过接入的网络或链接到所接入的网络的另一网络访问预 定的网页。换言之,网络接口单元133能够通过经由网络访问预定的网页来向相应的服务器 发送数据或从相应的服务器接收数据。 [0044] 然后,网络接口单元133能够接收从内容提供商或网络运营商提供的内容或数据。 换言之,网络接口单元133能够通过网络接收从内容提供商或网络提供商提供的诸如电影、 广告、游戏、VOD和广播信号的内容以及与其相关的信息。 [0045] 另外,网络接口单元133能够接收固件更新信息并且更新从网络运营商提供的文 件,并将数据发送到因特网或内容提供商或网络运营商。 [0046] 网络接口单元133能够通过网络在开放(open  to  the air)的应用中选择和接收 期望的应用。 [0047] 存储单元140能够存储由程序存储的经信号处理的图像、语音或数据信号,以便在 控制单元170中对每个信号进行处理和控制。 [0048] 另外,存储单元140能够执行用于临时存储从外部设备接口单元135或网络接口单 元133输出的图像、语音或数据信号的功能,并且能够通过频道记忆功能存储关于预定图像 的信息。 [0049] 存储单元140能够存储从外部设备接口单元135或网络接口单元133输入的应用或 应用列表。 [0050] 显示装置100能够播放存储在存储单元140中的内容文件(例如,视频文件、静止图 像文件、音乐文件、文档文件、应用文件等)并将它们提供给用户。 6 6 CN 112750438 A 说明书 4/19页 [0051] 用户接口单元150能够将由用户输入的信号递送到控制单元170,或者将来自控制 单元170的信号递送给用户。例如,用户接口单元150能够根据诸如蓝牙、超宽带(WB)、紫蜂、 射频(RF)和IR的各种通信方法从遥控装置200接收或处理诸如电源开/关、频道选择和屏幕 设置的控制信号,或者从控制单元170向遥控装置200发送控制信号。 [0052] 另外,用户接口单元150能够向控制单元170递送从诸如电源键、频道键、音量键和 设置键的本地键(未被图示)输入的控制信号。 [0053] 在控制单元170中经图像处理的图像信号能够被输入到显示单元180,并且被显示 为与相应图像信号相对应的图像。另外,在控制单元170中经图像处理的图像信号能够通过 外部设备接口单元135输入到外部输出设备。 [0054] 在控制单元170中处理的语音信号能够被输出到音频输出单元185。另外,在控制 单元170中处理的语音信号能够通过外部设备接口单元135输入到外部输出设备。 [0055] 除此之外,控制单元170能够控制显示装置100中的整体操作。另外,控制单元170 能够通过经由用户接口单元150输入的用户命令或内部程序来控制显示装置100,并且在接 入网络时将期望的应用或应用列表下载到显示装置100中。 [0056] 控制单元170能够通过显示单元180或音频输出单元185输出由用户选择的频道信 息以及经处理的图像或语音信号。 [0057] 另外,根据通过用户接口单元150接收的外部设备图像回放命令,控制单元170能 够通过显示单元180或音频输出单元185输出通过外部设备接口单元135输入的诸如相机或 便携式摄像机的外部设备的图像信号或语音信号。 [0058] 此外,控制单元170能够控制显示单元180以显示图像并控制通过调谐器131输入 的广播图像、通过外部设备接口单元135输入的外部输入图像、通过网络接口单元输入的图 像、或存储在存储单元140中的图像以被显示在显示单元180上。在这种情况下,显示在显示 单元180上的图像能够是静止图像或视频,并且还能够是2D图像或3D图像。 [0059] 另外,控制单元170能够播放存储在显示装置100中的内容、接收的广播内容和从 外部输入的外部输入内容,并且内容能够是各种格式,诸如广播图像、外部输入图像、音频 文件、静止图像、访问的Web屏幕和文档文件。 [0060] 无线能够执行与外部电子设备的有线或无线通信。无线 TM 能够与外部设备执行短程通信。为此,无线能够通过使用蓝牙 、射频识别 (RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi- Fi)、Wi-Fi直连和无线通用串行总线(USB)技术中的至少一个来支持短程通信。无线能够通过无线和无线通信系统之间、显示装置100和另一 显示装置100之间、或者在包括显示装置100和另一显示装置100(或外部服务器)的网络之 间的无线通信。无线区域网络能够是无线] 这里,另一显示装置100能够是诸如能够与显示装置100交换数据(或者互通)的可 穿戴设备(例如,智能手表、智能眼镜和头戴式显示器(HMD))或智能手机的移动终端。无线能够检测(或识别)显示装置100周围的可通信的可穿戴设备。此外,如果检测 到的可穿戴设备是经认证的与显示装置100通信的设备,则控制单元170能够通过无线中处理的数据的至少一部分发送到可穿戴设备。因此,可穿戴设 备的用户能够通过可穿戴设备使用在显示装置100中处理的数据。 7 7 CN 112750438 A 说明书 5/19页 [0062] 显示单元180能够将在控制单元170中处理的图像信号、数据信号或在屏显示 (OSD)信号、或者在外部设备接口单元135中接收的图像信号或数据信号转换成R、G和B信 号,以生成驱动信号。 [0063] 同时,在图1中图示的显示装置100仅是本公开的一个实施例,并且因此,根据实际 实现的显示装置100的规格,能够集成、添加或省略图示的一些组件。 [0064] 换言之,如有必要,能够将两个或更多个组件集成到一个组件中,或者能够将一个 组件划分成两个或更多个组件并进行配置。另外,由每个块执行的功能是描述本公开的实 施例,并且其具体操作或设备不限制本公开的范围。 [0065] 根据本公开的另一实施例,与图1不同,在不包括调谐器131和解调单元132的情况 下,显示装置100能够通过网络接口单元133或外部设备接口单元135接收图像并进行播放。 [0066] 例如,显示装置100能够被划分成诸如机顶盒的用于根据各种网络服务接收广播 信号或内容的图像处理设备和用于播放从图像处理设备输入的内容的内容回放设备。 [0067] 在这种情况下,下面描述的根据本公开的实施例的显示装置的操作方法能够由参 考图1描述的显示装置、诸如分离的机顶盒的图像处理设备、以及包括显示单元180和音频 输出单元185的内容回放设备中的一个来执行。 [0068] 然后,参考图2和3,根据本发明实施例描述遥控装置。 [0069] 图2是图示根据本发明的实施例的遥控装置的框图,并且图3是图示根据本公开的 实施例的遥控装置200的实际配置的视图。 [0070] 首先,参考图2,遥控装置200能够包括指纹识别单元210、无线、电源单元260、存储单元270、控制单元280和语 音采集单元290。 [0071] 参考图2,根据本公开的上述实施例,无线向任意一个显示装置发送 信号/从任意一个显示装置接收信号。 [0072] 遥控装置200能够包括:射频(RF)模块221,用于根据RF通信标准向显示装置100发 送信号/从显示装置100接收信号;和IR模块223,用于根据IR通信标准向显示装置100发送 信号/从显示装置100接收信号。另外,遥控装置200能够包括蓝牙模块225,用于根据蓝牙通 信标准向显示装置100发送信号/从显示装置100接收信号。另外,遥控装置200能够包括近 场通信(NFC)模块227,用于根据NFC通信标准向显示装置100发送信号/从显示装置100接收 信号;以及WLAN模块229,用于根据无线LAN(WLAN)通信标准向显示装置100发送信号/从显 示装置100接收信号。 [0073] 另外,遥控装置200能够通过无线的移动的 信息的信号发送到显示装置100。 [0074] 此外,遥控装置200能够通过RF模块221接收从显示装置100发送的信号,并且如有 必要,能够通过IR模块223将关于电源开/关、频道改变和音量改变的命令发送到显示装置 100。 [0075] 用户输入单元230能够被配置有键盘按钮、触摸板或触摸屏。用户能够操纵用户输 入单元230以将与显示装置100有关的命令输入到遥控装置200。如果用户输入单元230包括 硬键按钮,则用户能够通过硬键按钮的按压操作向遥控装置200输入与显示装置100有关的 命令。将参考图3对此进行描述。 8 8 CN 112750438 A 说明书 6/19页 [0076] 参考图3,遥控装置200能够包括多个按钮。多个按钮能够包括指纹识别按钮212、 电源按钮231、主屏按钮232、直播按钮233、外部输入按钮234、语音调节按钮235、语音识别 按钮236、频道改变按钮237、检查按钮238和后退按钮239。 [0077] 指纹识别按钮212能够是用于识别用户指纹的按钮。根据本公开的实施例,指纹识 别按钮212能够执行按压操作并接收按压操作和指纹识别操作。电源按钮231能够是用于打 开/关闭显示装置100的电源的按钮。主页按钮232能够是用于移动到显示装置100的主屏幕 的按钮。直播按钮233能够是用于显示直播广播节目的按钮。外部输入按钮234能够是用于 接收连接到显示装置100的外部输入的按钮。语音调节按钮235能够是用于调节从显示装置 100输出的音量的大小的按钮。语音识别按钮236能够是用于接收用户的语音和识别所接收 的语音的按钮。频道改变按钮237能够是用于接收特定广播频道的广播信号的按钮。检查按 钮238能够是用于选择特定功能的按钮,并且后退按钮239能够是用于返回到前一屏幕的按 钮。 [0078] 将再次描述图2。 [0079] 如果用户输入单元230包括触摸屏,则用户能够触摸触摸屏的软键以将与显示装 置100有关的命令输入到遥控装置200。另外,用户输入单元230能够包括由用户操纵的各种 输入装置,例如,滚动键和柄式键(jog key),并且本实施例不限制本公开的范围。 [0080] 传感器单元240能够包括陀螺仪传感器241或加速度传感器243,并且陀螺仪传感 器241能够感测关于遥控装置200的移动的信息。 [0081] 例如,陀螺仪传感器241能够基于x、y和z轴感测关于遥控装置200的操作的信息, 并且加速度传感器243能够感测关于遥控装置200的移动速度的信息。此外,遥控装置200还 能够包括距离测量传感器,并且感测相对于显示装置100的显示单元180的距离。 [0082] 输出单元250能够输出对应于用户输入单元235的操纵或对应于从显示装置100发 送的信号的图像或语音信号。通过输出单元250,用户能够识别出是否用户输入单元235被 操纵或者显示装置100被控制。 [0083] 例如,如果用户输入单元235纵或者通过无线发 送信号或从显示装置100接收信号,则输出单元250能够包括用于闪光的LED模块251、用于 生成振动的振动模块253、用于输出声音的声音输出模块255、或用于输出图像的显示模块 257。 [0084] 另外,电源单元260向遥控装置200供应电力,并且如果遥控装置200在预定的时间 内没有移动,则停止电力供应,使得能够减少电力浪费。如果设置在遥控装置200处的预定 键纵,则电源单元260能够恢复电力供应。 [0085] 存储单元270能够存储控制或操作遥控装置200所需的各种程序和应用数据。如果 遥控装置200通过显示装置100和RF模块221无线地发送/接收信号,则遥控装置200和显示 装置100通过预定频带发送/接收信号。 [0086] 遥控装置200的控制单元280能够在存储单元270中存储关于用于向与遥控装置 200配对的显示装置100发送信号/从与遥控装置200配对的显示装置100接收信号的频带的 信息,并且对其进行参考。 [0087] 控制单元280控制与遥控装置200的控制有关的一般事项。控制单元280能够通过 无线的预定键操作相对应的信号或者 9 9 CN 112750438 A 说明书 7/19页 与由传感器单元240感测到的遥控装置200的移动相对应的信号。 [0088] 另外,遥控装置200的语音采集单元290能够获得语音。 [0089] 语音采集单元290能够包括至少一个麦克风291并且通过麦克风291获得语音。 [0090] 接下来,图示图4。 [0091] 图4是利用根据本公开的实施例的遥控装置的视图。 [0092] 图4(a)图示在显示单元180上显示与遥控装置200相对应的指示器205。 [0093] 用户可以垂直或水平地移动或旋转遥控装置200。在显示装置100的显示单元180 上显示的指示器205对应于遥控装置200的移动。因为相对应的指示器205根据如附图中示 出的3D空间上的移动而移动并显示,所以遥控装置200能够被称为空间遥控装置。 [0094] 图4(b)图示如果用户移动遥控装置200,则在显示装置100的显示单元180上显示 的指示器205根据遥控装置200的移动向左移动。 [0095] 通过遥控装置200的传感器检测到的关于遥控装置200的移动的信息被发送到显 示装置100。显示装置100能够从关于遥控装置200的移动的信息中计算出指示器205的坐 标。显示装置100能够显示指示器205以匹配所计算的坐标。 [0096] 图4(c)图示当按下遥控装置200中的特定按钮时,用户移动遥控装置200远离显示 单元180。因此,显示单元180中的与指示器205相对应的选择区域能够被放大并且较大地显 示。 [0097] 相反,如果用户移动遥控装置200以接近显示单元180,则可以缩小显示单元180中 的与指示器205相对应的选择区域并被缩小。 [0098] 另一方面,如果移动遥控装置200远离显示单元180,则能够缩小选择区域,并且如 果移动遥控装置200靠近显示单元180,则能够放大选择区域。 [0099] 另外,如果按下遥控装置200中的特定按钮,则能够排除垂直或水平移动的识别。 换言之,如果移动遥控装置200远离或更加靠近显示单元180,则不能够识别向上、向下、向 左或向右的移动,而仅能够识别前后移动。当未按下遥控装置200中的特定按钮时,指示器 205根据遥控装置200的向上、向下、向左或向右移动而移动。 [0100] 此外,指示器205的移动速度或移动方向能够对应于遥控装置200的移动速度或移 动方向。 [0101] 此外,本说明书中的指示器意指响应于遥控装置200的操作显示在显示单元180上 的对象。因此,除了在附图中显示为指示器205的箭头形式之外,各种形式的对象是可能的。 例如,上述概念包括点、光标、提示符和粗轮廓。然后,指示器205能够对应于显示单元180上 的水平轴和垂直轴的一个点被显示,并且还能够对应于诸如线和面的多个点被显示。 [0102] 图5是图示根据本公开的实施例的AI服务器的配置的框图。 [0103] 参考图5,人工智能(AI)服务器10可以指代用于使用机器学习算法来学习人工神 经网络或使用学习的人工神经网络的设备。 [0104] 这里,AI服务器10可以由执行分布式处理的多个服务器组成,或者可以被定义为 5G网络。在这种情况下,AI服务器10可以被包括作为显示装置100的一部分,以一起执行至 少一些AI处理。 [0105] AI服务器10可以包括通信单元61、存储器63、学习处理器64、处理器66等。 [0106] 通信单元61可以与诸如显示装置100的外部设备发送/接收数据。 10 10 CN 112750438 A 说明书 8/19页 [0107] 存储器63可以包括模型存储单元63-1。模型存储单元63-1可以通过学习处理器64 存储训练或经训练的模型(或人工神经网络63-2)。 [0108] 学习处理器64可以使用训练数据来训练人工神经网络63-2。训练模型可以以被安 装在人工神经网络的AI服务器10中的状态被使用,或者可以被安装在诸如显示装置100的 外部设备中并且在其中进行使用。 [0109] 训练模型可以用硬件、软件或硬件和软件的组合来实现。如果某些或全部训练模 型以软件实现,则构成训练模型的一个或多个指令可以存储在存储器63中。 [0110] 处理器66可以使用训练模型来推断关于新输入数据的结果值,并且基于推断出的 结果值来生成响应或控制命令。 [0111] 图6是用于描述根据本公开的另一实施例的人工智能系统的配置的视图。 [0112] 参考图6,人工智能系统6可以包括显示装置100、数据转换服务器610和NLP服务器 630。 [0113] 显示装置100可以将与用户说出的语音命令相对应的语音数据发送到数据转换服 务器610。 [0114] 数据转换服务器610可以从显示装置100接收语音数据。数据转换服务器610可以 将接收到的语音数据转换成文本数据。 [0115] 数据转换服务器610可以将从NLP服务器630接收的文本形式的执行意图的结果转 换成音频形式的语音数据,并且将转换的语音数据发送到显示装置100。 [0116] 数据转换服务器610可以将指示AI代理改变的语音数据发送到显示装置100。 [0117] 自然语言处理(NLP)服务器630可以包括第一AI代理服务器631和第二AI代理服务 器633。 [0118] NLP服务器630可以从数据转换服务器610接收文本数据,并使用自然语言处理引 擎来分析接收到的文本数据的意图。 [0119] NLP服务器630可以包括一个或多个AI代理服务器。 [0120] 例如,NLP服务器630可以包括第一AI代理服务器631和第二AI代理服务器633。 [0121] 第一AI代理服务器631可以是通过显示装置100的制造商以外的制造商提供自然 语言处理服务的服务器。 [0122] 第二AI代理服务器633可以是通过显示装置100的制造商提供自然语言处理服务 的服务器。 [0123] 第一AI代理服务器631和第二AI代理服务器633中的每个都可以包括图5中所图示 的AI服务器10的组件。 [0124] 数据转换服务器610可以将文本数据发送到第一AI代理服务器631。 [0125] 第一AI代理服务器631可以获取文本数据的意图,并且确定是否处理与所获取的 意图相对应的操作。 [0126] 如果确定第一AI代理服务器631可以处理与所获取的意图相对应的操作,则第一 AI代理服务器631可以获取与该意图相对应的意图分析结果。 [0127] 如果确定第一AI代理服务器631无法处理与获取的意图相对应的操作,则第一AI 代理服务器631可以将文本数据的意图发送给第二AI代理服务器633。 [0128] 第二AI代理服务器633可以获取与接收到的文本数据的意图相对应的意图分析结 11 11 CN 112750438 A 说明书 9/19页 果,并将获得的意图分析结果发送给第一AI代理服务器631。 [0129] 第一AI代理服务器631可以将意图分析结果发送到数据转换服务器610。 [0130] 数据转换服务器610可以将意图分析结果发送到显示装置100的NLP客户端101。 [0131] 显示装置100还可以包括NLP客户端101、语音代理103和渲染器105。 [0132] NLP客户端101、语音代理103和渲染器105可以被包括在图1所示的控制单元170 中。 [0133] 作为另一示例,NLP客户端101可以被包括在图1所示的网络接口单元133中。 [0134] NLP客户端101可以与数据转换服务器610通信。 [0135] 语音代理103可以从遥控装置200接收用于进入语音识别模式的信号,并且根据接 收到的信号来激活设置在显示装置100中的麦克风的操作。 [0136] 语音代理103可以将从显示装置100中包括的麦克风接收的语音命令或从遥控装 置200接收的语音命令发送到NLP客户端101。 [0137] 语音代理103可以从NLP服务器630接收由NLP客户端101接收到的意图分析结果信 息或搜索信息。 [0138] 语音代理103可以基于意图分析结果信息来执行应用或执行与遥控装置200的按 钮键相对应的功能。 [0139] 语音代理103可以被包括在NLP客户端103的配置中。 [0140] 渲染器105可以通过GUI模块生成UI,以在显示单元180上显示接收到的搜索信息, 并将生成的UI输出到显示单元180。 [0141] 图7是根据本公开的实施例的用于操作人工智能系统的方法的梯形图。 [0142] 在下文中,将参考图5和图6描述根据本公开的实施例的对系统进行操作的方法。 [0143] 此外,在下文中,AI代理可以是可以识别由用户说出的语音命令并根据识别的语 音命令的意图来提供信息的硬件或软件。 [0144] 显示装置100或NLP服务器630可以被设置有多个AI代理。 [0145] 同时,图7的一些步骤可以同时执行,或者某些步骤的顺序可以颠倒。 [0146] 显示装置100的控制单元170在显示单元180上显示程序(S701)。 [0147] 换句线的控制单元170确定搜索结果UI是否被显示在显示单元180上 (S703)。 [0149] 搜索结果UI可以是指示根据用户的话语显示的搜索结果或从远程控制装置200接 收到的搜索命令的用户界面。 [0150] 搜索结果可以表示诸如节目的内容的搜索结果。 [0151] 搜索结果UI可以根据搜索结果包括多个内容项。 [0152] 如果控制单元接收到用户说出的搜索词或来自遥控装置200的搜索命令,则控制 单元170可以确定显示搜索结果UI,并且因此输出搜索结果。 [0153] 如果搜索结果UI被显示在显示单元180上,则显示装置100的控制单元170通过网 络接口单元133将第一观看信息发送到NLP服务器630(S705)。 [0154] 第一观看信息可以包括搜索结果UI中包括的内容信息、正在观看的节目的信息以 及用户说出的先前搜索词中的一个或多个。 12 12 CN 112750438 A 说明书 10/19页 [0155] 包括在搜索结果UI中的内容信息可以包括以下中的至少一个:包括与多个内容项 中的每个相对应的多个标题的标题列表、多个内容项中的聚焦项目的标题、以及内容项的 排列关系(或排列顺序)。 [0156] 标题可以是识别内容项的名称。 [0157] 正在观看的节目的信息是用于识别节目的信息,并且可以包括节目的名称。 [0158] 先前搜索词可以是使得搜索结果UI显示的用户说出的命令。先前搜索词可以是由 显示装置100紧接在接收到新的搜索词之前接收的搜索词。 [0159] 如果搜索结果UI未显示在显示单元180上,则显示装置100的控制单元170通过网 络接口单元133将第二观看信息发送到NLP服务器630(S707)。 [0160] 第二观看信息可以包括正在观看的节目的信息和用户之前已经说出的先前搜索 词中的一个或多个。 [0161] 显示装置100的控制单元170接收由用户说出的搜索命令(S709)。 [0162] 根据一个实施例,显示装置100可以包括麦克风,并且可以通过麦克风接收由用户 说出的搜索命令。 [0163] 在另一实施例中,显示装置100的无线接收搜索 命令。换句话说,用户可以通过遥控装置200说出搜索命令,并且说出的搜索命令可以通过 遥控装置200发送到显示装置100。 [0164] 显示装置100的控制单元170通过网络接口单元133将与搜索命令相对应的语音数 据发送到NLP服务器630(S711)。 [0165] NLP服务器630的处理器66将接收到的语音数据转换成文本数据以获得文本数据 (S713)。 [0166] NLP服务器630可以通过STT引擎将语音数据转换成文本数据。 [0167] NLP服务器630的处理器66根据文本数据的意图分析获得第一搜索查询(S715)。 [0168] 第一搜索查询可以是反映由用户说出的搜索命令的搜索意图的查询。 [0169] NLP服务器630的处理器66基于获得的第一观看信息或第二观看信息将第一搜索 查询转换成第二搜索查询(S717)。 [0170] 如果从显示装置100接收到第一观看信息,则处理器66可以基于第一观看信息将 第一搜索查询转换成第二搜索查询。 [0171] 换句线显示搜索结果UI,则处理器66可以基于第一观看信息 将第一搜索查询转换成第二搜索查询。 [0172] 如果从显示装置100接收到第二观看信息,则处理器66可以基于第二观看信息将 第一搜索查询转换成第二搜索查询。 [0173] 换句线不显示搜索结果UI,则处理器66可以基于第二观看信 息将第一搜索查询转换成第二搜索查询。 [0174] 第二搜索查询可以是反映由用户说出的搜索命令中的内容名称的查询。 [0175] 换句话说,第一搜索查询到第二搜索查询的转换可以通过包括未包括在第一搜索 查询中的内容项的名称来指示第二搜索查询的生成。 [0176] 将参考图8更详细地描述步骤S715和S717。 [0177] 图8是图示根据本公开的实施例的用于描述由NLP服务器基于第一观看信息或第 13 13 CN 112750438 A 说明书 11/19页 二观看信息来完成搜索查询的过程的方法的图。 [0178] 图8是步骤S715和S717的更详细的步骤。 [0179] 参考图8,NLP服务器630的处理器66根据搜索命令的意图分析来确定搜索命令是 否是指示搜索结果UI中包括的多个内容项中的第N个内容项的查询(S801)。 [0180] 处理器66可以使用自然语言处理引擎来确定搜索命令的意图是否是在特定位置 处选择内容项。 [0181] 如果搜索命令的意图是用于选择第N个内容项的查询,则NLP服务器630的处理器 66基于包括在第一观看信息中的标题列表来提取第N个内容项(S803)。 [0182] 标题列表可以是包括由显示装置100显示的搜索结果UI中包括的多个内容项的标 题的列表。 [0183] 处理器66可以根据选择第N个内容项的意图来提取包括在标题列表中的第N个内 容项的标题。 [0184] NLP服务器630的处理器66通过使用提取的第N个项目标题将第一搜索查询转换成 第二搜索查询(S805)。 [0185] 处理器66可以在第一个搜索查询中包括第N个内容项的标题,以生成第二搜索查 询。 [0186] 同时,如果搜索命令的意图不是用于选择第N个内容项的查询,则NLP服务器630的 处理器66确定在搜索结果UI中包括的多个内容项中是否存在聚焦项(S807)。 [0187] 在一个实施例中,被聚焦的内容项可以由通过遥控装置200控制的指示器205来选 择,或者可以是通过高亮框选择的项目。 [0188] 如果存在聚焦项,则NLP服务器630的处理器66提取聚焦的内容项(S809)。 [0189] 处理器66可以从第一观看信息中提取聚焦的内容项的标题。 [0190] NLP服务器630的处理器66通过使用所提取的内容项的标题将第一搜索查询转换 成第二搜索查询(S811)。 [0191] 处理器66可以在第一搜索查询中包括所提取的内容项的标题以生成第二搜索查 询。 [0192] 同时,如果聚焦的内容项在搜索结果UI上不存在,则NLP服务器630的处理器66确 定是否存在先前搜索词(S813)。 [0193] 如果搜索命令的意图既不是第N个内容项的选择也不是被聚焦的内容项的选择, 则处理器66可以基于第二观看信息来确定是否存在先前搜索词。 [0194] 如果存在先前搜索词,则NLP服务器630的处理器66提取先前搜索词(S815),并使 用所提取的先前搜索词将第一搜索查询转换成第二搜索查询(S817)。 [0195] 处理器66可以通过将先前搜索词包括在第一搜索查询中来生成第二搜索查询。 [0196] 如果不存在先前搜索词(S813),则NLP服务器630的处理器66根据文本数据的意图 分析来获得意图分析结果(S819)。 [0197] 处理器66可以根据来自第一AI代理或第二AI代理的意图分析结果来获得意图执 行结果(或搜索结果),并将获得的意图执行结果发送给显示装置100。 [0198] 再次,描述图7。 [0199] NLP服务器630的处理器66确定第一AI代理是否可以执行与转换的第二搜索查询 14 14 CN 112750438 A 说明书 12/19页 相对应的搜索(S719)。 [0200] 处理器66可以将第二搜索查询发送到第一AI代理服务器631,以询问根据第二搜 索查询的搜索是否可能。 [0201] 如果根据第二搜索查询的搜索是可能的,则第一AI代理服务器631可以获取搜索 结果,并将获得的搜索结果传输给处理器66。 [0202] 作为另一示例,处理器66可以根据第二搜索查询的类型在第一AI代理和第二AI代 理当中确定能够根据第二搜索查询执行搜索的代理。 [0203] 例如,如果第二搜索查询与电影有关,则搜索的目标可以被确定为第一AI代理,并 且如果第二搜索查询与天气有关,则搜索的目标可以被确定为第二AI代理。 [0204] 如果第一AI代理确定可以执行与第二搜索查询相对应的搜索,则NLP服务器630的 处理器66从第一AI代理服务器631获得与第二搜索查询相对应的搜索结果,并且通过通信 单元61将第二搜索查询和第一AI代理的搜索结果发送到显示装置100(S721)。 [0205] 显示装置100的控制单元170将从NLP服务器630接收的第二搜索查询存储在存储 单元140中,并将第一AI代理的搜索结果显示在显示单元180上(S723)。 [0206] 控制单元170可以将第二搜索查询作为先前搜索词存储在存储单元140中。 [0207] 控制单元170可以用最近搜索的搜索词来更新第二搜索查询。 [0208] 第一AI代理的搜索结果可以是响应于由用户说出的搜索命令而提供的信息。 [0209] 如果第一AI代理确定不能执行与第二搜索查询相对应的搜索,则NLP服务器630的 处理器66从第二AI代理服务器633获得与第二搜索查询相对应的搜索结果(S725)。 [0210] NLP服务器630的处理器66通过通信单元61将第二搜索查询和第二AI代理的搜索 结果发送到显示装置100(S727)。 [0211] 显示装置100的控制单元170将第二搜索查询存储在存储单元140中,并将第二AI 代理的搜索结果显示在显示单元180上(S729)。 [0212] 控制单元170可以用最近搜索的搜索词来更新第二搜索查询。 [0213] 在下文中,将更详细地描述图7。 [0214] 图9至图11是用于描述根据本公开的实施例的基于搜索结果UI或先前搜索词的显 示来执行与由用户说出的搜索命令相对应的操作的过程的图。 [0215] 首先,图9和图10是图示当在显示单元180上显示搜索结果UI时用户说出搜索命令 的情况的场景。 [0216] 参考图9和图10,显示装置100的显示单元180显示程序900和搜索结果UI 910。 [0217] 搜索结果UI 910可以是内容项列表,包括通过用户的线可以包括用于识别多个内容中的每个内容的多个内容项911至 915。 [0219] 根据图7的步骤S705,显示装置100可以发送搜索结果UI中包括的内容项的标题、 内容项的排列关系(或排列顺序)、正在观看的节目900的信息、以及包括由用户先前向NLP 服务器630说出的一个或多个先前搜索词的第一观看信息。 [0220] NLP服务器630可以接收并存储从显示装置100接收的第一观看信息。 [0221] 在图9中,当显示装置100显示搜索结果UI 910时,显示装置100可以接收搜索命令 “在第二个中,人物是谁?(In second one,who are characters?)”并且将与接收到的搜索 15 15 CN 112750438 A 说明书 13/19页 命令相对应的语音数据发送到NLP服务器630。 [0222] NLP服务器630可以通过将接收到的语音数据转换成文本数据来获得第一搜索查 询。 [0223] 第一搜索查询可以是指示特定内容项的人物的搜索意图的查询。 [0224] NLP服务器630可以通过使用搜索结果UI 910中包括的多个内容项的排列关系和 多个内容项的标题来获得与第二排列的内容项相对应的标题。 [0225] NLP服务器630可以获得第二搜索查询,该第二搜索查询将获得的标题添加到第一 搜索查询中。 [0226] 在图9中,第二搜索查询可以是BB的人物是谁?(who are characters of BB?), 其包括BB,其是位于第二个的内容项913的标题。 [0227] 换句话说,第二搜索查询可以是用于搜索关于具有标题为BB的内容项的人物的信 息的查询。 [0228] NLP服务器630可以根据第二搜索查询从第一AI代理服务器631或第二AI代理服务 器633获得关于称为BB的内容项的人物的信息,并将获得的关于人物的信息发送给显示装 置100。 [0229] 显示装置100可以在显示单元180上显示关于从NLP服务器630接收到的人物的信 息930。 [0230] 这样,如果搜索结果显示在显示装置100上,则可以将搜索结果发送到NLP服务器 630以分析用户的线] 因此,用户可以享受在无需说出内容项的标题的情况下,获得期望信息的改进体 验。 [0232] 接下来,将描述图10。 [0233] 特别地,图10假定包括在搜索结果UI 910中的第一个至第三个内容项911至915的 第二个内容项913通过高亮边框914被聚焦。 [0234] 在图10中,当显示装置100显示搜索结果UI 910时,显示装置100可以接收搜索命 令“人物是谁?”,并将与接收到的搜索命令相对应的语音数据发送给NLP服务器630。 [0235] NLP服务器630可以通过将接收到的语音数据转换成文本数据来获得第一搜索查 询。 [0236] 第一搜索查询可以是指示特定内容项的人物的搜索意图的查询。 [0237] NLP服务器630可以通过使用搜索结果UI 910中包括的多个内容项是否被聚焦以 及多个内容项的标题来获得与聚焦的内容项相对应的标题。 [0238] NLP服务器630可以获得第二搜索查询,所获得的标题被添加到第一搜索查询。 [0239] 在图10中,第二搜索查询可以是BB的人物是谁?,其中包括作为聚焦的第二个内 容项913的标题的BB。 [0240] 换句话说,第二搜索查询可以是用于搜索关于具有标题为BB的内容项的人物的信 息的查询。 [0241] NLP服务器630可以根据第二搜索查询从第一AI代理服务器631或第二AI代理服务 器633获得关于被称为BB的内容项的人物的信息,并将获得的关于人物的信息发送给显示 装置100。 16 16 CN 112750438 A 说明书 14/19页 [0242] 显示装置100可以在显示单元180上显示关于从NLP服务器630接收到的人物的信 息930。 [0243] 这样,如果在显示装置100上的搜索结果中存在聚焦项,则可以将聚焦项的搜索结 果发送到NLP服务器630以分析用户的线] 因此,用户可以享受在无需说出内容项的标题的情况下,仅以简单的话语获得所 需信息的改进体验。 [0245] 接下来,将描述图11。 [0246] 特别地,与图9和图10的实施例不同,图11是示例,其中用户搜索结果UI未显示在 显示单元180上时说出搜索命令“人物是谁?”。 [0247] 另外,在图11中,假定用户先前说出的先前搜索词是BB,其是第二个内容项913 的标题。 [0248] 显示装置100可以将包括正在观看的节目900的信息和先前搜索词中的一个或多 个的第二观看信息发送到NLP服务器630。 [0249] 在图11中,显示装置100可以接收搜索命令“人物是谁?”,并将与接收到的搜索命 令相对应的语音数据发送到NLP服务器630。 [0250] NLP服务器630可以通过将接收到的语音数据转换成文本数据来获得第一搜索查 询。 [0251] 第一搜索查询可以是指示人物的搜索意图的查询。 [0252] 因为NLP服务器630没有从显示装置100接收关于搜索结果UI910的信息,所以NLP 服务器630可以使用先前搜索词BB来生成第二搜索查询。 [0253] 换句线可以获得附有BB的第二搜索查询,其是在第一搜索查 询中获得的先前搜索词。 [0254] 在图11中,第二搜索查询可以是BB的人物是谁?,包括作为第二个内容项913的 标题的BB。 [0255] 换句话说,第二搜索查询可以是用于搜索关于具有标题为BB的内容项的人物的信 息的查询。 [0256] NLP服务器630可以根据第二搜索查询从第一AI代理服务器631或第二AI代理服务 器633获得关于被称为BB的内容项的人物的信息,并将所获得的关于人物的信息发送给显 示装置100。 [0257] 显示装置100可以在显示单元180上显示关于从NLP服务器630接收到的人物的信 息930。 [0258] 这样,根据本公开的实施例,可以通过使用先前搜索词来分析用户的线] 因此,用户可以享受在无需说出内容项的标题的情况下,仅以简单的话语获得所 需信息的改进体验。 [0260] 图12A和图12B图示根据本公开的实施例的通过连续话语提供搜索结果的示例。 [0261] 图12A可以是在图9至图11中的任何一个的实施例之后执行的场景。 [0262] 参考图12A,显示装置100显示表示第二个内容项913的人物的搜索结果的信息 930。 [0263] 显示装置100可以接收导演是谁?(who  is a director?)的附加搜索命令。显示 17 17 CN 112750438 A 说明书 15/19页 装置100可以将与附加搜索命令相对应的语音数据发送到NLP服务器630。 [0264] NLP服务器630可以识别出当前选择了第二个内容项913,并且基于所接收的语音 数据的意图来搜索与制作第二个内容项913的导演有关的信息。 [0265] 换句话说,如果在第一个内容项至第三个内容项911至915当中选择第二个内容项 913的状态下接收到附加搜索命令导演是谁?,则该附加搜索命令可以是被识别为请求搜 索与第二个内容项913有关的信息的搜索查询。 [0266] NLP服务器630可以获得与第二个内容项913有关的关于接收到的附加搜索命令的 搜索信息,直到确定取消第二个内容项913的选择的意图。 [0267] NLP服务器630可以从第一AI代理服务器631或第二AI代理服务器633获得针对制 作第二个内容项913的导演的搜索信息,并将针对所获得的导演的搜索信息发送到显示装 置100。 [0268] 显示装置100可以在显示单元180上显示关于导演的接收到的搜索信息1210。 [0269] 在这种状态下,显示装置100可以接收票房表现如何?(what about box office  performance?)的附加搜索命令。显示装置100可以将与附加搜索命令相对应的语音数据 发送到NLP服务器630。 [0270] NLP服务器630可以识别出当前选择了第二个内容项913,并且可以基于接收到的 语音数据的意图,基于第二个内容项913的标题来搜索第二个内容项913的票房表现。。 [0271] 换句线在第一个至第三个内容项911至915中选择第二个内 容项913时接收到附加搜索命令票房表现如何?,则NLP服务器630可以识别附加搜索请求 作为搜索查询,其请求搜寻与第二个内容项913有关的信息。 [0272] NLP服务器630可以获得与第二个内容项913有关的关于接收到的附加搜索命令的 搜索信息,直到确定取消第二个内容项913的选择的意图。 [0273] NLP服务器630可以从第一AI代理服务器631或第二AI代理服务器633获取指示第 二个内容项913的票房表现的搜索信息,并且将与所获得的票房表现有关的搜索信息发送 到显示装置100。 [0274] 显示装置100可以在显示单元180上显示关于接收到的票房表现的搜索信息1230。 [0275] 如上所述,根据本实施例,在多AI代理结构中,用户可以通过连续话语来连续搜索 要核实的信息。 [0276] 因此,用户可以感觉到确认各种搜索结果的改进体验。 [0277] 同时,如果重新请求搜索结果UI 910的显示,则可以识别出取消第二个内容项913 的选择的意图。 [0278] 作为另一示例,如果请求选择除了第二个内容项913以外的内容项,则可以识别出 取消对第二个内容项913的选择的意图。 [0279] 稍后将对此进行描述。 [0280] 图12C是用于描述取消内容项的选择的过程的示图。 [0281] 参考图12C,显示装置100显示指示第二个内容项913的票房表现的信息1230。 [0282] 在这种状态下,用户可以说出第一项(first  item)。 [0283] 显示装置100可以接收语音命令“第一项”,并且根据接收到的语音命令取消对第 二个内容项913的选择。 18 18 CN 112750438 A 说明书 16/19页 [0284] 详细地,显示装置100可以将第一项的语音命令的语音数据发送到NLP服务器 630。 [0285] NLP服务器630可以将接收到的语音数据转换成文本数据,并且识别出转换的文本 数据的意图是要选择第一个内容项911。 [0286] 换句线可以将文本数据的意图识别为取消第二个内容项913的 选择的意图。 [0287] NLP服务器630可以取消第二个内容项913的选择,并且将显示搜索结果UI 910的 请求发送到显示装置100。 [0288] 响应于从NLP服务器630接收到的请求,显示装置100可以将指示票房表现的信息 1230转换成搜索结果UI 910。 [0289] 换句线] 同时,显示装置100可以聚焦位于搜索结果UI 910的第一个的第一个内容项911。 换句线的选择被用户说出的第一项目取消,并且第一个内容项911 可以自动地被选择。 [0291] 此后,用户可以说出搜索命令以接收关于第一个内容项911的搜索结果。 [0292] 如上所述,根据本公开的实施例,用户可以选择或取消内容项,并且通过简单的话 语搜索关于所需内容项的信息。作为另一示例,NLP服务器630可以从显示装置100接收取消 第二个内容项913的选择的请求。显示装置100可以从遥控装置200接收选择取消请求并且 将接收到的选择取消请求发送到NLP服务器630。 [0293] 接下来,将描述根据本公开的另一实施例的用于操作人工智能系统的方法。 [0294] 图13是根据另一实施例的用于描述操作人工智能系统的方法的梯形图。 [0295] 参考图13,显示装置100的控制单元170在显示单元180上显示节目图像(S1301)。 [0296] 显示装置100的控制单元170获得节目图像中包括的对象的信息(S1303)。 [0297] 在实施例中,控制单元170可以捕获节目图像,并将捕获的图像发送到图像识别服 务器。 [0298] 图像识别服务器可以从捕获的图像中识别图像中包括的一个或多个对象。图像识 别服务器可以通过使用由深度学习算法或机器学习算法指导的图像识别模型来从图像中 识别对象。 [0299] 换句话说,图像识别服务器可以从图像获得用于识别对象的名称。 [0300] 图像识别服务器可以将用于识别对象的名称发送到显示装置100。 [0301] 在另一实施例中,可以将由遥控装置200控制的指示器205显示在显示单元180上。 [0302] 节目图像的捕获图像可以包括指示器205。 [0303] 图像识别服务器可以使用图像识别模型来识别与指示器205的位置相对应的对 象。 [0304] 图像识别服务器可以从捕获的图像中识别指示器205,并识别与指示器205的位置 相对应的对象。 [0305] 图像识别服务器可以将所识别的对象的名称发送到显示装置100。 [0306] 显示装置100的控制单元170接收语音命令(S1305),并将与接收到的语音命令相 对应的语音数据和对象信息发送给NLP服务器630(S1307)。 19 19 CN 112750438 A 说明书 17/19页 [0307] NLP服务器630的处理器66将从显示装置100接收的语音数据转换成文本数据以获 得文本数据(S1309)。 [0308] NLP服务器630可以使用STT引擎将语音数据转换成文本数据。 [0309] NLP服务器630的处理器66基于文本数据的意图分析获得第一查询(S1311)。 [0310] 第一查询可以反映由用户说出的语音命令的意图分析的结果。 [0311] NLP服务器630的处理器66基于对象的信息将第一查询转换成第二查询(S1313)。 [0312] 处理器66可以将对象的名称与第一查询结合以生成第二查询。 [0313] NLP服务器630的处理器66从多个AI代理中的任何一个获得与第二查询相对应的 意图执行结果(S1315)。 [0314] 处理器66可以将第二查询发送到第一AI代理631或第二AI代理633,并且可以从第 一AI代理631或第二AI代理633获得与第二查询相对应的意图执行结果。 [0315] 如果第二查询反映搜索关于对象的详细信息的意图,则意图执行结果可以是对象 的详细信息的搜索结果。 [0316] NLP服务器630的处理器66通过通信单元61将意图执行结果发送到显示装置100 (S1317)。 [0317] 显示装置100的控制单元170在显示单元180上显示从NLP服务器630接收的意图执 行结果(S1319)。 [0318] 同时,图13中所图示的一些步骤可以同时执行,并且步骤的顺序可以颠倒。 [0319] 图14和图15是用于描述使用对象识别技术来掌握用户的话语意图的实施例的图。 [0320] 参考图14,显示装置100在显示单元180上显示节目图像1400。 [0321] 用户可以通过遥控装置200的操作将指示器205放置在节目图像1400中包括的运 动鞋1410上。 [0322] 显示装置100可以捕获节目图像1400并将捕获的图像发送到图像识别服务器。 [0323] 显示装置100可以获取指示器205的坐标,并将捕获的图像和指示器205的坐标一 起发送到图像识别服务器1610。 [0324] 如果接收到用户的语音命令,则显示装置100可以捕获节目图像1400。换句话说, 由用户说出的语音命令可以是用于捕获节目图像1400的触发器。 [0325] 图像识别服务器可以被包括在NLP服务器630中。 [0326] 图像识别服务器可以使用图像识别模型来分析捕获的图像,并识别与图像中包括 的指示器205的位置相对应的运动鞋1410。 [0327] 图像识别服务器可以将包括运动鞋的名称和品牌中的一个或多个的运动鞋的信 息发送到显示装置100。 [0328] 显示装置100可以接收语音命令“请把它添加到购物清单中(Please,add that to  the  shopping  list)”,并将接收到的语音命令的语音数据和运动鞋的信息发送给NLP服务 器630。 [0329] NLP服务器630可以根据意图分析操作将语音数据转换成文本数据,并获得反映将 对象添加到购物清单的意图的第一查询。 [0330] NLP服务器630可以将运动鞋的信息与第一查询结合以生成第二查询。第二查询可 以反映出将A品牌运动鞋添加到购物清单的意图。 20 20 CN 112750438 A 说明书 18/19页 [0331] NLP服务器630可以将第二查询发送到第一AI代理服务器631或第二AI代理服务器 633,并且接收关于A品牌运动鞋的详细信息。 [0332] NLP服务器630可以将接收到的A品牌的详细信息添加到购物清单,并且将反映A品 牌的详细信息的购物清单发送到显示装置100。 [0333] 显示装置100可以在显示单元180上显示包括A品牌的详细信息1431的购物清单 1430。 [0334] 如上所述,根据本公开的实施例,用户可以在观看节目的同时通过简单的话语来 核实关于节目图像中包括的对象的对象的期望动作或详细信息。 [0335] 接下来,描述图15。 [0336] 参考图15,显示装置100在显示单元180上显示节目图像1500。 [0337] 显示装置100可以捕获节目图像1500并将捕获的图像发送到图像识别服务器。 [0338] 如果接收到用户的语音命令,则显示装置100可以在那时捕获节目图像1500。换句 话说,由用户说出的语音命令可以是用于捕获节目图像1500的触发器。 [0339] 图像识别服务器可以包括在NLP服务器630中。 [0340] 图像识别服务器可以通过使用图像识别模型来分析捕获的图像并且识别图像中 包括的地标。 [0341] 图像识别服务器可以将包括地标名称的地标信息发送到显示装置100。 [0342] 显示装置100可以接收语音命令“到那里需要多长时间?(how  long does  it take  there?)”,并将接收到的语音命令的语音数据和地标信息发送到NLP服务器630。 [0343] NLP服务器630可以根据意图分析操作将语音数据转换成文本数据,并获得反映请 求从当前位置到达地标所需时间的意图的第一查询。 [0344] NLP服务器630可以将地标的名称与第一查询结合以生成第二查询。第二查询可以 反映想要从当前位置到B桥所花费的时间的意图。 [0345] NLP服务器630可以将第二查询发送到第一AI代理服务器631或第二AI代理服务器 633,并且接收包括到达A桥所花费的时间的详细信息。 [0346] NLP服务器630可以将接收到的详细信息发送到显示装置100。 [0347] 显示装置100可以在显示单元180上显示详细信息1510,包括到A桥的距离以及通 过飞机到达A桥所花费的时间。 [0348] 如上所述,根据本公开的实施例,用户可以在观看节目的同时通过简单的话语来 核实关于节目图像中包括的对象或对象的详细信息的期望动作。 [0349] 图16是用于描述根据图13至图15的实施例的另一种形式的人工智能系统的视图。 [0350] 与图6的人工智能系统6相比,图16的人工智能系统1600具有图像识别服务器1610 和图像识别器107的附加配置。 [0351] 图像识别器107可以被包括在显示装置100的控制单元170中。 [0352] 图像识别器107可以捕获显示在显示单元180上的节目图像,并且将捕获的图像发 送到图像识别服务器1610。 [0353] 图像识别器107可以实时或周期性地捕获节目图像。 [0354] 作为另一示例,如果接收到用户的语音命令,则图像识别器107可以捕获节目图 像。 21 21 CN 112750438 A 说明书 19/19页 [0355] 在捕获时,图像识别器107可以获取指示器205的坐标,并将捕获的图像和指示器 205的坐标发送到图像识别服务器1610。 [0356] 图像识别器107可以配置成与控制单元170分离存在。 [0357] 图像识别服务器1610可以使用图像识别模型来识别从图像识别器107接收的捕获 图像中包括的对象。 [0358] 如果图像识别服务器1610一起接收捕获的图像和指示器205的坐标,则图像识别 服务器1610可以识别与指示器205的坐标相对应的对象。 [0359] 图像识别服务器1610可以将包括识别出的对象的名称的对象的识别信息发送到 图像识别器107。 [0360] 图像识别器107可以将对象的识别信息发送到NLP客户端101。 [0361] NLP客户端101可以将与对象识别信息相对应的语音数据和由用户说出的语音命 令发送到数据转换服务器610。 [0362] 数据转换服务器610可以将语音数据转换成文本数据,并将转换的文本数据和对 象的识别信息发送给NLP服务器630。 [0363] NLP服务器630可以获得指示文本数据的意图分析结果的第一查询,并且基于对象 的识别信息和第一查询来生成第二查询。 [0364] NLP服务器630可以将第二查询发送到第一AI代理服务器631或第二AI代理服务器 633,并且从第一AI代理服务器631或第二AI代理服务器633中的任意一个获得第二查询的 意图执行结果。 [0365] NLP服务器630可以将意图执行结果发送到数据转换服务器610,并且数据转换服 务器610可以以文本数据的形式将意图执行结果发送到NLP客户端101。 [0366] 根据本公开的实施例,上述方法可以体现为在其中记录有程序的介质上的处理器 可读代码。处理器可读介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储设备等, 并且可以以载波的形式实现(例如,通过互联网的传输)。 [0367] 上述显示装置可以不限于应用于上述实施例的配置和方法,而是可以通过选择性 地组合所有或一些实施例来配置实施例,使得可以进行各种修改。 22 22 CN 112750438 A 说明书附图 1/17页 图1 23 23 CN 112750438 A 说明书附图 2/17页 图2 24 24 CN 112750438 A 说明书附图 3/17页 图3 25 25 CN 112750438 A 说明书附图 4/17页 图4 26 26 CN 112750438 A 说明书附图 5/17页 图5 图6 27 27 CN 112750438 A 说明书附图 6/17页 图7 28 28 CN 112750438 A 说明书附图 7/17页 图8 29 29 CN 112750438 A 说明书附图 8/17页 图9 30 30 CN 112750438 A 说明书附图 9/17页 图10 31 31 CN 112750438 A 说明书附图 10/17页 图11 32 32 CN 112750438 A 说明书附图 11/17页 图12A 33 33 CN 112750438 A 说明书附图 12/17页 图12B 34 34 CN 112750438 A 说明书附图 13/17页 图12C 35 35 CN 112750438 A 说明书附图 14/17页 图13 36 36 CN 112750438 A 说明书附图 15/17页 图14 37 37 CN 112750438 A 说明书附图 16/17页 图15 38 38 CN 112750438 A 说明书附图 17/17页 图16 39 39

  2、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问加。

  3、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。

  4、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

  2023年12月17日广西区税务系统内部遴选笔试真题及答案解析(管理类).pdf

  2023湖南益阳市南县事业单位招聘70人笔试参考题库(共500题)答案详解版.docx

  2023年辽宁阜新彰武县事业单位招聘48人笔试参考题库(共500题)答案详解版.docx

  2023年吉林省白城市洮南市面向下半年应征入伍高校毕业生招聘事业单位人员5人笔试参考题库(共500题)答案详解版.docx

  2023年河北保定市清苑区招聘事业单位工作人员22人笔试参考题库(共500题)答案详解版.docx

  2023年中日友好医院公开招聘普通外科代谢减重中心医师笔试参考题库(共500题)答案详解版.docx

  2024年安徽省面向南开大学招录定向选调生530考试历年常考点(融合难、易错点)含答案详解.docx

  2023年10月广西北海市乡镇(合浦专场)事业单位公开招聘工作人员116人考试历年高频考点(难、易错点甄选)带答案详解.docx

  2023年“学思想、强党性、重实践、建新功”民主生活会六个方面对照检查发言材料1860字范文.docx

  基于手机APP的大学生心理健康教育实效性研究-思想政治教育专业论文.docx

  《金一南讲:世界大格局,中国有态度》读书笔记PPT模板思维导图下载.pptx

  原创力文档创建于2008年,本站为文档C2C交易模式,即用户上传的文档直接分享给其他用户(可下载、阅读),本站只是中间服务平台,本站所有文档下载所得的收益归上传人所有。原创力文档是网络服务平台方,若您的权利被侵害,请发链接和相关诉求至 电线) ,上传者