一种车辆语音交互方法、装置、设备及存储介质与流程



1.本发明涉及车辆电子技术领域,特别是一种车辆语音交互方法、装置、设备及存储介质。


背景技术:



2.随着当代信息技术的日益发展,语音识别技术已经被广泛应用于消费电子、家用电器及车载领域。以车辆领域为例,驾驶员在开车时需要保持非常高的专注度,依赖双手的交互方式存在一定的安全隐患,因此,语音识别的交互方式是车辆交互方式的发展方向。
3.现有技术中,将本地的语义理解引擎与云端的语义理解引擎结合使用后,在联网情况良好的情况下,都是以云端的语义理解引擎反馈结果为准,不采用本地引擎识别结果,但是在与本地应用相关的业务域中,本地识别结果具有较高可靠性,而且识别效率更高,所以在与本地应用相关的业务域中,也只采用云端引擎的识别结果是不合适的,并且降低了识别结果输出的效率,故现有技术将本地的语义理解引擎与云端的语义理解引擎结合使用后,难以同时兼容本地的语义理解引擎与云端的语义理解引擎的优点,导致整体用户体验差。


技术实现要素:



4.本发明提供一种车辆语音交互方法、装置、设备及存储介质,以解决现有技术不能同时兼容本地的语义理解引擎与云端的语义理解引擎的优点的问题,本发明既能将本地的语义理解引擎与云端的语义理解引擎结合使用,又能同时兼容本地的语义理解引擎与云端的语义理解引擎的优点,从而缩短车辆语音交互的响应时间与提高车辆语音交互的理解能力,进而提高用户用车体验。
5.为了解决上述技术问题,第一方面,本发明实施例提供一种车辆语音交互方法,包括以下步骤:
6.接收用户的语音请求信息并响应,判断车机端的联网状态;
7.在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;
8.在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;
9.在判定车机端断网状态时,输出本地语义结果。
10.进一步的,所述将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果,具体为:
11.当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;
12.当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端
语义结果。
13.进一步的,所述将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果之前的步骤,包括:
14.对所述用户语音请求信息进行语义分析,根据语义分析结果确定所述用户语音请求信息的预设业务域;
15.获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。
16.进一步的,所述在判定车机端联网状态,且所述用户的语音请求信息不属于预设业务域时,输出云端语义结果的步骤,包括:
17.获取所述用户的语音请求信息的云端语义结果;
18.输出所述云端语义结果。
19.进一步的,所述在判定车机端断网状态时,输出本地语义结果的步骤,包括:
20.获取所述用户语音请求信息的本地语义结果;
21.输出所述本地语义结果。
22.第二方面,本发明实施例还提供了一种车辆语音交互装置,包括:
23.输入模块,用于接收用户的语音请求信息并响应,判断车机端的联网状态;
24.处理模块,用于在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;以及
25.在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;以及
26.在判定车机端断网状态时,输出本地语义结果。
27.进一步的,所述处理模块,还用于:
28.当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;
29.当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端语义结果。
30.进一步的,所述处理模块,还用于:
31.对所述用户语音请求信息进行语义分析,根据语义分析结果确定所述用户语音请求信息的预设业务域;
32.获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。
33.第三方面,本发明实施例对应提供了一种终端设备,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如上述任一项所述的车辆语音交互方法。
34.此外,本发明实施例还提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述任一项所述的车辆语音交互方法。
35.与现有技术相比,本发明实施例公开的一种车辆语音交互方法、装置、设备及存储
介质,接收用户的语音请求信息并响应,判断车机端的联网状态;在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;在判定车机端断网状态时,输出本地语义结果;能够同时兼容本地的语义理解引擎与云端的语义理解引擎的优点,从而缩短车辆语音交互的响应时间与提高车辆语音交互的理解能力,进而提高用户用车体验。
附图说明
36.图1是本发明实施例提供的一种车辆语音交互方法的流程示意图;
37.图2是本发明实施例提供的一种车辆语音交互装置的结构示意图;
38.图3是本发明实施例提供的一种终端设备的结构示意图。
具体实施方式
39.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
40.需要说明的是,本发明的术语“包括”和“具体”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
41.请参阅图1,图1是本发明实施例提供的一种车辆语音交互方法的流程示意图,该车辆语音交互方法,包括步骤s1至s4:
42.s1:接收用户的语音请求信息并响应,判断车机端的联网状态;
43.s2:在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;
44.s3:在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;
45.s4:在判定车机端断网状态时,输出本地语义结果。
46.需要说明的是,本发明需要在车机端内配置一个本地的语义理解引擎并配置一批不依赖网络的业务域以及这批不依赖网络的业务域的最低可信度。所述配置这批不依赖网络的业务域的最低可信度的方法为:整理出每个业务域的说法清单,比如导航的说法(导航到海底捞,我想去火锅店),将每个业务域的说法清单,启动本地语义理解引擎识别一遍,获取每个说法对应的本地语义结果,所述的本地语义结果中会有该语义的可信度,再通过人工标记每条说法的可信度,通过统计,比对人工标记的可信度和本地语义结果的可信度,得到预设业务域的最低可信度,例如,假设含有导航的业务域的说法清单有10000条,人工标记的可信的说法有7000条对应的本地语义理解引擎跑出来可信度都在0.8以上,那么0.8就
是该业务域的最低可信度得分。
47.具体而言,本实施例中,当用户通过车辆系统的麦克风进行语音输入,车辆语音交互系统接收到用户的语音请求信息后,响应用户的语音请求,并根据网络连接情况,判断车机端的联网状态。如果网络连接情况良好,且车机端处于联网状态时,车辆控制系统判断用户的语音请求信息是否属于预设业务域,若用户的语音请求信息属于预设业务域,则将本地语义结果的可信度与预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;若用户的语音请求信息不属于预设业务域,则等待并输出云端语义结果;如果网络连接情况不好或者车机端处于断网状态时,车辆直接输出本地语义结果。车辆的控制系统根据输出的语义结果执行相应的功能。
48.在一个优选实施例中,在步骤s2中:将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果,具体为:
49.当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;
50.当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端语义结果。
51.本实施例中,通常情况下,本地业务域的语料库不大,内容大多跟本地应用相关,识别速度快;而云端识别的语料库强大,可识别较多信息,相应的识别速度比较慢,且容易受到网速的影响,所以收到本地语义结果比收到云端语义结果快。当网络连接情况良好,且车机端处于联网状态时,车辆控制系统判定用户的语音请求信息属于预设业务域,车辆将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,车辆直接输出所述本地语义结果,不用等待云端的语义结果,所以识别效率高;当所述本地语义结果的可信度低于所述预设业务域的最低可信度,等待并输出所述云端语义结果。
52.在一个实施例中,在步骤s2中:将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果之前的步骤,包括:
53.对所述用户语音请求信息进行语义分析,确定所述用户语音请求信息的预设业务域;
54.获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。
55.在具体实施当中,用户通过车辆系统的麦克风进行语音输入,当车辆语音交互系统接收到用户的语音请求信息后,响应用户的语音请求,并根据网络连接情况,判断车机端的联网状态。如果网络连接情况良好,且车机端处于联网状态时,启动本地的语义理解引擎与云端的语义理解引擎识别用户的语音请求信息,车辆控制系统对所述用户语音请求信息进行语义分析,确定所述用户语音请求信息的预设业务域,获取所述预设业务域的最低可信度和用户语音请求信息的本地语义结果的可信度,将所述本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果。车辆的控制系统根据输出的语义结果执行相应的功能。
56.在另一个实施例中,所述步骤s3:在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果的步骤,包括:
57.获取所述用户的语音请求信息的云端语义结果;
58.输出所述云端语义结果。
59.在具体实施当中,用户通过车辆系统的麦克风进行语音输入,当车辆语音交互系统接收到用户的语音请求信息后,响应用户的语音请求,并根据网络连接情况,判断车机端的联网状态。如果网络连接情况良好,且车机端处于联网状态时,启动本地的语义理解引擎与云端的语义理解引擎识别用户的语音请求信息,车辆控制系统确定用户的语音请求信息不属于所述预设业务域,车辆获取所述用户的语音请求信息的云端语义结果,并输出所述云端语义结果。车辆的控制系统根据输出的云端语义结果执行相应的功能。
60.在又一个实施例当中,所述s4:在判定车机端断网状态时,输出本地语义结果的步骤,包括:
61.获取所述用户语音请求信息的本地语义结果;
62.输出所述本地语义结果。
63.在具体实施当中,用户通过车辆系统的麦克风进行语音输入,当车辆语音交互系统接收到用户的语音请求信息后,响应用户的语音请求,并根据网络连接情况,判断车机端的联网状态。如果网络连接情况不好或者车机端处于断网状态时,车辆启动本地的语义理解引擎识别用户的语音请求信息,获取所述用户的语音请求信息的本地语义结果,并输出所述本地语义结果,进而控制车辆执行相应的功能。
64.请参阅图2,图2是本发明实施例提供的一种车辆语音交互装置的结构示意图,该车辆语音交互装置,包括:
65.输入模块21,用于接收用户的语音请求信息并响应,判断车机端的联网状态;
66.处理模块22,用于在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;以及
67.在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;以及
68.在判定车机端断网状态时,输出本地语义结果。
69.在一种实施方式中,所述处理模块22,还用于:
70.当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;
71.当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端语义结果。
72.在另一种实施方式中,所述处理模块22,还用于:
73.对所述用户语音请求信息进行语义分析,根据语义分析结果确定所述用户语音请求信息的预设业务域;
74.获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。
75.本发明实施例所提供的一种车辆语音交互装置能够实现上述任一实施例的车辆语音交互方法的所有流程,装置中的各个模块、单元的作用以及实现的技术效果分别与上述实施例的车辆语音交互方法的作用以及实现的技术效果对应相同,这里不再赘述。
76.参见图3,是本发明实施例提供的一种终端设备的结构示意图。该实施例的终端设备3包括:处理器31、存储器32以及存储在所述存储器32中并可在所述处理器31上运行的计算机程序。所述处理器31执行所述计算机程序时实现上述车辆语音交互方法实施例中的步骤。或者,所述处理器31执行所述计算机程序时实现上述车辆语音交互装置实施例中各模块的功能。
77.示例性的,所述计算机程序可以被分割成一个或多个模块,所述一个或者多个模块被存储在所述存储器32中,并由所述处理器31执行,以完成本发明。所述一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述终端设备3中的执行过程。
78.所述终端设备3可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备3可包括,但不仅限于,处理器31、存储器32。本领域技术人员可以理解,所述示意图仅仅是终端设备的示例,并不构成对终端设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备3还可以包括输入输出设备、网络接入设备、总线等。
79.所称处理器31可以是中央处理单元(central processing unit,cpu),还可以是其他通用处理器、数字信号处理器(digital signal processor,dsp)、专用集成电路(application specific integrated circuit,asic)、现场可编程门阵列(field-programmable gate array,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器31是所述终端设备3的控制中心,利用各种接口和线路连接整个终端设备3的各个部分。
80.所述存储器32可用于存储所述计算机程序和/或模块,所述处理器31通过运行或执行存储在所述存储器32内的计算机程序和/或模块,以及调用存储在存储器32内的数据,实现所述终端设备3的各种功能。所述存储器32可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器32可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(smart media card,smc),安全数字(secure digital,sd)卡,闪存卡(flash card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
81.其中,所述终端设备3集成的模块如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于计算机可读存储介质中,该计算机程序在被处理器31执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom,read-only memory)、随机存取存储器(ram,random access memory)、电载波信号、电信信号以及软件分发介质等。需要说明的
是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
82.需说明的是,以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本发明提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
83.本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如上述所述的车辆语音交互方法。
84.综上所述,本发明实施例公开了一种车辆语音交互方法、装置、设备及存储介质,通过接收用户的语音请求信息并响应,判断车机端的联网状态;在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;在判定车机端断网状态时,输出本地语义结果;能够同时兼容本地的语义理解引擎与云端的语义理解引擎的优点,从而缩短车辆语音交互的响应时间与提高车辆语音交互的理解能力,进而提高用户用车体验。
85.以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。

技术特征:


1.一种车辆语音交互方法,其特征在于,包括以下步骤:接收用户的语音请求信息并响应,判断车机端的联网状态;在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;在判定车机端断网状态时,输出本地语义结果。2.如权利要求1所述的车辆语音交互方法,其特征在于,所述将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果,具体为:当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端语义结果。3.如权利要求1所述的车辆语音交互方法,其特征在于,所述将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果之前的步骤,包括:对所述用户语音请求信息进行语义分析,根据语义分析结果确定所述用户语音请求信息的预设业务域;获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。4.如权利要求1所述的车辆语音交互方法,其特征在于,所述在判定车机端联网状态,且所述用户的语音请求信息不属于预设业务域时,输出云端语义结果的步骤,包括:获取所述用户的语音请求信息的云端语义结果;输出所述云端语义结果。5.如权利要求1所述的车辆语音交互方法,其特征在于,所述在判定车机端断网状态时,输出本地语义结果的步骤,包括:获取所述用户语音请求信息的本地语义结果;输出所述本地语义结果。6.一种车辆语音交互装置,其特征在于,包括:输入模块,用于接收用户的语音请求信息并响应,判断车机端的联网状态;处理模块,用于在判定车机端联网状态,且所述用户的语音请求信息属于预设业务域时,将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;以及在判定车机端联网状态,且所述用户的语音请求信息不属于所述预设业务域时,输出云端语义结果;以及在判定车机端断网状态时,输出本地语义结果。7.如权利要求6所述的车辆语音交互装置,所述处理模块,还用于:
当所述本地语义结果的可信度高于或等于所述预设业务域的最低可信度,输出所述本地语义结果;当所述本地语义结果的可信度低于所述预设业务域的最低可信度,输出所述云端语义结果。8.如权利要求6所述的车辆语音交互装置,其特征在于,所述处理模块,还用于:对所述用户语音请求信息进行语义分析,根据语义分析结果确定所述用户语音请求信息的预设业务域;获取所述预设业务域的最低可信度和所述用户语音请求信息的本地语义结果的可信度。9.一种终端设备,其特征在于,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至5中任意一项所述的车辆语音交互方法。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至5中任意一项所述的车辆语音交互方法。

技术总结


本发明涉及车辆电子技术领域,公开了一种车辆语音交互方法、装置、设备及存储介质,所述方法包括接收用户的语音请求信息并响应,判断车机端的联网状态;在判定车机端联网状态时,若所述用户的语音请求信息属于预设业务域,则将本地语义结果的可信度与所述预设业务域的最低可信度进行比较,根据比较结果输出本地语义结果/云端语义结果;若所述用户的语音请求信息不属于所述预设业务域,则输出云端语义结果;在判定车机端断网状态时,输出本地语义结果。本发明提供的一种车辆语音交互方法、装置、设备及存储介质,能够兼容本地的语义理解引擎与云端的语义理解引擎的优点,提高车辆语音交互的效率。互的效率。互的效率。


技术研发人员:

张金可 梁伟强 刘俊峰 张莹 冉光伟 王岳东 邓智彬

受保护的技术使用者:

星河智联汽车科技有限公司

技术研发日:

2022.08.05

技术公布日:

2022/11/18

本文发布于:2024-09-26 00:30:42,感谢您对本站的认可!

本文链接:https://www.17tex.com/tex/2/2416.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:语义   所述   可信度   语音
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议