一种基于数字人的处理系统的制作方法



1.本发明涉及人机交互技术领域,特别涉及一种基于数字人的处理系统。


背景技术:



2.数字人是具有类人智能的可视化虚拟人形象,是信息通信技术、数据技术等与文化艺术、3d建模、形象设计等行业融合的产物,是一种利用信息科学的方法利用人工智能对人在不同水平的形态和功能进行虚拟仿真。随着计算机技术的快速发展,数字人的生成技术越来越成熟。
3.数字人是基于信息通信、ai语音交互、红外探测、头像识别、大数据分析与建模等技术的系统解决方案,是企业用于对外进行介绍和宣传、对内辅助智能化管理的智能化创新平台应用。在智能物联网时代,传统企业将迎来“现有产业+新技术=新产业”模式下的新一轮创新与挑战。现在的数字人智能化水平低,与人交互效果差,不能满足企业的生产和服务需求。


技术实现要素:



4.本发明的主要目的在于提出一种基于数字人的处理系统,旨在解决现有数字人智能化水平低下、交互效果差等问题。
5.为实现上述目的,本发明提出一种基于数字人的处理系统,包括用于收集数据信息的数字人终端和用于对所述数字人终端提供智能计算服务的服务器,所述数字人终端与服务器通过局域网进行通信连接,所述数字人终端将收集到的数据传送至服务器并保存,所述数字人终端上设有用于测温的红外探测器、用于图像识别的图像识别单元、用于语音交互的交互单元、用于对接收的语音信号发出指令的控制器和用于通信连接控制器与服务器的网络通信模块,所述红外探测器、图像识别单元、交互单元和控制器相互通信连接;
6.所述红外探测器用于给用户测温,并将测温数据保存到服务器内;
7.所述图像识别单元包括识别模块和存储模块,所述识别模块用于识别系统中已录入人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,所述存储模块用于存储来访人员信息,以便下次可以自动识别;
8.所述交互单元包括获取模块和处理模块,所述获取模块用于获取交互信息,根据所述交互信息确定数字人待执行的动作;所述处理模块用于根据数字人待执行的动作,获取对应的动作驱动信息;
9.所述控制器获取数字人终端的语音提示,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈;
10.所述网络通信模块将采集的语音信号发送至服务器;
11.所述服务器向用户提供相应的数字人服务。
12.优选地,当红外探测器检测人体体温时,如用户体温正常,则允许通过,并进行接下来的操作;如用户体温超过设定范围,则数字人终端内的报警指示灯点亮,并发出警报声
警示,则不允许通过。
13.优选地,所述数字人终端上设有喇叭,每个用户测温结束后,所述喇叭都会进行语音播报体温并生成体温分析结果报告存储至服务器内。
14.优选地,所述识别模块包括用于识别人脸图像的人脸识别模块和用于识别语音的语音识别模块;所述识别模块提供ai识别功能,识别人脸图像时,先获取用户的人脸图像,识别来访客户,并通过存储模块存储至服务器内,下次可以自动识别。
15.优选地,所述获取模块获取用户的语音数据,并通过处理模块进行语音处理和分析,再根据分析结果作出相应的反馈,并将数据传送至服务器内。
16.优选地,所述控制器与智能设备通过网络通信模块通信连接,根据语音提示控制智能设备查或搜索信息资料或作出语音播报。
17.优选地,所述服务器给所述数字人终端提供智能语音交互计算,控制企业内部联网设备,响应所述数字人终端所需的智能化服务功能。
18.优选地,所述数字人终端为电脑显示器或手机或智慧屏设备。
19.本发明还提供了一种基于数字人的处理方法,包括以下步骤,
20.s1:用户靠近数字人终端,红外探测器启动测体温,体温正常则能进入,体温不正常则不能进入;
21.s2:体温测量完后,人脸识别模块识别用户的人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,语音识别模块识别用户的语音信号并将语音信号传送到交互单元;
22.s3:在识别用户人脸图像数据时,存储模块存储来访人员信息;
23.s4:通过获取模块获取交互信息,并通过处理模块根据交互信息确定数字人待执行动作,获取对应的动作驱动信息,并将执行动作传送至控制器;
24.s5:最后通过控制器获取的语音提示,并通过所述网络通信模块将获取的语音信号发送至服务器,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈,实现用户与数字人的交互。
25.优选地,在进行语音识别时,如识别到的声音为预先设定的关键字或关键词音频信号,则进行交互;在进行人脸识别时,如识别到的人脸为活体人脸检测信号,则进行交互。
26.本发明技术方案的有益效果在于:
27.本发明的数字人处理系统,主要包括数字人终端和服务器,数字人终端上设有红外探测器、图像识别单元、交互单元、控制器和网络通信模块,红外探测器用于测温;图像识别单元用于图像、声音识别;交互单元用于与用户语音交互;控制器用于对接收的语音信号发出指令;网络通信模块用于通信连接控制器与服务器;通过网络通信、语音交互、头像识别以及红外检测等技术在为企业提供内、外智能化服务的同时为企业收集并管理业务系统产生的数据信息;通过ai、大数据等新信息技术为企业构建企业大脑,辅助智能决策和业务自动化,进而为企业在提供精细化的生产和服务中降低成本,提高效率。
附图说明
28.图1为本发明一种基于数字人的处理系统一实施例的结构框图。
29.图2为本发明一种基于数字人的处理系统一实施例的结构示意图。
30.图3为本发明一种基于数字人的处理方法一实施例的流程图。
具体实施方式
31.下面将结合本发明实施例,对本发明实施例中的方案进行清楚完整的描述,显然,所描述的实施例仅是本发明中的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
32.作为本发明的一种优选地实施例,参照图1-2,本发明提出一种基于数字人的处理系统,包括用于收集数据信息的数字人终端1和用于对所述数字人终端提供智能计算服务的服务器2,数字人终端1与服务器2通过局域网进行通信连接,数字人终端1将收集到的数据传送至服务器2并保存,数字人终端1上设有用于测温的红外探测器11、用于图像识别的图像识别单元12、用于语音交互的交互单元13、用于对接收的语音信号发出指令的控制器14和用于通信连接控制器与服务器的网络通信模块15,红外探测器11、图像识别单元12、交互单元13和控制器14相互通信连接。数字人终端1为电脑显示器或手机或智慧屏设备,具体地,数字人终端1为类似于智能手机、电脑,运行android/ios,windows,mac os,具有网络通信、语音输入输出、摄像识别、红外检测和显示等功能的电子设备。
33.红外探测器11用于给用户测温,并将测温数据保存到服务器内;
34.图像识别单元12包括识别模块121和存储模块122,识别模块121用于识别系统中已录入人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,存储模块122用于存储来访人员信息,以便下次可以自动识别;
35.交互单元13包括获取模块131和处理模块132,获取模块131用于获取交互信息,根据交互信息确定数字人待执行的动作;处理模块132用于根据数字人待执行的动作,获取对应的动作驱动信息;
36.控制器14获取数字人终端的语音提示,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈;
37.网络通信模块15将采集的语音信号发送至服务器;
38.服务器2向用户提供相应的数字人服务。
39.本发明的一种基于数字人的处理系统,通过网络通信、语音交互、图像识别以及红外检测等技术为企业提供内、外智能化服务的同时为企业收集并管理业务系统产生的数据信息;通过ai、大数据等新信息技术为企业构建企业大脑,辅助智能决策和业务自动化,进而为企业在提供精细化的生产和服务中降低成本,提高效率。数字人终端1和服务器2通过局域网进行通信,数字人终端1具有红外探测、图像识别、智能语音交互等功能,其中,红外探测器11可用于测温,图像识别单元12可用于如员工上班打卡;交互单元3可用于对外介绍企业产品和服务,相当于智能前台或行政,减少人员压力;服务器2用于收集数据,并进行存储,以便下次的自动识别,例如:测温数据或图像识别数据,将保存至数据服务器2,服务器对数字人终端1提供智能计算功能,如智能语音交互等;服务器2是基于ai、大数据等新信息技术的融合而构建的企业智能化和自动化,驱动业务系统的智能化升级,为企业个性化、定制化、精细化的生产和服务降本提效。
40.该处理系统的图像识别单元12包括识别模块121和存储模块122,使用时,通过获
取员工或客户人脸图像,提供ai识别功能,将识别结果做进一步语音交互或业务处理;将图像识别单元设置为识别模块和存储模块,能根据系统已录入的人脸数据进行快速人脸识别,能提供来访人员检测、欢迎语互动以及通知客户到达等功能,能记住来访客户,下次可以自动识别,能提供考勤跟踪、监督提醒等功能。
41.该处理系统的交互单元13包括获取模块131和处理模块132,交互单元13能与人体交互以问答的形式介绍企业产品和服务,能提供选项模式结合语音的方式介绍企业,能辅助以弹窗图片或视频的方式介绍企业。
42.数字人终端1还包括控制器14,控制器14能获取语音提示,由数字服务器分析语音发出控制指令,再根据控制结果做出进一步反馈。控制器能根据语音提示控制智能设备或查、搜索信息资料或作出语音播报。
43.控制器14能根据语音提示控制企业内部设备,例如提前打开空调或投影仪,能帮助企业领导快速查企业内部资料和档案,能帮助企业领导关注某个时事热点并作简要汇报,能辅助企业领导对企业内部事物做基本的决策,其处理流程为:首先获取语音提示,服务器分析理解语音并发出控制指令,根据控制结果做出进一步反馈。
44.网络通信模块15与服务器2通信连接,网络通信模块将采集的语音信号发送至服务器2。服务器2能给数字人终端1提供智能语音交互计算,能控制企业内部联网设备,能响应数字人终端所需的智能化服务功能。服务器2为启停服务器,能配置服务器ip、端口等参数,服务器的交互过程为:首先获取语音数据,再自然语言处理与分析,最后根据分析结果作出反馈。
45.在一个较佳实施方式中,当红外探测器检测人体体温时,如用户体温正常,则允许通过,并进行接下来的操作;如用户体温超过设定范围,则数字人终端内的报警指示灯点亮,并发出警报声警示,则不允许通过。通过设置红外探测器获取人体测量温度,并语音播报体温以及体温分析结果,也可以用于企业记录员工健康数据。通常人体正常温度为36.3-37.2℃,在此区间内都判定为正常,允许通行。
46.在一个较佳实施方式中,参照图2,该处理系统的数字人终端1上设有喇叭10,每个用户测温结束后,喇叭都会进行语音播报体温并生成体温分析结果报告存储至服务器2内。
47.识别模块121包括用于识别人脸图像的人脸识别模块和用于识别语音的语音识别模块;识别模块提供ai识别功能,识别人脸图像时,先获取用户的人脸图像,识别来访客户,并通过存储模块122存储至服务器内,下次可以自动识别。获取模块131获取用户的语音数据,并通过处理模块132进行语音处理和分析,再根据分析结果作出相应的反馈,并将数据传送至服务器2内。控制器14与智能设备通过网络通信模块15通信连接,根据语音提示控制智能设备查或搜索信息资料或作出语音播报。服务器2给数字人终端1提供智能语音交互计算,控制企业内部联网设备,响应数字人终端1所需的智能化服务功能。
48.本发明还提出了一种基于数字人的处理方法,包括以下步骤,
49.s1:用户靠近数字人终端1,红外探测器11启动测体温,体温正常则能进入,体温不正常则不能进入;
50.s2:体温测量完后,人脸识别模块识别用户的人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,语音识别模块识别用户的语音信号并将语音信号传送到交互单元;
51.s3:在识别用户人脸图像数据时,存储模块122存储来访人员信息;
52.s4:通过获取模块131获取交互信息,并通过处理模块132根据交互信息确定数字人待执行动作,获取对应的动作驱动信息,并将执行动作传送至控制器;
53.s5:最后通过控制器14获取的语音提示,并通过网络通信模块15将获取的语音信号发送至服务器2,由服务器2分析语音发出控制指令,再根据控制结果做出进一步反馈,实现用户与数字人的交互。
54.根据步骤s2,在进行语音识别时,如识别到的声音为预先设定的关键字或关键词音频信号,则进行语音交互,服务器发出指令做出反馈,如识别到的声音没有在预先设定的关键字或关键词范围内,则不与用户进行交互;在进行人脸识别时,如识别到的人脸为活体人脸检测信号,则进行语音交互,服务器发出指令做出反馈,如识别到的人脸为照片或其他形式的人脸图样,则不与用户进行交互。
55.以上所述的仅为本发明的部分或优选实施例,无论是文字还是附图都不能因此限制本发明保护的范围,凡是在与本发明一个整体的构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接/间接运用在其他相关的技术领域均包括在本发明保护的范围内。

技术特征:


1.一种基于数字人的处理系统,其特征在于,包括用于收集数据信息的数字人终端和用于对所述数字人终端提供智能计算服务的服务器,所述数字人终端与服务器通过局域网进行通信连接,所述数字人终端将收集到的数据传送至服务器并保存,所述数字人终端上设有用于测温的红外探测器、用于图像识别的图像识别单元、用于语音交互的交互单元、用于对接收的语音信号发出指令的控制器和用于通信连接控制器与服务器的网络通信模块,所述红外探测器、图像识别单元、交互单元和控制器相互通信连接;所述红外探测器用于给用户测温,并将测温数据保存到服务器内;所述图像识别单元包括识别模块和存储模块,所述识别模块用于识别系统中已录入人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,所述存储模块用于存储来访人员信息,以便下次可以自动识别;所述交互单元包括获取模块和处理模块,所述获取模块用于获取交互信息,根据所述交互信息确定数字人待执行的动作;所述处理模块用于根据数字人待执行的动作,获取对应的动作驱动信息;所述控制器获取数字人终端的语音提示,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈;所述网络通信模块将采集的语音信号发送至服务器;所述服务器向用户提供相应的数字人服务。2.根据权利要求1所述的基于数字人的处理系统,其特征在于,当红外探测器检测人体体温时,如用户体温正常,则允许通过,并进行接下来的操作;如用户体温超过设定范围,则数字人终端内的报警指示灯点亮,并发出警报声警示,则不允许通过。3.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述数字人终端上设有喇叭,每个用户测温结束后,所述喇叭都会进行语音播报体温并生成体温分析结果报告存储至服务器内。4.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述识别模块包括用于识别人脸图像的人脸识别模块和用于识别语音的语音识别模块;所述识别模块提供ai识别功能,识别人脸图像时,先获取用户的人脸图像,识别来访客户,并通过存储模块存储至服务器内,下次可以自动识别。5.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述获取模块获取用户的语音数据,并通过处理模块进行语音处理和分析,再根据分析结果作出相应的反馈,并将数据传送至服务器内。6.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述控制器与智能设备通过网络通信模块通信连接,根据语音提示控制智能设备查或搜索信息资料或作出语音播报。7.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述服务器给所述数字人终端提供智能语音交互计算,控制企业内部联网设备,响应所述数字人终端所需的智能化服务功能。8.根据权利要求1所述的基于数字人的处理系统,其特征在于,所述数字人终端为电脑显示器或手机或智慧屏设备。9.一种基于数字人的处理方法,其特征在于:包括以下步骤,
s1:用户靠近数字人终端,红外探测器启动测体温,体温正常则能进入,体温不正常则不能进入;s2:体温测量完后,人脸识别模块识别用户的人脸数据并进行快速人脸识别,并通过喇叭语音播报欢迎语互动以及通知来访人员到达,语音识别模块识别用户的语音信号并将语音信号传送到交互单元;s3:在识别用户人脸图像数据时,存储模块存储来访人员信息;s4:通过获取模块获取交互信息,并通过处理模块根据交互信息确定数字人待执行动作,获取对应的动作驱动信息,并将执行动作传送至控制器;s5:最后通过控制器获取的语音提示,并通过所述网络通信模块将获取的语音信号发送至服务器,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈,实现用户与数字人的交互。10.根据权利要求9所述的基于数字人的处理方法,其特征在于:在进行语音识别时,如识别到的声音为预先设定的关键字或关键词音频信号,则进行交互;在进行人脸识别时,如识别到的人脸为活体人脸检测信号,则进行交互。

技术总结


本发明公开一种基于数字人的处理系统包括数字人终端和用服务器,数字人终端将数据传送至服务器,数字人终端上设有红外探测器、图像识别单元、交互单元、控制器和网络通信模块,红外探测器测温,并将测温数据保存;图像识别单元包括识别模块和存储模块;交互单元包括获取模块和处理模块;处理模块用于根据数字人待执行的动作,获取对应的动作驱动信息;控制器获取数字人终端的语音提示,由服务器分析语音发出控制指令,再根据控制结果做出进一步反馈;网络通信模块将采集的语音信号发送至服务器;服务器向用户提供相应的数字人服务。本发明的基于数字人的处理系统,通过网络通信、语音交互、头像识别及红外检测等技术为企业提供内、外智能化服务。外智能化服务。外智能化服务。


技术研发人员:

李东 严华

受保护的技术使用者:

深圳思力数字创意科技有限公司

技术研发日:

2022.07.11

技术公布日:

2022/11/8

本文发布于:2024-09-22 03:50:24,感谢您对本站的认可!

本文链接:https://www.17tex.com/tex/3/11166.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:模块   数字   语音   所述
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议