(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号 (43)申请公布日 (21)申请号 201910167941.7
(22)申请日 2019.03.06
(71)申请人 南京七奇智能科技有限公司
地址 210046 江苏省南京市南京经济技术
开发区兴智路6号兴智科技园C栋1503
室
(72)发明人 彭辉 姜志宏 郭亮 宋彬彬
张江 袁志坚 刘志忠
(74)专利代理机构 南京正联知识产权代理有限
公司 32243
代理人 王素琴
(51)Int.Cl.
G06F 3/01(2006.01)
G06F 8/20(2018.01)
(54)发明名称一种虚拟人交互软件总线系统及其实现方法(57)摘要本发明公开了一种虚拟人交互软件总 线系统及其实现方法，系统包括：事件通信软总线，用于实现模块之间基于发布订阅机制的软总线通信；视觉能力单元和语音能力单元，用于虚拟人视觉和语音交互；情感能力单元，用于计算虚拟人的情感状态；决策管理单元，用于产生虚拟人的行为控制指令；虚拟人引擎单元，用于驱动虚拟人的可视化行为展现；应用接口单元，用于与第三方应用交互；本发明各单元通过总线接口挂载在事件通信软总线上，支持第三方应用按接口协议接入本系统，从而实现虚拟人形象、动作、表情、声音和服饰变换等操作的集成控制，解决了不同应用系统对虚拟人控制的兼容性问题，使虚拟人更易集成到智能化人机交互流程中，有效提 升了用户体验。权利要求书2页 说明书6页 附图3页CN 109917917 A 2019.06.21
C N 109917917
A
权 利 要 求 书1/2页CN 109917917 A
1.一种虚拟人交互软件总线系统，其特征在于，所述系统与云端服务器连接，所述系统用于统一控制虚拟人形象、服饰、表情、动作以及声音，实现用户交互、虚拟人控制和第三方应用的综合集成，其中，所述系统包括视觉能力单元、语音能力单元、情感能力单元、决策管理单元、虚拟人引擎单元和事件通
信软总线，所述视觉能力单元、语音能力单元、情感能力单元、决策管理单元和虚拟人引擎单元通过事件交互总线接口挂载在所述事件通信软总线上，所述事件通信软总线用于实现所述视觉能力单元、语音能力单元、情感能力单元、决策管理单元和虚拟人引擎单元相互之间基于发布订阅机制的事件交互通信；其中：视觉能力单元，用于获取用户图像数据，并将所述图像数据上传至所述云端服务器计算，产生人脸检测、跟踪、识别、人员到达、离开等事件；
决策管理单元，用于管理虚拟人的资源和配置，并接收所述视觉能力单元、语音能力单元和情感能力单元的输入事件，基于所述输入事件产生虚拟人的行为控制指令；
语音能力单元，用于获取用户语音输入数据，并将所述语音输入数据上传至所述云端服务器，实现对用户语音命令含义的理解，产生语音指令输入事件，并根据所述控制指令，产生虚拟人的语音应答输出；
情感能力单元，基于当前用户的输入，根据所述输入计算虚拟人的情感状态，产生情感状态事件；
虚拟人引擎单元，用于驱动虚拟人的可视化的动画和行为展现。
2.如权利要求1所述的虚拟人交互软件总线系统，其特征在于，所述系统还包括应用接口单元和用户交互界面，所述应用接口单元通过所述事件交互总线接口挂载在所述事件通信软总线上，所述应用接口单元用于与第三方应用进行数据交互；
所述用户交互界面与所述虚拟人引擎单元之间设置有界面交互接口，所述用户交互界面与所述虚拟人引擎单元通过所述界面交互接口实现数据交互。
3.如权利要求2所述的虚拟人交互软件总线系统，其特征在于，所述应用接口单元与所述第三方应用通过TCP/IP接口实现数据交互。
4.如权利要求1所述的虚拟人交互软件总线系统，其特征在于，所述系统采用字符串文本进行数据交互，所述字符串文本采用JSON格式描述。
5.如权利要求1所述的虚拟人交互软件总线系统，其特征在于，所述虚拟人为具有2D或3D虚拟动画形象的软件机器人，所述软件机器人运行在虚拟主机设备上。
6.如权利要求1所述的虚拟人交互软件总线系统，其特征在于，所述视觉能力单元、语音能力单元、情感能力单元、决策管理单元和虚拟人引擎单元通过在所述事件通信软总线中相互传递事件实现数据交互，所述事件由事件类型和消息内容组成，其中所述事件类型包括：
系统事件、视觉输入事件、语音输入事件、界面交互事件、第三方应用事件、情感状态事件、语音输出事件、表情控制事件、动作控制事件、服饰控制事件、界面信息输出事件。
7.一种虚拟人交互软件总线系统的实现方法，应用于权利要求1～6任一项所述的虚拟人交互软件总线系
统，其特征在于，所述方法包括步骤：
S1、所述视觉能力单元、语音能力单元、情感能力单元、决策管理单元和虚拟人引擎单元均通过所述总线接口挂载在所述事件通信软总线上并注册；
S2、设定所述视觉能力单元、语音能力单元、情感能力单元、决策管理单元和虚拟人引
2
豫公网安备41160202000603
站长QQ:729038198
关于我们
投诉建议