一种基于多模态识别的婴儿情感检测装置的制作方法

1.本实用新型涉及婴儿情感检测技术领域，特别涉及一种基于多模态识别的婴儿情感检测装置。

背景技术：

2.随着我国二胎政策的放开，新生儿数量高峰的到来，母婴市场行业也将进入新一轮的快速增长，同时随着社会的发展，就业压力逐步增大，导致家长们承受较重的育儿压力。现阶段，我国关于智能婴儿看护产品的研究尚处于发展阶段，情感化设计研究体系还有待完善，如何实现智能婴儿看护产品的情感化设计是当今社会亟需关注的问题。
3.与此同时，经济水平的不断提高和科学技术的迅速发展促使智能化成为符合现代生活发展和消费者需求的新趋势，通过智能模型实现对婴儿情感的判断，从而能有效的帮助婴儿健康成长，也能缓解父母的育儿压力。虽然现在存在一些智能婴儿床可以实现温湿度、健康系数监测，哄睡功能，如播放儿歌，自动摇晃等功能，也可远程查看婴儿的视频，但缺乏对采集的视频和音频数据进行深层次分析，无法把握婴儿真实的情感状态。

技术实现要素：

4.本实用新型的目的在于提供一种基于多模态识别的婴儿情感检测装置，能够方便的对婴儿进行状态监控。
5.为实现以上目的，本实用新型采用的技术方案为：一种基于多模态识别的婴儿情感检测装置，包括婴儿床本体、摄像头、麦克风、情感检测器以及提醒模块；所述婴儿床本体包括设置在其侧边的第一支架以及设置在其上部呈悬伸状的第二支架，麦克风和情感检测器安装在第一支架中,摄像头安装在第二支架上，提醒模块设置在远离第一支架的一侧；情感检测器接收摄像头采集的婴儿面部图像以及麦克风采集的婴儿声音后进行检测，提醒模块与情感检测器相连用于根据情感检测器的检测结果发出提醒。
6.与现有技术相比，本实用新型存在以下技术效果：通过设置摄像头以及麦克风，采集婴儿的表情和声音信息，再通过情感检测器对声音和表情进行处理，综合判断得到婴儿是否哭泣；再通过提醒模块发出提醒，以方便大人来处理。
附图说明
7.图1是本实用新型的结构框图；
8.图2是本实用新型的结构示意图；
9.图3是显示屏的界面图。
具体实施方式
10.下面结合图1至图3，对本实用新型做进一步详细叙述。
11.参阅图1和图2，本发明公开了一种基于多模态识别的婴儿情感检测装置，包括婴
儿床本体10、摄像头20、麦克风30、情感检测器40以及提醒模块50；所述婴儿床本体10包括设置在其侧边的第一支架11以及设置在其上部呈悬伸状的第二支架12，麦克风30和情感检测器40安装在第一支架11中,摄像头20安装在第二支架12上，提醒模块50设置在远离第一支架11的一侧；情感检测器40接收摄像头20采集的婴儿面部图像以及麦克风30采集的婴儿声音后进行检测，提醒模块50与情感检测器40相连用于根据情感检测器40的检测结果发出提醒。通过设置摄像头20以及麦克风30，采集婴儿的表情和声音信息，再通过情感检测器40对声音和表情进行处理，综合判断得到婴儿是否哭；再通过提醒模块50发出提醒，以方便大人来处理。这里的情感检测器40使用可编程电路，且里面安装上现有技术中成熟的识别程序对婴儿面部图像和婴儿声音进行处理，从而得到婴儿是否哭泣的综合判断结果。
12.进一步地，所述的情感检测器40包括表情识别模块41、哭声检测模块42以及控制模块43；表情识别模块41接收摄像头20拍摄到的图像并进行识别，哭声检测模块42接收麦克风30录制的音频信息并进行识别，表情识别模块41和哭声检测模块42根据识别结果输出婴儿是否哭泣的逻辑信号至控制模块43中。这里不涉及表情识别模块41和哭声检测模块42中的具体算法，我们采用现有技术中成熟的算法即可，我们只需要获得输出的逻辑信号即可。
13.参阅图3，进一步地，所述的提醒模块50为显示屏，控制模块43对接收的逻辑信号进行逻辑运算后输出检测结果至显示屏上，显示屏上用于显示检测结果并以灯光报警的方式发出提醒。声音很容易吓到哭泣的婴儿，因此这里优选地采用灯光报警的方式发出提醒。
14.进一步地，所述的表情识别模块41和哭声检测模块42在婴儿哭泣时输出的逻辑信号为真、不哭泣时输出的逻辑信号为假；控制模块43上设置有按钮，按钮包括“灵敏”和“精确”两个开关量，按钮拨向“灵敏”时控制模块43进行“逻辑或”运算，按钮拨向“精确”时控制模块43进行“逻辑和”运算。通过设置按钮，可以方便的调节控制模块43的运算逻辑，这样就实现了判断的灵敏度和精确度，用户可以根据使用情况选择不同的开关位，适用性更广。
15.进一步地，所述的第二支架12呈l型，且其横向和纵向均为可伸缩杆件，这样就可以调节摄像头20的位置，保证其能够可靠地拍摄到婴儿面部表情。
16.进一步地，所述的情感检测器40包括wifi模块44，控制模块43输出的信息通过wifi模块44与移动终端无线连接，并将警示信息显示在移动终端上。这里的移动终端一般为手机，现在用户的手机几乎都不离手，将警示信息发送到手机上，这样即使用户与婴儿床不在同一个房间内，依然能够及时的获得检测结果。

技术特征：

1.一种基于多模态识别的婴儿情感检测装置，包括婴儿床本体（10）、摄像头（20）、麦克风（30）以及提醒模块（50）；所述婴儿床本体（10）包括设置在其侧边的第一支架（11）以及设置在其上部呈悬伸状的第二支架（12），麦克风（30）安装在第一支架（11）中,摄像头（20）安装在第二支架（12）上，提醒模块（50）设置在远离第一支架（11）的一侧；其特征在于：包括安装在第一支架（11）上的情感检测器（40），情感检测器（40）接收摄像头（20）采集的婴儿面部图像以及麦克风（30）采集的婴儿声音后进行检测，提醒模块（50）与情感检测器（40）相连用于根据情感检测器（40）的检测结果发出提醒。2.如权利要求1所述的基于多模态识别的婴儿情感检测装置，其特征在于：所述的情感检测器（40）包括表情识别模块（41）、哭声检测模块（42）以及控制模块（43）；表情识别模块（41）接收摄像头（20）拍摄到的图像并进行识别，哭声检测模块（42）接收麦克风（30）录制的音频信息并进行识别，表情识别模块（41）和哭声检测模块（42）根据识别结果输出婴儿是否哭泣的逻辑信号至控制模块（43）中。3.如权利要求2所述的基于多模态识别的婴儿情感检测装置，其特征在于：所述的提醒模块（50）为显示屏，控制模块（43）对接收的逻辑信号进行逻辑运算后输出检测结果至显示屏上，显示屏上用于显示检测结果并以灯光报警的方式发出提醒。4.如权利要求3所述的基于多模态识别的婴儿情感检测装置，其特征在于：所述的表情识别模块（41）和哭声检测模块（42）在婴儿哭泣时输出的逻辑信号为真、不哭泣时输出的逻辑信号为假；控制模块（43）上设置有按钮，按钮包括“灵敏”和“精确”两个开关量，按钮拨向“灵敏”时控制模块（43）进行“逻辑或”运算，按钮拨向“精确”时控制模块（43）进行“逻辑和”运算。5.如权利要求1-4任一项所述的基于多模态识别的婴儿情感检测装置，其特征在于：所述的第二支架（12）呈l型，且其横向和纵向均为可伸缩杆件。6.如权利要求1-4任一项所述的基于多模态识别的婴儿情感检测装置，其特征在于：所述的情感检测器（40）包括wifi模块（44），控制模块（43）输出的信息通过wifi模块（44）与移动终端无线连接，并将警示信息显示在移动终端上。

技术总结

一种基于多模态识别的婴儿情感检测装置，包括婴儿床主体、摄像头、麦克风、情感检测器以及提醒模块；所述婴儿床主体包括设置在其侧边的第一支架以及设置在其上部呈悬伸状的第二支架，麦克风和情感检测器安装在第一支架中,摄像头安装在第二支架上，提醒模块设置在远离第一支架的一侧；情感检测器接收摄像头采集的婴儿面部图像以及麦克风采集的婴儿声音后进行检测，提醒模块与情感检测器相连用于根据情感检测器的检测结果发出提醒。通过设置摄像头以及麦克风，采集婴儿的表情和声音信息，再通过情感检测器对声音和表情进行处理，综合判断得到婴儿是否哭泣；再通过提醒模块发出提醒，以方便大人来处理。以方便大人来处理。以方便大人来处理。