一种设备控制方法、装置、电子设备及存储介质与流程



1.本技术涉及计算机技术领域,尤其涉及一种设备控制方法、装置、电子设备及存储介质。


背景技术:



2.随着人们生活水平的提高及科技的发展,家庭中的各类家用电器的品类逐渐丰富且功能愈加多样,目前,各智能家居场景中基本都是以用户预先设定的时间或以用户使用习惯为基础,如:用户喜欢在傍晚开灯,则在到达傍晚对应的时间点时,开启指定灯光等等。
3.然而,用户在不同时间情绪可能不同,如果各智能家居场景仍然按照同样的方式调节室内环境,可能无法与用户的情绪产生互动,无法切实满足用户深度的需求。


技术实现要素:



4.为了解决目前智能家居场景无法与用户的情绪产生互动,无法切实满足用户深度需求的技术问题,本技术提供了一种设备控制方法、装置、电子设备及存储介质。
5.第一方面,本技术提供了一种设备控制方法,包括:
6.获取对用户采集的视频,所述视频中包括所述用户的活动姿态;
7.基于所述视频确定与所述活动姿态对应的情绪状态
8.确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包括至少一个智能家居设备的控制策略;
9.按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。
10.在一种可能的实施方式中,所述方法还包括:
11.获取多个情绪状态匹配的情绪互动策略;
12.确定与所述情绪互动策略对应的至少一个所述智能家居设备的控制策略;
13.基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
14.建立所述情绪状态与所述情绪互动场景之间的对应关系。
15.在一种可能的实施方式中,所述方法还包括:
16.获取用户针对各所述情绪状态自定义的至少一个智能家居设备及各所述智能家居设备的控制策略;
17.基于至少一个所述智能家居设备的偏好控制策略构建情绪互动场景;
18.建立所述情绪状态与所述情绪互动场景之间的对应关系。
19.在一种可能的实施方式中,基于所述视频确定与所述活动姿态对应的情绪状态,包括:
20.在所述视频中确定与所述活动姿态对应的视频帧序列;
21.基于所述视频帧序列确定与所述活动姿态对应的情绪状态。
22.在一种可能的实施方式中,在所述视频中确定与所述活动姿态对应的视频帧序列,包括:
23.对所述视频中的多个视频帧进行关于活动姿态的轮廓提取,得到与各所述视频帧对应的轮廓图像;
24.基于各视频帧对应的所述轮廓图像及视频帧时刻生成与所述活动姿态对应的视频帧序列。
25.在一种可能的实施方式中,基于所述视频帧序列确定与所述活动姿态对应的情绪状态,包括:
26.基于所述视频帧序列进行活动特征提取,得到活动特征序列;
27.将所述活动特征序列进行组合,得到合并特征向量;
28.将所述合并特征向量输入预设情绪分类模型,得到与所述活动姿态对应的所述情绪状态。
29.在一种可能的实施方式中,所述方法还包括:
30.在将至少一个智能家居设备的控制指令下发至各智能家居设备预设时间段后,重新执行获取对用户采集的视频的步骤,直至所述用户的情绪状态变为预设正向情绪状态。
31.第二方面,本技术提供了一种设备控制装置,包括:
32.第一获取模块,用于获取对用户采集的视频,所述视频中包括所述用户的活动姿态;
33.第一确定模块,用于基于所述视频确定与所述活动姿态对应的情绪状态;
34.第二确定模块,用于确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包括至少一个智能家居设备的控制策略;
35.发送模块,用于按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。
36.在一种可能的实施方式中,所述装置还包括:
37.第二获取模块,用于获取多个情绪状态匹配的情绪互动策略;
38.第三确定模块,用于确定与所述情绪互动策略对应的至少一个所述智能家居设备的控制策略;
39.第一构建模块,用于基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
40.第一建立模块,用于建立所述情绪状态与所述情绪互动场景之间的对应关系。
41.在一种可能的实施方式中,所述装置还包括:
42.第三获取模块,用于获取用户针对各所述情绪状态自定义的至少一个智能家居设备及各所述智能家居设备的偏好控制策略;
43.第二构建模块,用于基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
44.第二建立模块,用于建立所述情绪状态与所述情绪互动场景之间的对应关系。
45.在一种可能的实施方式中,所述第一确定模块包括:
46.第一确定单元,用于在所述视频中确定与所述活动姿态对应的视频帧序列;
47.第二确定单元,用于基于所述视频帧序列确定与所述活动姿态对应的情绪状态。
48.在一种可能的实施方式中,所述第一确定单元包括:
49.第一提取子单元,用于对所述视频中的多个视频帧进行关于活动姿态的轮廓提
取,得到与各所述视频帧对应的轮廓图像;
50.生成子单元,用于基于各视频帧对应的所述轮廓图像及视频帧时刻生成与所述活动姿态对应的视频帧序列。
51.在一种可能的实施方式中,所述第二确定单元包括:
52.第二提取子单元,用于基于所述视频帧序列进行活动特征提取,得到活动特征序列;
53.组合子单元,用于将所述活动特征序列进行组合,得到合并特征向量;
54.输入子单元,用于将所述合并特征向量输入预设情绪分类模型,得到与所述活动姿态对应的所述情绪状态。
55.在一种可能的实施方式中,所述装置还包括:
56.重新执行模块,用于在将至少一个智能家居设备的控制指令下发至各智能家居设备预设时间段后,重新执行获取对用户采集的视频的步骤,直至所述用户的情绪状态变为预设正向情绪状态。
57.第三方面,本技术提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
58.存储器,用于存放计算机程序;
59.处理器,用于执行存储器上所存放的程序时,实现第一方面任一所述的设备控制方法。
60.第四方面,本技术提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有设备控制方法的程序,所述设备控制方法的程序被处理器执行时实现第一方面任一所述的设备控制方法的步骤。
61.本技术实施例提供的上述技术方案与现有技术相比具有如下优点:
62.本技术实施例通过基于用户的活动姿态确定用户的情绪状态,基于情绪状态确定相应的情绪互动场景,按照情绪互动场景中的控制策略控制各智能家居设备工作,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
附图说明
63.此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
64.为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
65.图1为本技术实施例提供的一种设备控制方法的流程图;
66.图2为本技术实施例提供的另一种设备控制方法的流程图;
67.图3为本技术实施例提供的另一种设备控制方法的流程图;
68.图4为本技术实施例提供的另一种设备控制方法的流程图
69.图5为本技术实施例提供的一种设备控制装置的结构图;
70.图6为本技术实施例提供的一种电子设备的结构图。
具体实施方式
71.为使本技术实施例的目的、技术方案和优点更加清楚,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本技术的一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本技术保护的范围。
72.由于用户在不同时间情绪可能不同,如果各智能家居场景仍然按照同样的方式调节室内环境,可能无法与用户的情绪产生互动,无法切实满足用户深度的需求。为此,本技术实施例提供一种设备控制方法、装置、电子设备及存储介质,通过基于用户的活动姿态确定用户的情绪状态,基于情绪状态确定相应的情绪互动场景,按照情绪互动场景中的控制策略控制各智能家居设备工作,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
73.本技术的设备控制方法可以应用于服务器、控制中心或者网关中等等,服务器、控制中心或者网关可以直接或者间接与被控制的智能家居设备通信连接。图1为本技术实施例提供的一种设备控制方法的流程图,如图1所示,所述设备控制方法可以包括以下步骤:
74.步骤s101,获取对用户采集的视频,所述视频中包括所述用户的活动姿态;
75.本技术实施例中,可以在用户所在空间中布设至少一个摄像头,通过摄像头采集用户所在空间内的视频。活动姿态可以指用户身体在活动过程中的姿态,如:走路时的步态、头部姿态、脊柱姿态、手臂姿态等等。
76.步骤s102,基于所述视频确定与所述活动姿态对应的情绪状态;
77.人体的非语言信号,如行走的步态、姿势等都能够表现人的内心情感状态,并在识别个体情绪状态方面具有重要价值,因此,本技术可以根据视频中用户的活动姿态确定用户当前的情绪状态,情绪状态可以包括:平静、愉快、愤怒和悲伤等等。
78.步骤s103,确定与所述情绪状态对应的情绪互动场景。
79.环境对人的情绪是有影响的,整洁、明亮、彩柔和的环境,使人产生恬静、愉快的心情,脏乱、阴暗、彩诡异的环境,给人带来憋气和不快的情绪。所以,在用户处于不同情绪状态,可以通过营造不同的环境,引导用户情绪状态正向发展,如:在用户愤怒时,可以通过由智能家居设备(如:扫地机器人、智能灯光、智能音箱、智能窗帘等等)打造的情绪互动场景将用户所处环境调节为整洁、明亮、彩柔和的环境等。
80.本技术实施例中,所述情绪互动场景可以是根据不同情绪状态针对性设置的,以对不同的情绪状态起到调节作用,如:将用户的愤怒情绪状态调节为平静状态、将悲伤情绪状态调节为愉悦状态、将兴奋情绪状态调节为愉悦状态等等,实际应用中,可以预先构建不同情绪状态与情绪互动场景之间的对应关系,在确定用户的情绪状态之后,可以通过查询对应关系确定与情绪状态对应的情绪互动场景。
81.每个情绪互动场景包括至少一个智能家居设备的控制策略,如:与悲伤情绪对应的情绪互动场景中至少一个智能家居设备的控制策略包括:控制灯光调节为暖光、控制打
开窗帘、控制音箱播放轻音乐、空调温度调高等等;与愤怒情绪对应的情绪互动场景中至少一个智能家居设备的控制策略包括:控制空调温度降低、控制灯光调节为自然光等等。
82.步骤s104,按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。
83.在该步骤中,可以针对每个智能家居设备,按照控制策略向智能家居设备发送控制指令,以使至少一个智能家居设备营造出能够调节用户情绪状态的环境。
84.本技术实施例通过基于用户的活动姿态确定用户的情绪状态,基于情绪状态确定相应的情绪互动场景,按照情绪互动场景中的控制策略控制各智能家居设备工作,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
85.在本技术的又一实施例中,如图2所示,所述方法还包括:
86.步骤s201,获取多个情绪状态匹配的情绪互动策略;
87.本技术实施例中,可以预先构建情绪状态对应的情绪互动策略,情绪互动策略指可以将不良情绪状态引导成正向情绪状态或者保持正向情绪状态的策略,示例性的:情绪互动策略可以为“建议营造使人愉悦的环境”,也可以为“建议营造使人冷静的环境”等等。
88.可以预先构建多组情绪状态与情绪互动策略之间的对应关系,以便在确定情绪状态时获取相应的情绪互动策略。
89.步骤s202,确定与所述情绪互动策略对应的至少一个所述智能家居设备的控制策略;
90.在确定情绪互动策略后,需要智能家居设备按照情绪互动策略执行,所以,需要为能够实现相应情绪互动策略的智能家居设备确定相应的控制策略,实际应用中,可以根据不同智能家居设备工作在不同工作参数下给人的情绪带来的影响设置智能家居设备的控制策略。
91.本技术实施例中,可以预先构建每种情绪互动策略与其对应的至少一个智能家居设备的控制策略之间的对应关系,以便在确定情绪互动策略后,获取与该确定的情绪互动策略对应的至少一个智能家居设备的控制策略。
92.步骤s203,基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
93.在该步骤中,可以将至少一个所述智能家居设备的控制策略组合起来,得到情绪互动场景。
94.步骤s204,建立所述情绪状态与所述情绪互动场景之间的对应关系。
95.本技术实施例中,可以自动查情绪状态对应的情绪互动策略,进而基于情绪互动策略选择至少一个智能家居设备的控制策略,生成情绪互动场景,并创建对应关系,便于后续利用情绪状态与情绪互动场景之间的对应关系控制智能家居设备,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
96.在本技术的又一实施例中,如图3所示,所述方法还包括:
97.步骤s301,获取用户针对各所述情绪状态自定义的至少一个智能家居设备及各所述智能家居设备的控制策略;
98.由于不同用户可能在不同情绪需要的环境不同,所以,可以令用户自定义不同情绪状态对应的情绪互动场景下各智能家居设备的控制策略。
99.本技术实施例中,用户可以通过提交问卷,app设置等方式针对不同情绪状态自定义至少一个智能家居设备及各所述智能家居设备的控制策略。
100.步骤s302,基于至少一个所述智能家居设备的偏好控制策略构建情绪互动场景;
101.在该步骤中,可以将至少一个所述智能家居设备的控制策略组合起来,得到情绪互动场景。
102.步骤s303,建立所述情绪状态与所述情绪互动场景之间的对应关系。
103.本技术实施例中,可以根据用户针对不同情绪状态自定义的至少一个智能家居设备的控制策略,生成情绪互动场景,并创建对应关系,便于后续利用情绪状态与情绪互动场景之间的对应关系控制智能家居设备,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
104.在本技术的又一实施例中,基于所述视频确定与所述活动姿态对应的情绪状态,如图4所示,包括:
105.步骤s401,在所述视频中确定与所述活动姿态对应的视频帧序列;
106.由于采集的视频一般是连续的,可能不包含用户活动时的姿态,所以,可以在采集到原始视频之后,可以通过目标检测神经网络模型在原始视频的视频帧中检测处于活动姿态的用户,并利用识别框包围用户,对识别框进行截取,得到包含用户的活动姿态的视频帧序列,以作为活动姿态识别的输入。
107.在本技术的一种实施方式中,步骤s401在所述视频中确定与所述活动姿态对应的视频帧序列,包括:
108.步骤s501,对所述视频中的多个视频帧进行关于活动姿态的轮廓提取,得到与各所述视频帧对应的轮廓图像;
109.为了减少服装等非活动特征因素的影响,同时以较低的计算成本在单个视频帧中描述用户的身体状态,首先需对视频帧序列中的每个视频帧做轮廓提取,具体方法为用无人时的背景图像与视频帧相减,然后进行二值化处理,即可得到各所述视频帧对应的轮廓图像,轮廓图像中包含用户的活动姿态,如:迈步的走路姿态,低头的走路姿态等等。
110.步骤s502,基于各视频帧对应的所述轮廓图像及视频帧时刻生成与所述活动姿态对应的视频帧序列。
111.由于活动姿态是一段连续时间内的活动体态,图像识别神经网络需要包含时间信息,因此,可以将多个视频帧对应的轮廓图像按照视频帧时刻的先后顺序排列,得到视频帧序列,以保留活动姿态和时间两个维度的特征。
112.步骤s402,基于所述视频帧序列确定与所述活动姿态对应的情绪状态。
113.本技术实施例中,可以利用图像识别神经网络对轮廓图像进行识别,得到每个轮廓图像对应的活动姿态,根据活动状态与情绪状态之间的对应关系,确定轮廓图像中识别到的活动姿态对应的情绪状态。
114.在本技术一种实施方式中,步骤s402基于所述视频帧序列确定与所述活动姿态对
应的情绪状态,包括:
115.步骤s601,基于所述视频帧序列进行活动特征提取,得到活动特征序列;
116.本技术实施例中,可以利用特征提取网络对视频帧序列进行活动特征提取,得到活动特征序列。
117.步骤s602,将所述活动特征序列进行组合,得到合并特征向量;
118.为了便于图像识别神经网络能够基于活动姿态和时间两个维度的特征进行活动特征识别,因此,需要将活动特征序列进行合并,得到合并特征向量。示例性的,两个特征向量都各自是一个多维的向量,直接把两个向量叠在一起组成新的向量,比如三维的情况就相当于两个方块并成一个更大的方块。
119.步骤s603,将所述合并特征向量输入预设情绪分类模型,得到与所述活动姿态对应的所述情绪状态。
120.本技术实施例中,可以利用预设情绪分类模型基于合并特征向量进行推理预测,得到与活动姿态对应的所述情绪状态。
121.本技术实施例能够自动确定用户的情绪状态,以便于后续基于情绪状态确定对应的情绪互动场景,进而便于营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
122.在本技术的又一实施例中,所述方法还包括:
123.在将至少一个智能家居设备的控制指令下发至各智能家居设备预设时间段后,重新执行获取对用户采集的视频的步骤,直至所述用户的情绪状态变为预设正向情绪状态。
124.本技术实施例中,预设正向情绪状态可以指平静、愉悦等情绪状态。
125.在向至少一个智能家居设备发送控制指令后,等待预设时间段,重新执行“获取对用户采集的视频,基于所述视频确定与所述活动姿态对应的情绪状态”的步骤,在用户的情绪状态变为正向情绪状态时可以停止情绪互动场景,也可以由用户主动选择切换情绪互动场景等。
126.本技术实施例通过再次获取用户的情绪状态,以验证是否将用户的情绪状态调节为正向情绪状态,实现提高情绪调节的可靠性。
127.在本技术的又一实施例中,还提供一种设备控制装置,如图5所示,包括:
128.第一获取模块11,用于获取对用户采集的视频,所述视频中包括所述用户的活动姿态;
129.第一确定模块12,用于基于所述视频确定与所述活动姿态对应的情绪状态;
130.第二确定模块13,用于确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包括至少一个智能家居设备的控制策略;
131.发送模块14,用于按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。
132.在一种可能的实施方式中,所述装置还包括:
133.第二获取模块,用于获取多个情绪状态匹配的情绪互动策略;
134.第三确定模块,用于确定与所述情绪互动策略对应的至少一个所述智能家居设备的控制策略;
135.第一构建模块,用于基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
136.第一建立模块,用于建立所述情绪状态与所述情绪互动场景之间的对应关系。
137.在一种可能的实施方式中,所述装置还包括:
138.第三获取模块,用于获取用户针对各所述情绪状态自定义的至少一个智能家居设备及各所述智能家居设备的偏好控制策略;
139.第二构建模块,用于基于至少一个所述智能家居设备的控制策略构建情绪互动场景;
140.第二建立模块,用于建立所述情绪状态与所述情绪互动场景之间的对应关系。
141.在一种可能的实施方式中,所述第一确定模块包括:
142.第一确定单元,用于在所述视频中确定与所述活动姿态对应的视频帧序列;
143.第二确定单元,用于基于所述视频帧序列确定与所述活动姿态对应的情绪状态。
144.在一种可能的实施方式中,所述第一确定单元包括:
145.第一提取子单元,用于对所述视频中的多个视频帧进行关于活动姿态的轮廓提取,得到与各所述视频帧对应的轮廓图像;
146.生成子单元,用于基于各视频帧对应的所述轮廓图像及视频帧时刻生成与所述活动姿态对应的视频帧序列。
147.在一种可能的实施方式中,所述第二确定单元包括:
148.第二提取子单元,用于基于所述视频帧序列进行活动特征提取,得到活动特征序列;
149.组合子单元,用于将所述活动特征序列进行组合,得到合并特征向量;
150.输入子单元,用于将所述合并特征向量输入预设情绪分类模型,得到与所述活动姿态对应的所述情绪状态。
151.在一种可能的实施方式中,所述装置还包括:
152.重新执行模块,用于在将至少一个智能家居设备的控制指令下发至各智能家居设备预设时间段后,重新执行获取对用户采集的视频的步骤,直至所述用户的情绪状态变为预设正向情绪状态。
153.在本技术的又一实施例中,还提供一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
154.存储器,用于存放计算机程序;
155.处理器,用于执行存储器上所存放的程序时,实现前述任一方法实施例所述的设备控制方法。
156.本发明实施例提供的电子设备,处理器通过执行存储器上所存放的程序通过基于用户的活动姿态确定用户的情绪状态,基于情绪状态确定相应的情绪互动场景,按照情绪互动场景中的控制策略控制各智能家居设备工作,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求,进一步的,通过情绪互动场景营造的环境,可以针对性的对用户的不良情绪状态产生积极影响,促使用户的情绪状态正向发展,保持健康状态,便于用户使用。
157.上述电子设备提到的通信总线1140可以是外设部件互连标准
(peripheralcomponentinterconnect,简称pci)总线或扩展工业标准结构(extendedindustrystandardarchitecture,简称eisa)总线等。该通信总线1140可以分为地址总线、数据总线、控制总线等。为便于表示,图6中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
158.通信接口1120用于上述电子设备与其他设备之间的通信。
159.存储器1130可以包括随机存取存储器(randomaccessmemory,简称ram),也可以包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
160.上述的处理器1110可以是通用处理器,包括中央处理器(centralprocessingunit,简称cpu)、网络处理器(networkprocessor,简称np)等;还可以是数字信号处理器(digitalsignalprocessing,简称dsp)、专用集成电路(applicationspecificintegratedcircuit,简称asic)、现场可编程门阵列(field-programmablegatearray,简称fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
161.在本技术的又一实施例中,还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有设备控制方法的程序,所述设备控制方法的程序被处理器执行时实现前述任一方法实施例所述的设备控制法的步骤。
162.需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
163.以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。

技术特征:


1.一种设备控制方法,其特征在于,包括:获取对用户采集的视频,所述视频中包括所述用户的活动姿态;基于所述视频确定与所述活动姿态对应的情绪状态;确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包括至少一个智能家居设备的控制策略;按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。2.根据权利要求1所述的方法,其特征在于,所述方法还包括:获取多个情绪状态匹配的情绪互动策略;确定与所述情绪互动策略对应的至少一个所述智能家居设备的控制策略;基于至少一个所述智能家居设备的控制策略构建情绪互动场景;建立所述情绪状态与所述情绪互动场景之间的对应关系。3.根据权利要求1所述的方法,其特征在于,所述方法还包括:获取用户针对各所述情绪状态自定义的至少一个智能家居设备及各所述智能家居设备的偏好控制策略;基于至少一个所述智能家居设备的控制策略构建情绪互动场景;建立所述情绪状态与所述情绪互动场景之间的对应关系。4.根据权利要求1所述的方法,其特征在于,基于所述视频确定与所述活动姿态对应的情绪状态,包括:在所述视频中确定与所述活动姿态对应的视频帧序列;基于所述视频帧序列确定与所述活动姿态对应的情绪状态。5.根据权利要求4所述的方法,其特征在于,在所述视频中确定与所述活动姿态对应的视频帧序列,包括:对所述视频中的多个视频帧进行关于活动姿态的轮廓提取,得到与各所述视频帧对应的轮廓图像;基于各视频帧对应的所述轮廓图像及视频帧时刻生成与所述活动姿态对应的视频帧序列。6.根据权利要求4所述的方法,其特征在于,基于所述视频帧序列确定与所述活动姿态对应的情绪状态,包括:基于所述视频帧序列进行活动特征提取,得到活动特征序列;将所述活动特征序列进行组合,得到合并特征向量;将所述合并特征向量输入预设情绪分类模型,得到与所述活动姿态对应的所述情绪状态。7.根据权利要求1所述的方法,其特征在于,所述方法还包括:在将至少一个智能家居设备的控制指令下发至各智能家居设备预设时间段后,重新执行获取对用户采集的视频的步骤,直至所述用户的情绪状态变为预设正向情绪状态。8.一种设备控制装置,其特征在于,包括:第一获取模块,用于获取对用户采集的视频,所述视频中包括所述用户的活动姿态;第一确定模块,用于基于所述视频确定与所述活动姿态对应的情绪状态;第二确定模块,用于确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包
括至少一个设备的控制策略;发送模块,用于按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;存储器,用于存放计算机程序;处理器,用于执行存储器上所存放的程序时,实现权利要求1~7任一所述的设备控制方法。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有设备控制方法的程序,所述设备控制方法的程序被处理器执行时实现权利要求1-7任一所述的设备控制方法的步骤。

技术总结


本发明涉及一种设备控制方法、装置、电子设备及存储介质,该设备控制方法包括:获取对用户采集的视频,所述视频中包括所述用户的活动姿态;基于所述视频确定与所述活动姿态对应的情绪状态;确定与所述情绪状态对应的情绪互动场景,所述情绪互动场景包括至少一个智能家居设备的控制策略;按照各智能家居设备的控制策略向相应智能家居设备发送控制指令。本申请实施例通过控制各智能家居设备工作,以便营造能够调节用户情绪的环境,实现与用户的情绪互动,满足用户深度需求。满足用户深度需求。满足用户深度需求。


技术研发人员:

李孟宸 陈翀 唐杰

受保护的技术使用者:

珠海联云科技有限公司

技术研发日:

2022.11.30

技术公布日:

2023/3/7

本文发布于:2024-09-20 12:24:43,感谢您对本站的认可!

本文链接:https://www.17tex.com/tex/2/70691.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:所述   情绪   互动   状态
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议