基于自监督的预训练和面瘫分级的建模、分级方法及系统

(19)中华人民共和国国家知识产权局

	(12)发明专利说明书
		(10)申请公布号 CN 113033359 A (43)申请公布日 2021.06.25

(21)申请号 CN202110268525.3

(22)申请日 2021.03.12

(71)申请人西北大学

地址 710069 陕西省西安市太白北路229号

(72)发明人李志鹏孙豪杰句建国许鹏飞管子玉谢飞缪飞

(74)专利代理机构 61216 西安恒泰知识产权代理事务所

代理人王芳

(51)Int.CI

G06K9/00(20060101)

G06K9/62(20060101)

G06N3/04(20060101)

G06N3/08(20060101)

权利要求说明书说明书幅图

(54)发明名称

基于自监督的预训练和面瘫分级的建模、分级方法及系统

(57)摘要

本发明公开了一种基于自监督的预训练和面瘫分级的建模、分级方法及系统。面瘫分级评估方法主要包括视频序列预测的上游任务和面瘫分级评估的下游任务两个阶段。为进行视频序列预测，将面瘫的诊断视频中人脸对称地划分为左侧脸和右侧脸，将这些单侧脸的视频采样为若干个视频片段并打乱。然后利用3D‑CNN模型进行视频序列预测任务的预训练。预训练后的3D‑CNN模型就具有一定能够学习面部运动时序特征的能力。然后，将预训练后的模型迁移到面瘫分级评估的下游任务钟，利用面瘫诊断视频对预训练后的3D‑CNN模型进行微调。最后，利用3D‑CNN模型提取的时序特征的差异信息进行面瘫分级评估。此外，整个模型结合了面部整体的非对称性特征和局部非对称性特征进行面瘫分级评估。

法律状态

法律状态公告日	法律状态信息	法律状态
2021-06-25	公开	公开
2021-07-13	实质审查的生效	实质审查的生效
2023-02-24	授权	发明专利权授予