一种加钞间违规操作智能监测方法及装置与流程

1.本发明属于智能监测技术领域，更具体地说，涉及一种加钞间违规操作智能监测方法及装置。

背景技术：

2.随着银行自助存储终端使用越来越广泛，各银行网点自助存储终端加钞和清点的频次也逐渐增加。为了更好的监管银行各网点的加钞间加钞和清点合规情况，银行运营管理相关部门会定期组织外包人员集中审查一段时间内的录像，来发现加钞间内的违规行为。其中，关于加钞间内是否双人加钞、加钞箱是否全程双人押送、加钞间内是否有无关人员进入等行为，是监管人员重点审查内容。现有技术关于审查更多的是通过人工观看录像的方式来发现违规情况，这样不仅工作效率低下，而且人力成本和漏检率也很高，导致无法对违规网点进行整顿，以及无法及时对违规行为进行制止，这样就导致网点不仅增加了运营管理风险，而且降低了运营管理效率。
3.针对上述问题，现有技术也提出了一些解决方案，例如发明创造名称为：一种银行加钞间违规加钞智能检测方法及装置(申请日：2019年12月6日；申请号：2019112484376)，该方案公开了一种银行加钞间违规加钞智能检测方法及装置，该方案的方法包括：根据银行加钞间的门磁io信号日志信息，确定该银行加钞间的加钞过程时间段，并记录该加钞过程时间段的时间节点信息；根据时间节点信息，从银行加钞间视频录像文件中截取加钞过程时间段对应的目标分析视频片段；对目标分析视频片段进行人员数量检测，当检测到人员数量超出预设的阈值时，则生成加钞间使用违规记录。该方案能够对银行各网点的加钞间监控视频进行自动化智能分析，大大节省了银行使用规范检查的人力付出，并有效提高了检测的准确性和及时性。
4.但是，上述方案存在的问题在于：通过视频分析检测人员数量来判断是否是单人违规加钞违规，没有对加钞间内的人员的状态进行进一步分析。例如：两名人员进入之后，两人距离过远，可能无法起到有效的监督作用。此外，上述方案并未针对进入人员进行身份的区分，例如：有权限人员进去后，有不法分子串通尾随或者胁迫进入；以上情况都无法及时发现和预警。
5.综上所述，如何提高银行加钞间违规操作监测的实时性和准确性，是现有技术亟需解决的技术问题。

技术实现要素：

6.1.要解决的问题
7.针对现有技术中加钞间违规操作监测的实时性和准确性较低的问题，本发明提供一种加钞间违规操作智能监测方法及装置，可以实现对加钞间操作的实时监测以及监测的准确性，从而可以及时对违规行为进行预警制止，进而提高了银行网点加钞间的安全性，进一步提高了银行网点的运营管理效率。
8.2.技术方案
9.为了解决上述问题，本发明所采用的技术方案如下：
10.一种加钞间违规操作智能监测方法，步骤如下：
11.采集加钞间多个方向图像数据；
12.判断人员数量，当人员数量为1时，发出单人进入加钞间违规信号至外部接收端响应；当人员数量大于1时，继续进行下一步判断；
13.判断进入人员是否为加钞人员，如不是加钞人员，则生成非法人员信号，推送至外部接收端响应；如是加钞人员，继续进行距离判断；
14.如加钞人员之间距离不在设定的阈值范围之内，则生成加钞人员加钞距离违规信号，推送至外部接收端。
15.更进一步的，加钞间多个方向图像数据为至少2个方向的图像采集装置采集的图像数据。
16.更进一步的，2个方向的图像采集装置采集方向垂直设置。
17.更进一步的，其中一个方向的图像采集方向为加钞柜朝向房间门的方向。
18.更进一步的，通过抓取加钞人员的面部图像数据，并进行人脸特征提取和识别，识别数据与授权进入加钞间的加钞人员身份数据比对，判断是否为非法人员。
19.更进一步的，加钞人员之间距离判断通过预先设定操作安全区域，判断加钞人员是否都在区域内，加钞人员都在范围内，则判定为正常。
20.更进一步的，所述加钞人员位置通过设定人体框底部中心点作为对应坐标，然后根据检测出来的人体框底部的中心位置作为摄像机坐标的位置，通过摄像机坐标位置转换为到世界坐标位置，获得加钞人员世界坐标下坐标和相对距离。
21.一种加钞间违规操作智能监测装置，包括至少一个设置在加钞柜一侧的图像采集装置，还包括至少一个设置在加钞柜侧方向上的图像采集装置，图像采集装置用于采集进入采集区域的图像，图像采集装置与控制器连接，控制器通过上述的监测方法进行加钞间违规操作智能监测。
22.更进一步的，还包括外部提示和报警装置，外部提示和报警装置接收控制器发出的违规信号，做出提示并报警。
23.更进一步的，还包括运营管理平台，通过运营管理平台对数据进行存储和处理。
24.3.有益效果
25.相比于现有技术，本发明的有益效果为：
26.我们针对现有技术只是检测是否双人进入，但是没有对进入后的行为进行进一步分析。例如：双人进入后，单人加钞违规。双人进入，但是非法人员尾随的情况。本方案基于针对双人进入后，单人加钞违规进行进一步有效识别，包括通过双摄像头联合判断双人加钞距离、通过标定有效双人安全区域来约束双人安全加钞行为等。另外，对非法人员尾随进入后进行有效识别。识别更加精确和智能，特别适用于银行加钞的智能识别提示场景。
附图说明
27.图1为本方案实施例系统布置示意图；
28.图2为本方案摄像头a的识别示意图；
29.图3为本方案摄像头b的识别示意图；
30.图4为本方案摄像头识别的相机坐标转化为世界坐标示意图。
具体实施方式
31.为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例；而且，各个实施例之间不是相对独立的，根据需要可以相互组合，从而达到更优的效果。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
32.为进一步了解本发明的内容，结合附图和实施例对本发明作详细描述。
33.本方案监测的实时性和准确性较低的问题，本方案设计了一种智能检测方法，主要针对加钞间的违规行为进行细化检测，主要检测的违规包括：单人进入加钞间、双人进入但单人加钞行为、双人进入但双人距离过远、非法身份进入行为。可以全面的针对加钞间的违规场景全方位的智能化检测，避免了现有技术中检测不完全的情况。
34.具体步骤如下：
35.通过设置在两个方向的图像采集装置进行图像采集，此采集装置可以是摄像头，摄像机、相机等采集图像装置；两个方向呈一定的角度，可以是垂直设置，也可以是其他角度，只要能满足所需求的图像数据即可，也可以是三个方向或者更多方向上的采集，本方案至少需要两个方向上的采集装置进行图像采集，如图1所示，一个方向的图像采集装置可以设置在加钞柜一侧，如放在加钞柜的右侧或者上方等等，另一个方向为加钞柜面向的平行方向一侧，两个方向的摄像头正对的法线方向垂直，图像采集可以是固定采集方向，也可以是可旋转式的图像采集装置，本实施例采用两个摄像头，摄像头a和摄像头b。每个方向上的图像采集装置也可以有多个，如一侧并排设置两个，另一侧设置两个，形成一个采集阵列，当然采用两个垂直方向的摄像头设置，成本最低，且可以保证相关功能的实现，图像采集装置与控制器连接，控制器可以设置在加钞柜房间内，也可以通过有线或无线方式设置在后台，如银行远程控制系统。此处只要保证可以进行图像识别的处理以及相关后续判断，可以为计算机或者其他中控装置，相关的硬件设备也通过相关的电源系统供电，在此不多做赘述。
36.通过这种呈角度的设置可以在不同角度获取图像数据，进行分析，防止如单个采集装置，多名人员之间有阻挡的情况，保证了识别的准确性；如图3所示，通过不同角度的图像，如图2所示的，摄像头a的图像，结合图3所示的摄像头b的图像，综合可以判断出2位加钞人员之间的距离，通过距离检测判断后续情况；
37.图像采集装置采集相关的图像后，可以是视频流也可以是其他形式的采集数据，本实施例采用的摄像头采集视频流的方式进行识别，后台的控制器接收图像采集数据，通过人体框检测和人数识别，进行人数的判断，此处的识别方式可以用yolov5目标检测算法，使用yolov5算法对银行网点实际视频数据进行模型训练，得到的定制模型。使用yolov5算法对银行网点实际视频数据进行模型训练，得到的定制模型，也可以采用其他方法进行，只
要能够完成识别即可。
38.通过图像判断人数为1人时，触发单人进入加钞间违规信号，此处的判断是在一个时间周期内，比如识别进入人员5秒后进行判断，防止刚开始进入一人时候，后续人员还未进入这个时间点发生误判，控制器发送单人进入加钞间违规信号到外部接收端，此处的接收端为整体银行系统的智慧运营大屏，上面可以设置有提醒，也可以为相关人员的设备，如行长pad可以有违规提醒，以便于机构进行快速响应。后台报表也可以统计这种违规提醒。
39.通过图像判断大于1人时候，继续进行下一步判断，判断进入人员是否为加钞人员，如不是加钞人员，则生成非法人员信号，推送至外部接收端；此处的判断方式具体为通过摄像头实时抓取加钞人员的面部，并进行人脸特征提取和识别，当发现人脸识别身份与授权进入加钞间的加钞人员身份不符合时，触发非法人员进入违规，防止非法人员尾随。优选的，也可以通过人脸识别加上加钞人员工服辅助识别进行结合判断；即人脸+服装的综合识别来判断是否是合法的加钞人员，更加的保证识别的准确性，防止出现单纯的人脸误判的情况；
40.本实施例设定的加钞人员人为2人，根据现有的业务要求，业务需求是要保证有2名加钞人员，这样保证相互之间有所制约，防止风险发生，而且两个人之间要相互监督。根据实际的需求和规章制度，此处的设定人员数量可以发生变化，如以后要求3人加钞，可以设定为3。
41.判断都为加钞人员时，继续进行距离判断，如加钞人员之间距离不在设定的阈值范围之内，则生成加钞人员加钞距离违规信号，推送至外部接收端；
42.此处的距离判断，我们的方法是加钞柜周围画一个矩形框，矩形框内人为标定了一个双人操作安全区域，安全区域存在的意义是，为了定义距离是否过远的一个参考位置阈值区域，若该区域内只有1人，则说明两人距离过远，超出阈值。单纯的安全框会有个局限性，就是如果摄像头角度发生如图2这种情况时，就不好判断是否距离过远，所以需要2个角度的摄像头结合判断，本方案采用的是双人距离判断的关于双摄像头联合判断：通过摄像头a和摄像头b同时判断，有效解决加钞人员之间遮挡问题导致的距离无法判断问题。例如图2和图3中的加钞人员1和2的占位，虽然摄像头a中无法判断距离，但是摄像头b可以有效判断双人距离。
43.具体的每个人的判断方式是采用以人体框底部中心点，也就是脚的位置。确定每个人的坐标，通过如图4所述的坐标系构建，通过目标检测算法yolov5训练了人体检测模型，然后根据检测出来的人体框底部的中心位置作为摄像机坐标的位置，然后通过摄像机坐标位置，可以得到世界坐标位置。通过逆透视变换，分别计算每个摄像头下世界坐标系，基于摄像头坐标转换为世界坐标算法，可分别测算出2人在世界坐标下坐标和相对距离。然后计算平面位置距离。这个过程就是相机坐标系转换为世界坐标系的过程。
44.通过上述判断结果，当检测到加钞间发生，单人进入加钞间、双人进入但单人加钞行为、双人进入但双人距离过远、非法身份进入违规行为时，会生成相应信号，推送至后台或管理平台，进行消息推送和报警提示。如及时上报网点运营管理平台，并对大堂主任管理终端进行违规消息推送。
45.基于上述方法，我们针对现有技术只是检测是否双人进入，但是没有对进入后的行为进行进一步分析。例如：双人进入后，单人加钞违规。双人进入，但是非法人员尾随的情
况。本方案基于针对双人进入后，单人加钞违规进行进一步有效识别，包括通过双摄像头联合判断双人加钞距离、通过标定有效双人安全区域来约束双人安全加钞行为等。另外，对非法人员尾随进入后进行有效识别。识别更加精确和智能，特别适用于银行加钞的智能识别提示场景。
46.在上文中结合具体的示例性实施例详细描述了本发明。但是，应当理解，可在不脱离由所附权利要求限定的本发明的范围的情况下进行各种修改和变型。详细的描述和附图应仅被认为是说明性的，而不是限制性的，如果存在任何这样的修改和变型，那么它们都将落入在此描述的本发明的范围内。此外，背景技术旨在为了说明本技术的研发现状和意义，并不旨在限制本发明或本技术和本发明的应用领域。

技术特征：

1.一种加钞间违规操作智能监测方法，步骤如下：采集加钞间多个方向图像数据；判断人员数量，当人员数量为1时，发出单人进入加钞间违规信号至外部接收端响应；当人员数量大于1时，继续进行下一步判断；判断进入人员是否为加钞人员，如不是加钞人员，则生成非法人员信号，推送至外部接收端响应；如是加钞人员，继续进行距离判断；如加钞人员之间距离不在设定的阈值范围之内，则生成加钞人员加钞距离违规信号，推送至外部接收端。2.根据权利要求1所述的一种加钞间违规操作智能监测方法，其特征在于：加钞间多个方向图像数据为至少2个方向的图像采集装置采集的图像数据。3.根据权利要求2所述的一种加钞间违规操作智能监测方法，其特征在于：2个方向的图像采集装置采集方向垂直设置。4.根据权利要求3所述的一种加钞间违规操作智能监测方法，其特征在于：其中一个方向的图像采集方向为加钞柜朝向房间门的方向。5.根据权利要求1所述的一种加钞间违规操作智能监测方法，其特征在于：通过抓取加钞人员的图像数据，并进行图像特征提取和识别，识别数据与授权进入加钞间的加钞人员身份数据比对，判断是否为非法人员。6.根据权利要求1所述的一种加钞间违规操作智能监测方法，其特征在于：加钞人员之间距离判断通过预先设定操作安全区域，判断加钞人员是否都在区域内，加钞人员都在范围内，则判定为正常。7.根据权利要求6所述的一种加钞间违规操作智能监测方法，其特征在于：所述加钞人员位置通过设定人体框底部中心点作为对应坐标，然后根据检测出来的人体框底部的中心位置作为摄像机坐标的位置，通过摄像机坐标位置转换为到世界坐标位置，获得加钞人员世界坐标下坐标和相对距离。8.一种加钞间违规操作智能监测装置，其特征在于，包括至少一个设置在加钞柜一侧的图像采集装置，还包括至少一个设置在加钞柜侧方向上的图像采集装置，图像采集装置用于采集进入采集区域的图像，图像采集装置与控制器连接，控制器通过权利要求1-7任一所述的监测方法进行加钞间违规操作智能监测。9.根据权利要求8所述的一种加钞间违规操作智能监测装置，其特征在于，还包括外部提示和报警装置，外部提示和报警装置接收控制器发出的违规信号，做出提示并报警。10.根据权利要求8所述的一种加钞间违规操作智能监测装置，其特征在于，还包括运营管理平台，通过运营管理平台对数据进行存储和处理。

技术总结

本发明公开了一种加钞间违规操作智能监测方法及装置，属于智能监测技术领域。针对现有技术中加钞间违规操作监测的实时性和准确性较低的问题，本发明提供一种加钞间违规操作智能监测方法及装置，采集加钞间多个方向图像数据；判断人员数量，判断进入人员是否为加钞人员，继续进行距离判断；通过判断生成加钞人员加钞违规信号，推送至外部接收端。可以实现对加钞间操作的实时监测以及监测的准确性，从而可以及时对违规行为进行预警制止，进而提高了银行网点加钞间的安全性，进一步提高了银行网点的运营管理效率。网点的运营管理效率。网点的运营管理效率。