(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210733725.6 (22)申请日 2022.06.24 (71)申请人 平安银行股份有限公司 地址 518000 广东省深圳市罗湖区深南 东 路5047号 (72)发明人 李骁　于欣璐　赖众程　常鹏　 高洪喜　冯晋飞　张莉　胡云飞　 苏杰　邓兆卉　王小红　黎利　 陈杭　 (74)专利代理 机构 深圳紫藤知识产权代理有限 公司 44570 专利代理师 汪阮磊 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/10(2022.01)G06V 40/16(2022.01) G06Q 40/02(2012.01) (54)发明名称 视频面签的异常检测方法、 装置、 电子设备 和介质 (57)摘要 本发明公开了一种视频面签的异常检测方 法、 装置、 电子设备和介质， 其方法包括： 提取视 频流中的用户图像序列； 所述用户图像序列为发 起借贷请求的客户侧的 图像序列； 对 所述用户图 像序列进行人体部位识别得到识别结果； 根据所 述识别结果判断视频面签过程中， 客户侧的视频 画面的入镜人数是否为至少两个； 若入镜人数为 至少两个， 发出提示以告知面签过程中有第三方 用户入镜， 并暂停视频面签。 本发明有效监管避 免第三人提示这种不合规行为的出现， 降低借贷 请求审核过程的人力人本的前提下， 减少风险借 贷事件的概率并提高面签异常检测效率及准确 率。 权利要求书2页 说明书14页 附图5页 CN 115082827 A 2022.09.20 CN 115082827 A 1.一种视频面签的异常检测方法， 其特 征在于， 包括： 提取视频流中的用户图像序列； 所述用户图像序列为发起借贷请求的客户侧的图像序 列； 对所述用户图像序列进行 人体部位识别得到识别结果； 根据所述识别结果判断视频面签过程中， 客户侧的视频画面的入镜人数是否为至少两 个； 若入镜人数为至少两个， 发出提示以告知面签过程中有第三方用户入镜， 并暂停视频 面签。 2.根据权利要求1所述的视频面签的异常检测方法， 其特征在于， 所述提取视频流中的 用户图像序列之前包括 步骤： 获取客户的借贷请求； 所述借贷请求包括所述 客户的身份信息； 若根据所述身份信 息验证所述客户为首次向目标金融服务机构发起借贷， 向所述客户 发起所述视频面签以获取 所述视频流。 3.根据权利要求1所述的视频面签的异常检测方法， 其特征在于， 所述根据所述识别结 果判断视频面签过程中， 客户侧的视频画面的入镜人 数是否为至少两个包括 步骤： 根据所述识别结果统计所述 客户侧的视频画面中不同人员的人脸数量； 若所述人脸数量超过两个则确定所述入镜人 数为至少两个； 若所述人脸数量小于 两个时发出提 示或进行身体 检测。 4.根据权利要求3所述的视频面签的异常检测方法， 其特征在于， 所述若所述人脸数量 小于两个时发出提 示或进行身体 检测包括 步骤： 若所述人脸数量为一个且入镜人脸不是客户本人时， 发出提示以告知面签过程中有他 人代答， 并暂停视频面签； 若所述人脸数量为一个且入镜人脸是客户本人时， 对所述用户图像序列进行身体检 测， 统计得到所述 客户侧的视频画面中不同人员的身体数量； 若所述身体数量超过至少两个则确定所述入镜人 数为至少两个。 5.根据权利要求3所述的视频面签的异常检测方法， 其特征在于， 所述对所述用户图像 序列进行人脸检测和跟踪， 统计得到所述客户侧的视频画面中不同人员的人脸数量包括步 骤： 将所述用户图像序列输入人脸检测模型输出人脸检测框， 并输出各人脸检测框的第 一 置信度； 所述第一置信度用于表示所述人脸检测框中存在人脸的概 率； 统计所述第 一置信度超过第 一预设阈值， 且在所述预设距离 阈值范围内的人脸检测框 的个数得到所述人脸数量。 6.根据权利要求4所述的视频面签的异常检测方法， 其特征在于， 所述对所述用户图像 序列进行身体 检测， 统计得到所述 客户侧的视频画面中不同人员的身体数量包括 步骤： 将所述用户图像序列输入人体检测模型输出人体检测框， 并输出各人体检测框的第 二 置信度； 所述第二置信度用于表示所述人体 检测框中存在除人脸以外身体部位的概 率； 统计所述第二置信度超过第二预设阈值的人体 检测框的个数 得到所述身体数量。 7.根据权利要求6所述的视频面签的异常检测方法， 其特 征在于， 还 包括步骤： 提取所述人体 检测框所对应目标追踪子图中的身体特 征；权　利　要　求　书 1/2 页 2 CN 115082827 A 2根据所述身体特 征对所述用户图像序列中的部分身体进行追踪； 当所述用户图像序列中出现新的人体检测框时， 将所述新的人体检测框与已有人体检 测框中的身体特 征进行相似度比较； 若查找出相似度达到预设相似阈值的目标身体框时， 将所述新的人体检测框与所述目 标身体框相关联， 并删除新的人体 检测框对应的身体编号。 8.一种视频面签的异常检测装置， 其特 征在于， 包括： 图像提取模块， 用于提取视频流中的用户图像序列； 所述用户图像序列为发起借贷请 求的客户侧的图像序列； 人体识别模块， 用于对所述用户图像序列进行人体部位识别， 根据识别结果判断视频 面签过程中客户侧的视频画面的入镜人 数是否为至少两个； 异常处理模块， 用于若入镜人数为至少两个， 发出提示以告知面签过程中有第三方用 户入镜， 并暂停视频面签。 9.一种电子设备， 其特征在于， 包括处理器、 存储器以及存储在所述存储器中且被配置 为由所述处理器执行 的计算机程序， 所述存储器与所述处理器耦接， 且所述处理器执行所 述计算机程序时， 实现如权利要求1至7任一项所述的图像拼接方法中的步骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质存储有计算机程 序， 其中， 在所述计算机程序运行时控制所述计算机可读存储介质所在的设备执行如权利 要求1至7任一项所述的图像拼接方法中的步骤。权　利　要　求　书 2/2 页 3 CN 115082827 A 3