3.15曝光大品牌"偷脸"？能识别心情的人脸识别专利公开！

在中央电视台315晚会上，不法商家非法获取消费者人脸信息，并肆意滥用的行为被曝光。

科勒卫浴、宝马、MaxMara等许多门店中安装具有人脸识别功能的摄像头，抓取人脸数据，在后台生成人脸ID。记录信息包括性别、年龄、肤色，甚至顾客当时的心情都能识别。连戴口罩的情况下，准确率都能达到80%-85%。

利用这一技术，门店之间可以做到“梦幻联动”：比如，B店来了一个顾客，店内系统就会收到提示，这位顾客也去过A店，然后B店就知道如何接待，如何报价，就会提前有一个心理准备。

你的脸是如何被“偷走”的?背后专利公开

公开资料显示，苏州万店掌网络科技有限公司2014年成立，目前平台目前拥有的人脸数据量已经上亿。检索分析，该公司已经申请了数十项专利，包括发明、实用新型和外观设计专利。

2018年4月12日，该公司申请了“人脸识别芯片、方法和相机”发明专利。采用双核架构，人脸识别的效率加快而且功耗降低。

2019年6月26日，该公司又申请了“人脸识别方法及人脸识别摄像机”、“提高无感人脸识别率的方法”两项发明专利。

“人脸识别方法及人脸识别摄像机”专利文件显示，首先通过前端图像传感器采集图像数据，将图像数据实时地送给协处理器进行特征提取，提取出人脸的轮廓、人脸所在的位置坐标、人脸的旋转角度。同时利用分析技术，辨识出人的性别、年龄、和特征值，再将特征值与人脸库中的特征值进行比对就可以识别出该人脸的身份了，也可以将新的特征值加入人脸库，再次捕捉到该人脸，识别该人身份。

“提高无感人脸识别率的方法”专利文件显示，接收设备抓拍到图片，图片带上设备认定的人脸id，只要设备给的人脸id一样，无论照片光照，角度差异多大;认定成同一个人。其中，当一个人进入画面后，设备可以跟踪人脸;收到设备照片后，与这个设备之前收到的3张照片做对比，相似度超过75%即判定为同一个人;拿到照片后去人脸库中搜索，如果搜到相似度超过80%的，表示已识别到具体的人。

该设备一天人脸抓拍数据有30万张左右，通过上述阶段二，一天可以纠正8万张左右识别错误的照片，通过上述阶段三，一天可以合并4000个左右人脸。

2019年7月8日，该公司申请了“基于边缘计算技术的精准客群分析方法”发明专利，本发明首先在硬件端实现了视频图像解析、目标检测跟踪(一台设备同一画面最多支持10张人脸检测跟踪)、亮度补偿可调节、人脸特征提取等，使得网络带宽消耗减少，通行效率显著提高，能支持更高的并发，对实时性要求较高和批次客流较大的行业有明显帮助。

检测不合格的照片保存记录，不做业务处理;检测合格的照片再进行人脸比对。根据比对结果确定faceid，同时和该faceid上一次到店的时间进行比较，如果时间相差不超过去重时间，认为是同一次到访，不重新记录客流;反之将符合要求的数据(faceid、性别、年龄、心情等)更新到客流表中，实现客流去重，达到精准统计。

3.15晚会曝光的悠络客隶属于上海悠络客电子科技股份有限公司，该公司成立于2009年。

2020年1月11日，该公司申请了“基于弱监督的人脸年龄自动估计方法”发明专利。

本发明依靠年龄段弱标签可以自动训练强分类具体年龄模型，该模型对一张未标注的图片自动估计具体年龄，减少了对人工精确标记的依赖。并且该算法从弱分类年龄段到强分类具体年龄的计算非常简单。

2020年12月7日，该公司申请了“一种基于人脸人形的精准客流统计系统、方法、及其装置”发明专利，该专利通过分析人形的轨迹及其人体姿态，判断人员的是否进店，是否过店;对于进店的人形进行抓拍;通过店员的人体重识别;去除店门口进过抓拍的人脸。

具体步骤如下：第一步：同时检测视频中人脸和人体，然后对人体检测做人体姿态分析，把人脸和人形进行关联;有效解决人形框内多个人脸框的人脸与人形的准确匹配;同一个人的轨迹号personID关联与人相关的所以人脸轨迹号faceID和人形轨迹号bodyID;第二步：通过分析人形的轨迹及其人体姿态，判断人员的是否进店，是否过店;对于进店的人形进行抓拍;通过店员的人体重识别;去除店门口进过抓拍的人脸;第三步：对于抓拍到人脸和人形数据人脸识别，人体识别;剔除店员，一段时间内重复进店人员的去重。

2020年12月8日，该公司申请了“一种人脸和口罩识别的方法”发明专利，本发明对戴口罩时人脸的不同姿态做了细分类，提升了判断准确率，与不做细分类的判断比较，96%提升到了99%。本发明提供一种自动从正常的人脸生成戴口罩人脸的算法，大大节省了额外收集戴口罩数据并标注的精力和资源。训练好的MTCNN对戴口罩的人脸同样有98%的检出率。

信息安全一直是痛点

今年315晚会曝光的问题，在“消费金融”领域早就曾经上演。

2019年315晚会曾曝光高科技灰色产业链，指出萨摩耶金服借用“探针盒子”违法收集商场顾客个人信息，后者随即宣布停止IPO进程。金融机构违法收集用户信息的现象得到重视，网信办、工信部等部门联合发布《关于开展APP违法违规收集使用个人信息专项治理的公告》，开启全国大范围APP违法违规收集用户信息的专项治理。其中，大数据风控公司得到重点监管，部分企业使用python抓取用户信息，向外借用高科技外衣掩盖违法事实，助长暴力催收及套路贷，这种现象逐渐得到遏制。

去年，美期分期、九秒贷等50多款金融APP被315晚会曝光内含违规第三方SDK，导致用户除手机号码、设备信息外，短信信息、通讯录、定位等隐私信息也落入机构手中。行业关注下，众多金融APP皆被曝出隐私协议中存在超纲规定，其中“收集与业务无关的个人信息”成为普遍问题。

2020年1月，国家市场监管总局及国家标管委员会曾联合发布《信息安全技术移动互联网应用程序(APP)收集个人信息基本规范》最新草案，其中第四条规定：APP运营者不能收集与服务无关的个人信息。

近年来，消费金融行业迎来严监管，行业、官方、消费者共同推动下，信息泄露问题得到缓解，但仍不可小觑。在黑猫投诉网站上，搜索“贷款”“个人信息”等关键字眼，仍有5000多份投诉，其中大多数皆指向“盗用个人信息贷款”“暴力催收”等问题。

“人脸识别”成为新方向

我国已逐步迈入高度信息化社会，数字化过程中的野蛮时代已过。除APP窃取用户信息等问题，今年315晚会对于“人脸识别”技术滥用的批判，为消费金融行业进一步治理和防范个人信息泄露问题提供了新方向。

“人脸识别”热起源于2015，应用“人脸识别”放款的微众银行开业，马云展示“刷脸支付”，互联网金融的火爆推动此项技术飞速发展，走向落地。

自2017年起，捷信消费金融、马上消费金融等持牌消金纷纷试水人脸识别，技术升级之下审批流程得到便利化，风控难度降低。借助人脸识别，借款人通过转头、眨眼等简单动作便可完成身份验证，简化流程的同时增加信息准确性及可靠性，杜绝身份盗用风险。此外，“远程人脸识别+身份证验证”的方式还解决了互联网金融行业依赖传统线下面签的痛点。

如今，人脸识别逐渐成为互联网贷款机构的标配。而新技术往往是一柄双刃剑，技术应用曾大大降低金融欺诈风险，随着科技发展下技术门槛降低，该技术遭到黑产瞄准后，更多新问题纷纷涌现。此前，消费金融治理个人信息泄露问题主要为规范行业自身，面对人脸识别技术滥用，此次预防显然更应该“对外”抓起。

新网银行业务安全部总经理贾坤曾表示，当下黑产渗入消费信贷申请流程每个环节，其中在人脸识别环节，黑产通过诸多“换脸”软件活体模拟以及视频攻击等手段进行金融欺诈。2018年下半年，某家持牌消金曾发现100多件活体模拟视频伪冒借贷案件。

国家金融与发展实验室曾发布《2019中国消费金融发展报告》，指出我国消费金融仍有5年以上高速增长期。除去简化申请流程、升级展业方式等显而易见的优势，“人脸识别”技术还能为金融带来精确的用户数据，实现征信实时监测、精准营销等市场想象，提升用户服务体验，降低运营成本，最终打开巨大市场。

新技术为行业带来的优化不可忽视，面对技术滥用，更应想办法应对。如何识别“盗用人脸”伪冒借贷，成为当下消费金融行业应该思考的问题。