人脸识别行业分析报告
图像识别主要用到了两个第三方的框架:OpenCV和TesseractOCR,OpenCV用来做图像处理,定位到身份证号码的区域,TesseractOCR则是对定位到的区域内的内容进行识别。
国内国外的人脸识别技术大多数在开源OPENCV等开源库上进行新规则添加,公司之间的识别正确率差异仅仅在小数点上,提升意义不大,最关键的强化方向是商业适用性,使用表现的准确率和高可用性。人脸识别技术的比较维度很多,比如图像比对级的1:1,1:N,N:N;衡量的标准和维度都不同。
OpenCV 是一个开源的计算机视觉和机器学习库。它包含成千上万优化过的算法,为各种计算机视觉应用提供了一个通用工具包。根据这个项目的关于页面,OpenCV 已被广泛运用在各种项目上,从谷歌街景的图片拼接,到交互艺术展览的技术实现中,都有 OpenCV 的身影,它已支持如 OpenCL 和 OpenGL 等现代技术,也支持如 iOS 和 Android 等平台。
OpenCV 是轻量级而且高效——由一系列 C 函数和少量 C++ 类构成,同时提供了Python、Ruby、MATLAB等语言的接口,实现了图像处理和计算机视觉方面的很多通用算法。 OpenCV用C++语言编写,它的主要接口也是C++语言,但是依然保留了大量的C语言接口。该库也有大量的Python, Java and MATLAB/OCTAVE (版本2.5)的接口。
OpenCV自带例子中,提供了boost,mlp,knearest,nbayes,svm,rtrees这些机器学习方法,进行训练和识别。
而新兴公司如雨后春笋,2011年到2016年成立的人脸识别公司超过30家,其中大部分集中在2012到2015年,这只是人脸识别热潮的一个缩影。其背后原因是计算机视觉技术背后的通用性,做人脸识别的公司往往也可以做图像识别,反过来也是一样的道理。
2014年后人脸识别才开始爆发,都是成立5年的企业。人脸识别在此前,精准率太低,低于人眼,很难应用到现实领域。
从2014年起,香港中文大学教授汤晓鸥以及其学生陆超超、孙祎,连续开发了“高斯脸”,以及基于深度学习的DeepID人脸算法,识别率首次突破人眼极限,成为行业分水岭。
2016年,中国市场的人脸识别团队暴增,全国新成立近70家人脸识别公司。在这样的环境之下,即便你有好的技术,好的产品,还得有办法脱颖而出。
2017往后的两年将进入洗牌期,如今项目中POC测试常见的只有区区十几家,而第一梯队只有四家。那些消失的团队,谁说一定没有技术好的呢?现在,李飞飞、孙剑、吴恩达,大牛们浩浩荡荡的一头扎进计算机视觉业界, 前有飞瑞斯、瑞为、科葩等老牌公司,后有云天励飞、中科视拓等新星。这个行业,正在以正在用这种疯狂的站队方式,在中国猛烈生长。
人脸识别行业在国内发展迅速,汉王、中控等老牌厂商掌控着传统的静态人脸识别加指纹考勤机,依靠价格固守着商用市场。如今不论是创业者还是投资人,都开始顿悟,计算机视觉是一个“很难不挣钱”的生意,区别只在于落地时间早晚。
目前人脸识别设备技术含量很低,产品简单,但人脸识别算法本身比较有技术含量。不管是做2B还是主打2C,每家公司都有自己的一套“核心算法”,像现在许多小型集成商,可以山寨一些产品外观和结构,但产品核心算法却无法山寨,只能加入国内外其它企业的人脸识别技术。
现在市场很混乱,不过小型厂商主要还是山寨移动端设备,如平板、移动考勤等,想做动态识别还很困难。国内人脸识别厂商在核心算法上拥有自主知识产权的极少,大部分都是使用第三方技术,如OpenCV、其它公司的收费SDK;从国内看的话,这样的小型厂家有一两百家,但拥有核心技术的厂商在国内不到10家,能大规模进行系统集成定制的也就只有四家左右。
在目前人脸识别技术不够完全成熟的情况下,其应用领域却已非常广泛,涉及到刑侦、安保、电子信息安全、互联网金融、智能硬件等在内的多个领域,按其功能来分的话,我们可以大概把它们分为如下几类:
电子身份证:将所有人的面部信息扫描归档,建立电子信息身份档案库,这个身份证将是你在网络世界通行的凭证,虽然此项应用目前还未达到应用实施阶段,但这也是人脸识别技术最大的潜力所在。
电子密码:手机、电脑、网站、app或者其他一切需要密码来识别或者保护你的身份的地方,人脸识别都可以作为一种更安全和更简便的方式来应用,比如现在已经有电脑采用人脸识别开机功能。
考勤:上班不再是“打卡”,而是“刷脸”,想代同事打个卡就变成了不可能。如果这样的考勤系统真的普及开来,上班族恐怕高兴不起来了啊!
门禁:住宅区、写字楼、政府、企业、或其他非闲杂人等不得进入的区域,人脸识别可以作为一种更精确,也更快速的方式来保障安全,原来的密码门或者刷卡初入就显得特别繁琐而笨重了!
支付:这个就是与互联网金融行业的结合了,目前这一领域也是非常的热火,马云已经在蚂蚁花呗上推出了“扫脸支付”,京东钱包也是“扫脸”解锁。相比密码或者扫码支付,安全性上显然更胜一筹。
拍照:现在相机已经具有的自动对焦和识别人脸功能,就是人脸识别技术的一种应用,当然照相时的对准人脸功能,对识别复杂性的要求非常低,只需要知道哪是“人脸”就行,至于是谁的脸则不需要判断。还有美颜相机等也是一些应用举例,精确的人脸识别在查找某人或者定制妆容方面都还是大有可为。
刑侦:公安系统追捕罪犯的应用,科幻片内,某个人的照片被放在海量的信息库里对比,瞬间找出身份信息的场景,将不再是想象。
目前国内外各大互联网科技公司在人脸是被这一块领域均有涉猎,且各自探索程度深浅不一。无论是从国外的Google、微软、Facebook,还是国内的百度、腾讯,都各自有各自的人脸识别团队。
Google:2011年07月 谷歌收购人脸识别软件公司PittPatt
Facebook:2012年6月 Facebook收购以色列脸部识别公司Face.com
微软:2012年6月 微软亚洲研究院发布人脸检测算法,面部识别系统
网易:2012年5月,网易人脸识别系统全国公测,用于邮箱登陆
腾讯:2012年下半年,优图项目组组建 ,腾讯优图团队隶属于腾讯社交网络事业群,基于整个腾讯的社交网络平台,为 QQ 空间、腾讯地图、腾讯游戏、等 50 多款产品提供图像技术支持。每天 QQ 空间有 2 亿上传图片的活跃用户,团队单日最多处理照片达 6 亿张,累计已经分析处理了超过 300 亿张照片。
百度:2012年12月 百度推出人脸识别,基于图像的全网人脸搜索
目前,国内市场上公司有几十家,技术领先者有SenseTime(商汤科技)、Face++ (旷视科技)、Linkface 、依图科技、格灵深瞳、云从科技等,这些公司对外都称识别准确率高达99.5%以上;
Face++, 2014年,获阿里巴巴旗下蚂蚁金服投资,主攻金融和监控两大行业,有子公司旷视智安;团队成员除了几名来自清华校友外,还有来自美国哥伦比亚大学、英国牛津大学和美国南加州大学的科研及开发人员,截至目前员工仅有100余人。
并且在金融、安防、零售领域分别开始了商业化探索成功发育出Face++Financial,Face++Security,Face++BI等垂直人脸验证解决方案,主要将人脸识别应用在互联网产品上,自己做研发,在美图秀秀、淘宝等互联网领域得到良好的应用,在金融领域的市场一直占据沙发前排阵营;他们一直关心的4个计算机视觉核心问题(图像分类、物体检测、语义分割和序列学习),还有核心网络训练问题、底层架构问题、深度学习平台问题,也是一直处于研究ing中。
曾经被联想、阿里投资,在2013年拿到百万元A轮投资,2014年获得2200万元B轮融资,2016年获得上亿元C轮融资,最后选择通过计算机视觉技术与NLP技术的结合,制造出能“识别万物”的智能机器人,提供硬件模组,里面内置他们家的算法。目前正在准备启动IPO的步伐,VIE架构让他们得以绕过A股,不用达到连续三年盈利的标准实现快速上市。
SenseTime(商汤科技),获IDG资本投资,主攻金融、移动互联网、安防监控三大行业;由香港中文大学的汤晓欧创建,“商汤”中的汤指的就是汤晓欧本人,汤晓鸥及其研究团队所开发的DeepID算法率先将深度学习应用到人脸识别上,在技术指标上实现了新的突破。主要案例是围绕各个美化软件与直播平台制作人脸贴图,重点强化了人脸识别的关键点检测及跟踪技术。
团队有300多号,也从当当初toC转向toB领域;成立于2014年的商汤科技选择另辟蹊径,选择用“四大美女”这个话题让人们躁动起来,到最后四大美女走了三个;商汤的网络都是自己设计的,这样对于深度学习网络的掌控力就会更强,提供SaaS服务的同时,可以通过SaaS把背后的数据拿到,再进行更多更细致的分析再次提升服务质量。
Linkface,由四位高颜值的女性创立。据人脸检测评测平台 FDDB 数据,Linkface 的人脸检测算法击败百度、腾讯,位列第一;
依图科技,最早获得真格基金100万美元天使投资,2014年完成红杉资本和高榕资本的A轮融资。2012年,朱珑创办了依图科技,在全国多地公安系统耕耘颇深,主攻公安领域,2015年后转型智能医疗领域;
云从科技:2015年4月,周曦拿到战略投资成立云从科技,同年针对金融和银行业推出了40多种解决方案,包含从算法、产品、销售、售后的全产业链打造,针对农行、建行、交行、中行及多地公安提供定制化服务。团队成员除了来自中科大的校友外,还来自中国科学院各大研究所、UIUC、IBM、NEC、MicroSoft等全球顶尖学府及研究机构;
截止2016年11月,成立一年半,研发团队扩展为200余名,为全国最大的人脸识别研发团队;核心产品是人脸识别系统及IBIS集成生物识别平台,还具备3D模型、红外活体、静默活体等技术,可根据场景需求自由调节。选择连接硬件、开发与技术,属于全产业链模式,因为人脸识别系统多数情况下需要深度定制,只有这样,才能在客户提出需求的情况下迅速反馈,修改,统一用户体验。先后由完成了天使轮和A轮融资,其中天使轮融资由佳都集团与杰翱资本联合注资6000万元。
格灵深瞳:推出来Foveacam深瞳人眼摄像机,主要应用场景是高速路口的车辆、行人抓拍,当然人脸识别也是格林深瞳没放松的安防领域,号称是98%的识别准确率。这家公司不差钱,深耕技术执着于安防领域;虽然人事上变动(2017年年前原来的CEO何搏飞离职,但还将继续担任格灵深瞳的高级顾问,他本人想赶一赶消费升级的末班车。CEO一职由联合创始人赵勇担任,原百度深度学习研究院的资深科学家邓亚峰先生担任CTO,同时引入国内安防圈一位重量级的人物担任公司总裁。)
值得注意的是,Face++, SenseTime, Linkface的首席科学家,都来自于香港中文大学汤晓鸥教授的多媒体实验室,俨然已成为人脸识别技术的“黄埔军校”。大部分人脸识别公司关注都在应用层,而商汤还关注到算法层面。如果你对商汤不熟悉,小咖秀、Faceu、熊猫直播这些APP里提供的各种面部AR特效,就是商汤提供的技术支持,只是这些商汤在宣传上很少提到。
国内的人脸识别企业:
佳都科技、科大讯飞、铂亚信息、中科奥森、 安捷天盾科技、 银晨科技、 骏聿科技、 飞瑞斯科技、 科葩信息技术、灏泷科技(上海)、 赛为智能、 智慧眼科技、 像素数据技术、清大维森科技、 瑞为信息技术、苏慧信息技狮、众智益华科技、 瑞奥风软件科技、千搜科技、威富安防、可信网络科技、一登科技。
国外的人脸识别企业:
1 美国Identix公司、2 美国Bioscrypt公司、3 德国Cognitec Systems公司、4 西班牙Herta Security公司、5 日本NEC公司、6 日本Softwise公司
人脸识别的技术发展方向:
结合三维信息:二维和三维信息融合使特征更加鲁棒
多特征融合:单一特征难以应对复杂的光照和姿态变化
大规模人脸比对:面向海量数据的人脸比对与搜索
深度学习:在大数据条件下充分发挥深度神经网络强大的学习能力
人脸识别的算法能力:拒识率、误识率、通过率,准确率
银行业务体系模式:
要想攻破银行体系就得知道银行规则:银行有一套2小时、4小时、8小时原则,即系统宕机2小时,该行就要到当地人民银行喝茶;4小时没解决,就得交报告;8小时还没解决,银行的评级就会下降,甚至关门。出于金融安全与稳定的考虑,银行一般不会轻易把技术业务交给第三方公司,而一旦确认合作方,便不会轻易改变。所以,银行在选择第三方公司时,会让具备相关资质的公司聚集在一起竞标,以选取最佳合作者。
安防业务运营体系:
尽管并不否认人工智能技术对安防效果的显著提升,但安防市场一直是以销售为强导向的线下市场,国内长期被海康威视、大华股份、东方网力三家整体方案和硬件商垄断,创业企业很难颠覆。
顾泽安防在人脸识别技术上有更多需要克服的问题。公安调取的图像和视频,一般是闭路电视这种画面清晰度不高的器材监控拍摄的,而影响人脸识别正确率的因素非常多,比如行人戴墨镜、口罩,或者抽烟时被烟雾遮挡,光线较暗或光照过度等,另外,对人脸的年月变化识别最困难。将一个人现在的外貌,与多年前拍的身份证照片做对比,难度很大。“身份证照片是5年前拍的还好,虽然有些人外貌变化也比较大,要对比10年、20年前的身份证照片就更难了。
这就要基于大数据,开发出“双层异构深度神经网络”这一针对性技术,经过大量的深度学习、总结与分析;目前绝大部分公安机关实际上还没有参与采购人脸识别技术,市场算是刚起来,场景很复杂,想要一时半会拿下市场很难。比如在交通道路管理和犯罪追踪的应用场景下,我们在看很多法制节目中都能看到,侦查人员在查案时要反复查看上千卷影像资料。这就是问题所在,镜头拍下了车辆信息,但没有机器学习和深度学习的情况下依然要动用大量人力,还没法保证准确率。
人脸识别商业模式:
从盈利模式上看,提供人脸识别技术的公司,主要是两种收费方式,一种是收取一次性技术、软件购买费,一种是按技术使用次数收费。因为B端市场来说,客户的核心要求是,产品性能、服务好,对价格相对不敏感。 但C端市场,因为目前产品需要定制化,所以谈不上方便,而且成本必然下不去,性价比不可能高。
列举人脸识别在手机APP上的一些应用
1.美图秀秀邪恶大测试:识别面部表情,给出分数和评价
2.百度图片识图功能
3.百度魔图APP推出了“PK大咖”功能,用户只需要选取一张自己的大头照,就可以通过人脸识别技术跟明星进行PK,找到与你面部形象最为相似的明星大咖
4.百度钱包APP拍照付只是说当你想买一款商品,却不知道商品的具体信息,这时候就可以用到百度钱包的拍照付,拍一下就能搜索到商品,选择购买
5.支付宝APP人脸识别登录
6.iPhoto 在苹果的iPhoto中,同样提供了人脸识别功能,用户可以将图片中的人脸和人名相匹配,该功能通过脸部检测辨别照片中的人物,再通过脸部识别找到与之特征相符的拍摄对象,帮你找到想找的人,甚至是海量的照片库也不费吹灰之力
7.图图搜是先找到淘宝上的同款,然后拿到产品tag,接着根据tag、主颜色等信息进行二次查找。最基本的技术还是相同图像查找,当然也包含了商品主体识别。
人脸识别主要测属性对比:
在人脸识别属性返回功能以范围方面,较突出的是百度人脸识别与Face++,其次是云飞科技、科大讯飞、FaceCore。
人脸识别SDK
Face++ 致力于研发世界最好的人脸技术,提供免费的API和SDK供企业和开发者调用,更有灵活的定制化服务满足不同需求。已有多家公司使用Face++技术服务,完成包括人脸搜索、定位、识别、智能美化等功能。我们旨在为合作者提供完善的技术与维护服务。
百度媒体云人脸识别服务,依托百度业界领先的人脸识别算法,提供了人脸检测、五官定位、人脸属性检测等功能。媒体云人脸识别服务通过提供一系列HTTP Restful API及跨终端平台SDK,实现人脸检测、人脸识别等的诸项功能。
利用ReKognition提供的云端人脸识别API实现的一个简单人脸识别Demo,能够识别人脸的五官、人脸的大概年龄、是否戴眼镜、是否闭眼、性别等等功能。
暂不提供新用户注册
RecoFace人脸识别SDK是瑞为自主研发的人脸识别核心算法,包括人脸检测、人脸跟踪、人脸确认与人脸识别四大核心功能,无论是识别准确度还是识别速度均处于全球领先水平。
汉王科技凭借十几年扎根模式识别领域的底蕴,早在2003年,就瞄准人脸识别技术的国际前沿,积极开展人脸识别技术的潜心研究。目前已经拥有完全自主知识产权的“双目立体”人脸识别算法(Dual Sensor)。汉王云提供免费的人脸识别API和SDK供企业和开发者调用,汉王人脸识别技术广泛应用于智能安全、身份验证等领域,还可识别表情年龄性别,应用开发最具潜力。
科大讯飞联合香港中文大学汤晓鸥教授团队,共同推出世界领先的人脸识别技术,提供人脸验证、人脸检测、人脸关键点检测等功能,识别率高达99%。核心技术源自于学术界最新的深度学习方法及其相关研究,结合大量公开和独有的训练数据集,在超级计算机上学习并提取照片特征,实现高效准确的标定和识别,致力于提供便捷准确的人脸识别技术,为移动设备交互、摄像头应用等不同场景提供强有力的技术支持。
比对人脸特征每百万张照片人脸特征平均速度100毫秒以内,识别人脸特征速度在几十毫秒内。
人脸识别的安全性:
一、目前人脸识别常见攻击手段有什么?
1 、纸片翻拍,通过打印用户的照片进行攻击;
2、 屏幕翻拍,一些3D建模技术可以驱动用户的单张照片或视频做出系统要求的摇头、张嘴、眨眼等动作;
3、 用户戴面具;
二、如何应对人脸识别漏洞?
要更有效地应对上述的人脸识别漏洞,我们不妨采用腾讯优图多维活体监测模式。
腾讯优图的多维活体监测是什么?
即通过更加复杂的多数字随机唇语,捕捉人在说话过程中嘴部的细微变化,使得视频合成造假的难度很大;并加上语音图像同步检测、人脸纹理分析、面具检测、视频防翻拍等多维度防护手段;最后将所有这些手段进行交叉融合,实现移动端+后台的强力防护体系。
具体来说:
1、对于纸片翻拍,由于纸片上的人脸是静态的,利用随机数字唇语,让用户读数字,就可以很好的拦截;
2、对于屏幕翻拍,具有成本低,可以通过软件批量执行的特点,对于活体的挑战最大,这种攻击,仍然有很多线索可以利用:
a. 翻拍的视频一定会通过显示设备播放出来,显示设备存在一些和真人不同的图像特征
b.合成的视频与真人相比,会存在一些瑕疵
c.如果是直接拿到了用户的一段视频,其嘴型变化完全符合给定的随机数字的概率很低
以上这些,用大量数据就可以学习到伪造视频和真人视频之间的区别,加上各种方法的融合,就能将拦截成功率提高到非常高的水平。
3、对于用户戴面具,由于其攻破成本较高,现在还未出现实际case,我们也提前进行了研发布防,主要利用人说话时,面部会存在比较自然的微动,而面具则没有这样的规律来防范。
另外,在实际业务中,人脸识别只是作为其中一个环节,需要与账号、密码保护、基于大数据的风控等其他综合手段一起,保证流程的高度安全。
人脸识别技术正在快速发展之中,新技术的出现总可能会被不法分子所利用。腾讯优图也在关注技术对抗,通过业务持续积累的活体攻防实战经验,构筑活体检测的坚实壁垒,同时不断创新研发新的活体检测技术,为人脸识别保驾护航。
腾讯优图产品特征:
1. 产品优势
强大的人脸训练模型:立足于腾讯社交数据大平台收集的海量人脸训练集,成功标注的千万人脸数据。
方法最全:高维LBP、PCA、LDA 联合贝叶斯、度量学习、迁移学习、深度神经网络
技术最好: 优图独创Uface深度人脸模型,LFW评测以99.65%目前世界领先。
2. 人脸验证技术(1:1识别)
人脸识别技术可以计算出两张人脸照片的相似度,从而判断是否为同一人,即1:1身份验证。优图人脸识别通过传统方法和深度学习技术结合,以微众银行远程核身为基础,实际业务中,万分之一错误率下,通过率达到95%。
3. 人脸检索技术(1:N识别)
给定一张照片,和数据库中N个人脸进行对比,给出是否为其中某一个人,或者给出排序结果,即人脸检索。1:N用于用户不需要声明身份的场景。
4.技术指标
• FAR:False Accept Rate,错误接受率,指将身份不同的两张照片,判别为相同身份,越低越好
• FRR:False Reject Rate,错误拒绝率,指将身份相同的两张照片,判别为不同身份,越低越好
这两个指标有明确的物理意义,FAR决定了系统的安全性,FRR决定了系统的易用程度,在实际中,FAR对应的风险远远高于FRR,因此,生物识别系统中,会将FAR设置为一个非常低的范围,如万分之一甚至百万分之一,在FAR固定的条件下,FRR低于5%,这样的系统才有实用价值。
• 支持最小人脸尺寸64x64
• 人脸特征尺寸1-2KB
• 1:1人脸对比500ms
现在的人脸识别大数据作战平台,主要涉及到人脸识别技术、大数据、云计算等技术的应用。在未来,逐步加入成熟的图像识别(步态、服饰、动作、发型、车辆等)、声纹识别技术,并且随着摄像机硬件的功能越来越强,所谓的《激情速度七》中的“天眼”系统会越来越完善。
完善的“天眼”还需要强大的后台系统,这个系统可以控制包括公共交通、城市电力、电子监控、银行系统、警察系统等各方面,同时将所有联网信息进行收集和整合,记录下公民的医保号、医疗记录、犯罪记录、甚至上网阅览内容、输入习惯等,结合以大数据分析时时更新后台资料。
最后,“天眼”成功运行的关键在于整合物理空间(线下)和网络空间(线上)的多源多类型大规模数据,然而目前这些数据相对独立,形成所谓的“数据孤岛”,给技术的发展带来很大不便,可以考虑从国家层面上对各种数据资源统一管理和协调,为国家安全提供更强有力的保障。