• Home
  • Blog
  • News
  • ULSee将AR+脸部跟踪技术运用于智能终端

ULSee将AR+脸部跟踪技术运用于智能终端

Line / 騰訊 / 京東身後的超過10億人次使用的脸部跟踪技术智能公司

 

——ULSeeAR+脸部跟踪技术运用于智能终端

 

人生有多少个十年?”不知不觉的,iPhone 这改变人类文明发展的产品也陪伴了我们十年之久, 2017年末,号称“开启智慧手机下一个10年的”iPhone X在加州总部Apple Park举行新品发布会上,最受瞩目的iPhone X手机的演示过程中,苹果公司软件工程资深副总裁克雷格·费代里吉第一次展示其人脸识别功能“FaceID”居然没成功,虽然这次小小的 “突发事件”把苹果公司的股价“吓了一跳”,从163美元高点跌至159美元,但发布会后,所有科技、金融媒体、投资行业分析报告无不以“刷脸时代正式来临”作为各类开箱文的标题。

人脸验证  / AR自拍 / 实时动画表情

全球超过10亿人使用的手机上,都有我们开发的东西。ULSee作为国内较早从事计算机视觉领域软件开发,并将人脸识别与跟踪技术运用在AR领域的人工智能公司,愿景是让每一台设备终端都拥有慧眼。自2014成立至今,从未停止过对技术和产品的精益求精,形成了从图像增强,目标检测、跟踪、识别,到3D建模和渲染的完整技术体系,并将我们的方案全面应用在智慧安防、高级辅助驾驶、动态娱乐、智能手机、新零售、智慧金融、机器人等多个垂直领域,囊括了如Chanel, Synsam, 京东、Uniqlo、德国大众、德州仪器、Softbank Robotics PICC、腾讯、华为、传音、LineDisneyUnityFacerig等众多国际一线品牌客户。全球超过10亿人使用的手机上,都有我们开发的东西。

早在2014ULSee就与Holotech Studio 旗下的FaceRig合作,推出了一款制作精良的面部捕捉软件。不需要在面部贴标定点,仅仅以摄像头为跟踪设备捕捉用户脸部动作并转化为数据套用在其他动画模型上,可以用于网络聊天、录制视频甚至游戏等等。

全球奢侈品大牌拥抱AR技术,以获竞争优势地位。ULsee凭借其全球领先的AR+脸部(肢体)跟踪技术为CHANEL、欧洲第一眼镜品牌Synsam、全球最大化妆品牌丝芙兰(Sephora等提供产品展示终端的“全新模式”。

既然提到在AR领域的应用,另一个重磅新闻就是:国内电商巨头——京东与ULSee联手打造了AR试装功能,将高冷酷炫的人工智能技术带到了各路萌妹子的身边。 

从此以后,爱美的女孩们再也不必千里迢迢赶赴专柜,对着几百种“深红”、“浅红”、“玫瑰红”、“珊瑚红”……让人眼花缭乱的口红唇膏,挑花了眼、抹破嘴了。用户打开APP页面,用手机对准脸部,挑选好口红之后,在商品展示的页面就会跳出一个AR试妆的提示。只需点击一下就可以开始AR试妆。唇部贴合完美,口红色泽逼真。试用者普遍认为这个AR试妆目前的功能还是很丰富的。只要选取一种口红,它的所有色号就会出现在最下方供用户选择,左右两方分别是美颜和截图功能,方便分享自己的试妆效果,中间还有选择口红厚度的调节按钮,它能够展示口红涂得薄厚时候的效果。

在这款试妆的软件中,我们可以看出这款AR试妆应用中对人脸特征点抓取的精准度非常高。京东在此采用了ULSee脸部跟踪技术,将脸部跟踪技术和线上购物的试装(穿戴)体验完美结合。

    目前国内做计算机视觉和图像处理的公司非常多,ULSee的技术何以受到客户的青睐?从近期各大媒体对京东VR/AR负责人赵刚的采访中,我们可以一窥端倪:

 

Q:我们都知道京东在AR领域一直有各种尝试,那AR试妆经过了多久的筹备?这个过程中又有哪些技术难点呢?

赵刚:我们的项目叫做AR美妆,口红是我们的第一步。未来还会加入腮红、眼影等化妆品类的AR试妆功能。在AR美妆领域,技术难点在于跟踪精度与实时性。因为用户在使用AR试妆的时候,手机就相当于一面镜子,比如,涂口红的时候,如果没有好的跟踪精度和实时性,用户在换姿势或是转头的时候就会出现口红在脸上的情况,这样就很难有好的用户体验。

 

QAR美妆目前是不是电商平台比较看好的变现方式?

 赵刚:AR美妆是AR领域里一个比较特殊的类别,因为它是对于人脸进行识别,而人的脸部有丰富的特征。如果是纯粹AR的话,它往往要面临很多未知的场景,比如说它需要对物体的三维特征进行识别,遇到特征较少的就很难识别出来。但是AR美妆不一样,现在的人脸识别技术已经相当成熟了,所以它表现出来的商业效果也非常好。我们的项目叫做AR美妆,口红是我们的第一步。未来还会加入腮红、眼影等化妆品类的AR试妆功能。

 

ULSee能够突围制胜的关键就在于:ULSee人脸检测技术具备鲁棒性特质,无惧外界干扰情况(包括遮挡、背光、暗光和戴眼镜)下都能实现“精准不抖动”的稳定跟踪。在光线发生变化,面部有遮挡或者图片模糊抖动的时候都可以表现稳定;在行人检测中,跟踪失误率小于0.001%,而且对于全身有80%遮挡的行人都可实现有效检测。而人脸跟踪区域覆盖到了耳朵、额头、发际线、眼皮和下颚等,对于面部遮挡,夸张表情和360角度变化也完全不惧。可实现脸部66点—150点的追踪,也可依据客户需求提供定制版本,实现如眼部、嘴部等致密关键点的跟踪,与市场同类产品相比,具有模型小、效率高、精度高、稳定性好以及不抖动等优势。综合比较如下:

 

在智能手机及应用领域,ULSee也是最早与华为、传音手机合作,将AR技术运用在智能终端的科技公司。Line CamerasnowB612Camera 360推出的变装贴纸和精准跟踪的“大眼瘦脸、兔耳朵”实时美颜软件,“换军装”“我向党旗敬礼”等H5软件,运用的均是ULSee提供的AR+人脸跟踪的技术支持。

AR技术将对人类生活形态造成巨大的冲击。如果说区分虚拟实境(VR)、扩增实境(AR)、与混合实境(MR)都只是“技术上名词”,那么随着AmazonGoogleFacebookIPhone、乃至国内的淘宝、京东,越来越多的业者推出了虚拟化产品,例如家具、服饰、宅装、汽车等厂商开发AR APP,重新定义O to O的互惠共赢。

斯比尔伯格在2002年的电影《关键报告》就描绘了虚拟现实的未来世界,导演特别邀请的50位科学家、城市规划、建筑、生物科技、文学等领域的专家讨论出来的80多页的趋势报告,在当时确是科幻片脚本。但随着科技发展,电影情节正逐步实现,例如体感操作、机器人工厂、自动驾驶的交通系统,购物中心的虚拟化技术等等。可以说虚拟化产品的关键命题在于如何开启新的商业模式,创造新的生活形态。