专栏名称: 雷峰网
中国智能硬件第一媒体
目录
相关文章推荐
哎咆科技  ·  【高清壁纸】一组关于秋天的壁纸 ·  昨天  
EETOP  ·  分享: 时序设计与约束资料汇总 ·  昨天  
新浪科技  ·  【#PS5Pro画质曝料#:#PS5Pro原 ... ·  1 周前  
51好读  ›  专栏  ›  雷峰网

凌海滨:未来AR要实现非平面的识别和跟踪 | 微软亚洲研究院院友会

雷峰网  · 公众号  · 科技媒体 硬件  · 2016-11-14 22:07

正文

雷锋网招人了!


加入雷锋网,分享AI时代的信息红利,与智能未来同行。听说牛人都点了这里

11月14日下午,微软亚洲研究院院友会在微软大厦成立。活动上,亮风台的首席科学家凌海滨介绍了关于AR的一些情况,他表示,传统的AR主要基于较为简单的平面跟踪,未来在技术层面上还需要实现非平面的跟踪。


亮风台首席科学家凌海滨


凌海滨回忆自己2001年离开研究院,现在已经有15年时间了。他在2012年成立了专注于AR技术的公司亮风台。今年,关于AR方面,最具有标志性的两件事是AR游戏Pokemon GO,和腾讯QQ的AR火炬传递。以往AR多数应用在 toB 领域,而这两件事让AR大规模地应用在 toC 领域。


QQ的AR火炬传递由他们提供技术支持,能实现2D平面的相机追踪,算法精确度很高,但局限于平面上。Pokemon Go用到了类似slam技术,但很弱,还有很多提高到的余地。同时,这两件事也说明了AR技术还有待提高,不过从市场层面看,AR一定程度上到了爆发点,“好的产品设计和内容,和相对弱的AR技术结合,可能也会非常成功”。


QQ火炬宣传图


在他看来,传统AR基于较简单的平面,像Hololens、Tango都是基于多模态联合会更精准。另外,传统AR上,很多语义没有接入,主要因为一是发展的惯性,其次是语义理解很大程度上依赖于计算机视觉的发展,计算机视觉近年来发展也很快,可是AR的特点是集中在移动端。而移动端计算能力不够,如他们参与的QQ火炬传递,当时要求在iPhone 4上实现实时,所以语义理解上面还有待提高。


随后,他介绍到AR算法的基本原理。


先是通过摄像机拍到真实世界的视频后,加入传感器,如一些深度传感器。接着完整的AR系统要做两方面的理解,一是对环境的理解,二是作为闭环系统,要有交互理解,知道用户想干什么,才能去做交互。再有就是虚拟世界的3D模型,其实泛指就是内容部分,然后把模型根据理解在合适的地方放上去,也就是做渲染这块,合成视频,最后传到人的感知系统里面。这是AR的一个基本工作原理。


目前的AR项目,包括他们自己做的项目,大部分还是2D平面的识别和跟踪。跟踪平面很简单,但真实世界是3D的,如果对真实世界能有实时、精准的跟踪,就不需要对2D平面跟踪。


这也说明,AR技术公司需要努力的一些方向。从2D到3D的突破,他介绍到亮风台现在主要是做非平面物体的识别和跟踪,以及对真实环境实时的理解感知。他也介绍到,公司在slam技术上的一些进展。


发布会上的AR演示


不久前,他们在北京刚刚发布了新的AR眼镜HiAR Galsses,雷锋网在文中曾写到他们slam技术上的三个特性。首先,能在移动端如手机上实时运行;保证流畅,因为没有系统能保证在跟踪过程中不丢,如果丢了,可以快速重新定位,让用户感觉不到;多平面检测建模。


同时,在非平面物体识别跟踪方面,由于手机要考虑到速度,模型不能太大,他们现在采用了简化版的深度学习算法,能实现实时。最后,他解释到,以前用平面几何体来承载AR内容,我们对世界的理解不仅是平面立体的东西,还有语义,比如我知道是人脸、脸上的眼角等等。现在他们人脸和手势上面有一定的进展。人脸方面,最新研发171个定位点,被应用到美图手机上。


点击关键词可查看相关历史文章


● ● 

万物互联创新大会


吴军博士:物联网和人工智能将再造一个英特尔和微软

科大讯飞胡国平:人工智能的热潮下,怎样实现产品落地?


● ● 


阿里“双11”晚会

特朗普上台,美国汽车制造商们慌了?

商用性爱机器人 | 淘宝 Buy+ | 张小龙内部演讲

马斯克太阳能瓦片 | 外国记者评价乐视生态

小米MIX | 小米VR | 华为麒麟960

MacBook Pro 发布会 | 微软发布会 2016

锤子M1/M1L | 龙芯3A3000 | 三星 Note 7

大疆 “御 ”Mavic | Google Home

国产多线激光雷达 | 谷歌 Daydream VR 头盔

小米5s | Movidius | lightning | Prisma | 直播

小米扫地机器人 | 小蚁M1微单相机 | 小米笔记本

应用号 | 华为无人机 | Amazon Echo