来源:内容来自滨松,谢谢。
不用说,这两天的iPhone X那是火遍了每一个头条。最大的两个看点,一是全屏幕(在聊iPhone X“AMOLED全面屏”前,你需要知道这些…);再就是把在手机上没得意几年的Touch ID踢出了局,取而代之的是调调极其高的Face ID(人脸识别),江湖俗称“刷脸”。
iPhone X 的刷脸功能,啊不,是Face ID
图源:sh.qihoo.com
虽说人脸识别已不是什么全新技术,但真正在手机上实现也是足够狂拽酷炫的。不过,这个功能一经发布便迅速遭到了一群爱撸妆小仙女们的质疑:
图源:orz520.com
毕竟有时候撸完妆,连亲妈都不认识(摊手.jpg)
图源:mini.eastday.com
妆后FACE ID认不出?iPhone X就呵呵了,并表示瓜众们还是too young too simple, sometimes naïve.
图源:toutiao.com
答案当然是否定的。简单地说,Face ID基于3D(深度)成像技术,并不会“肤浅”的去看“长相”,而是通过获得位置信息来进行3D成像。实现这一技术的基础元件,便是接下来我们要聊的“深度相机”了。
深度相机是一种特殊的相机,和传统相机不同,除了能拍出物体的平面图像外,还能测量出物体到相机位置的距离,从而实现3D(深度)成像。
它的原理主要有三种:双目成像、结构光、飞行时间。
我们的双眼之所以能看到立体的图像,是因为两眼存在瞳距,在一定距离观看物体时,两眼会接收到不同的视觉图像。而大脑能够很巧妙地通过眼球的运动、调整,将有细微差别的两幅画像融合,感知到生理深度暗示,从而产生立体感。这就是双目立体视觉的基本原理。
图源:it.enorth.com.cn
双目立体成像就是根据该原理,获取、产生和传输一个空间场景,并将这个场景展现成具有立体感的景象。
这是一种比较传统的技术,使用两个可见光的图像传感器,通过双目匹配就能够实现。这种方法虽然成本低,图像分辨率高,但是算法非常复杂,且是一种被动测量方法,目标物体需要有良好的特征变化,不然无法实现。
基本的结构光方案所基于的原理是光学三角法。研究发现,当把一些特殊形式的光投到有不同深度的物体上时,光的纹路会发生变化,而我们可以通过采集这些纹理变化,来计算位置和深度,进而复原整个三维空间。
图源:tianya.cn
例如光带打到物体上,遇到突出的物体条纹就会改变原有的状态,或断开,或弯曲,其程度取决于物体各部分的深浅。直接打到平面,条纹则不发生改变。
结构光系统主要由光投射装置(常见的为近红外光)、摄像机、图像采集及处理系统组成。
其中,摄像机采用图像传感器配合窄带滤光片和镜头的方式,接收不同位置的回波光信号,进而成像。
右图为调制好的近红外条纹光,左图为近红外CMOS图像传感器成像的灰度图
图源:zhihu.com
第一步的成像质量直接影响接下来的图像处理,这就需要图像传感器在近红外波段具有极高的灵敏度,特别是对于一些高精度要求的识别系统应用。
滨松深度相机用高灵敏度CMOS图像传感器
近红外波段高灵敏度表现
高速捕捉能力表现
成像后接下来的工作,就交给图像采集及处理系统了:
来源:结构光的概念及其实现三维成像的主要原理是什么?Lee Mr回答内容,知乎
激光器发出的光束经过光学系统形成的不光有条纹的,还有包括点、单线、单圆、同心多圆、网格、十字交叉等多种散斑形态,通过特征编码直接获取特征点。与普通条纹光相同,其他特征图形也都是通过在景物上形成特定的图案,成像后进行图像处理,后对图案深度或距离信息进行提取。
iPhone X也正是采用的结构光来实现Face ID的。还记得那屏幕上端抢眼的“刘海”吗?置于其中的是一套称作“原深感摄像头”的系统,除了常规器件,还加入了红外摄像头、点阵投射器、泛光感应元件,也就是Face ID的核心元件。其通过投射超过3万个光信息识别点,由摄像头收集信息并通过算法分析,实现了它的人脸识别。
这个“刘海”不简单!
图源:mobile.zol.com.cn
通过捕捉光从发射到接收的飞行时间,判断物体距离,这就是测距中常见的飞行时间(Time of Flight,TOF)法。在3D成像应用中,TOF法是基于距离图像传感器实现的。
距离图像传感器芯片的每一个像元对入射光往返物体和相机之间的相位分别进行记录,传感器结构与普通图像传感器类似,但是包含两个快门,用来在不同时间采样反射光线,因此像素尺寸比普通图像传感器尺寸大。另外,照射单元和传感器需要高速信号控制才可以达到想要的精度。
滨松TOF深度相机用距离图像传感器
TOF的深度相机也主要包含三部分,一个高速光源(激光器或LED),一个可以测试飞行时间的距离图像传感器,以及后续处理单元。
左图:深度图像(TOF法成像) / 右图:彩色图像
双目、结构光、飞行时间(TOF),这三种虽然都是深度相机中常用的方法,但他们也各有所长:
技能点的不同也决定了他们着各自擅长的应用领域。双目法对是否有光照、被测物特征区别等外部环境限制较多,但是有分辨率优势,更适合于在环境比较单一的流水线检测等应用上;结构光可以测试比较近的距离,对被测物的要求不高,同时兼顾了深度分辨率,使得它比较适合用在台式设备或者手持设备的人脸识别、体感互动等应用中;TOF虽然在其他方面表现优秀,但是有着深度图像分辨率低的问题,使得它更适合用在动态捕捉、机器人避障等应用上。
iPhone X Face ID的出现又一次掀动了3D成像的热浪,但它也仅仅是洪流中的一个代表。在未来,3D成像也势必更加普及,从民用消费到科研、军事、医疗等等各方各面,推动应用的进步,从而改变我们的生活,改变我们的时代。
参考资料:
详解黑科技“结构光”,第三种测量方法你未必知道,人工智能机器人联盟,
http://www.toutiao.com/i6385367638842802690/
结构光的概念及其实现三维成像的主要原理是什么?Lee Mr回答内容,知乎,
https://www.zhihu.com/question/54347759
iPhoneX前置3D镜头采用结构光方案,凤凰科技,
http://tech.ifeng.com/a/20170913/44682077_0.shtml
今天是《半导体行业观察》为您分享的第1398期内容,欢迎关注。
关注微信公众号 半导体行业观察,后台回复关键词获取更多内容
回复 科普,看更多半导体行业科普类的文章
回复 DRAM,看更多DRAM的文章
回复 光刻,看更多光刻技术相关文章
回复 滤波器,看更多滤波器相关文章
回复 全面屏,看更多全面屏相关文章
回复 双摄,看更多关于手机双摄像头的文章
回复 制造,看更多关于芯片制造的文章
回复 人工智能,看《零基础看懂全球AI芯片:详解“xPU”》
回复 展会,看《2017最新半导体展会会议日历》
回复 投稿,看《如何成为“半导体行业观察”的一员 》
回复 搜索,还能轻松找到其他你感兴趣的文章!
摩尔邀请您加入精英微信群
你好,感谢长期对半导体行业观察的关注和支持!为了方便各位精英专家交流,我们组建了一些专业、微信交流群,欢迎你加入,我们还会邀请在摩尔直播App做过技术和行业分享的100+技术大牛入群和大家交流。加群方法: 长按二维码,加群主为好友,填写加群需求信息,拉你入群。(微信限制每天好友添加数量只有300人,请耐心等待)
地域群:
上海、深圳、北京、江苏.浙江、西安、武汉、成都.重庆、合肥、厦门.晋华、大连、台湾、新加坡、日本.韩国、美国、欧洲、摩尔直播学习群。
专业群:
模拟射频设计、EDA.IP、数字芯片设计、模拟混合信号设计、版图Layout、数字PR.验证、晶圆制造Fab、设备EE、半导体材料、半导体设备、封装测试、半导体投资、市场销售、AE.FAE、嵌入式开发、实习交流、采购.IC代理、AI芯片
专业微信群规则:
1. 专业、高效交流,建议进群请修改群昵称,格式:公司或学校+职位或专业+中文或英文,请服从群主管理,如果多次违规会被请出交流群;
2. 原则上每人加不超过3个群,精彩讨论内容,群主会负责在不同群同步,既然加了群,请大家尽量置顶群,积极参与群讨论;
3. 群里聊天讨论仅限半导体专业内容,杜绝专业无关内容,特别是养生、拉票、微商等内容,严格禁止,为自己公司打广告以不引起群友反感为限;
点击阅读原文加入摩尔精英