程序员也可以拿奥斯卡?
是的,奥斯卡奖是美国电影艺术与科学学院奖的别称,正式名称叫“学院奖”(
Academy Awards)。
奥斯卡科技成果奖(Academy
Scientific and Technical
Awards)是由美国电影艺术与科学学院颁发的一项科学技术奖,颁发对象为在科技成就上对电影产业进步有杰出贡献的个人或公司。科技成果奖的颁发在奥斯卡金像奖之前,今年会在2月份举行。
所以程序员们努把力还是可以拿奥斯卡科技成果奖。
今天探长就去采访了一位拿了奥斯卡科技成果奖的大神Kiran
Bhat。
Kiran
Bhat毕业于卡耐基梅隆大学机器人系,后在著名的电影特效公司,工业光魔ILM领导特效相关的工作,如今创办了人工智能公司Loom.ai。
让演员起死回“生”
(图片来源:Jason Sun)
Kiran
Bhat帮助建立了工业光魔的面部捕捉系统,同时是电影《复仇者联盟》和《加勒比海盗》这两部电影面部效果的研发负责人。在电影《复仇者联盟》,Kiran研发的这套系统根据好莱坞演员Mark
Ruffalo的表情,自动化的生成了绿巨人的面部表情。
(左为Peter Cushing,右为Guy
Henry
)
《星球大战外传:侠盗一号》“塔金”由英国演员彼得·库欣(Peter
Cushing)饰演,他是位老牌英国演员,已于1994年去世。
为了让他在大银幕上复活,Kiran
Bhat领导的团队找了一位和彼得·库欣身材相貌接近的英国演员盖伊·亨利(Guy
Henry),让他通过动作捕捉在拍摄现场进行表演,然后在后期制作时复活了“塔金”。
由于他在工业光魔建立脸部表情捕捉系统的突出成就,Kiran
Bhat在今年荣获2017年美国电影艺术与科学学院颁发的奥斯卡科技成果奖。
(右为Loom.ai
CEO Mahesh)
去年Kiran
Bhat从工业光魔离职,和前梦工厂特效总监Mahesh
Ramasubramanian 创办了Loom.ai,并担任公司CTO。Mahesh在DreamWorks工作近20年,制作的电影有史莱克、马达加斯加系列。而两获奥斯卡科技成果奖的斯坦福计算机图形学教授Ron
Fedkiw为Loom.ai的顾问。
Loom.ai目前已获Y
Combinator、丹华资本等机构的投资。
让普通人享受好莱坞明星的待遇
Loom.ai研发的系统能从单个正面图片生成令人震惊的现实化身,这项技术结合了计算机视觉、机器学习和电影业的技术。
赶紧来看看用几张名人的照片就做出的3D动态形象效果吧。有安吉丽娜·朱莉、Kanye
West、Elon
Musk等等。
(利用右上角图片构建的安吉丽娜·朱莉)
Loom.ai构建的新的计算机算法套件将为每个人建立可信的3D
Avatar,这个过程在以前是非常昂贵的,并且只有好莱坞演员能享受到。实际上Kiran
Bhat过去在好莱坞的大量工作就是捕捉演员的表情,为好莱坞演员打造Avatar。
如今Kiran
Bhat要让普通人也享受好莱坞明星享受的待遇,他们希望提供一套云端的工具,提供给开发者和商家,而这套工具能够将普通的图片转换为3D
Avatar。
(看这眉眼之间的细节处理,简直令人发指啊!)
当然,这个系统做出来的效果也并不是十全十美的,在头发、牙齿和细纹的处理上,还有待提高。不过,在目前的技术中,Loom.ai已经做得很不错啦!
站在科学与艺术交叉路口
Loom.ai
目前的
3D重构技术有几大优势:第一是低成本,无需要深度摄像头或者SLAM设备,也无需RGB相机矩阵;第二是高仿真,高精度还原人脸细节,可以动画模拟脸部表情;第三是低延时,重建技术可以在手机设备上实时完成。
这个技术也包括两个难点:第一个是将人的形象电子化,把一个二维的照片变成三维的电子形象,需要提取足够特征来重建一个人的脸部,也就是建模,获得“facial
rig”。第二个难点则是动画,在动画上需要能够还原人的微表情和其他细节,能够很好的表达人的情感。只有把这些都捕捉了,才能让其他人相信这有真实性。