And.II安菟女团是国内第一个可以进行实时互动和直播的二次元虚拟偶像。
过去十年里,初音未来、洛天依等虚拟偶像依赖的核心技术是虚拟人声软件VOCALOID,核心的二次元用户利用基于VOCALOID形成的声库,为虚拟偶像制作一系列歌曲。这些歌曲成为虚拟偶像走红并进行商演和代言的基础,不过除了UGC内容创作的互动,这一代虚拟偶像仍旧是二次元圈层中被塑造的机械偶像。
And.II安菟依靠的核心技术是Live AR。利用摄像头、传感器、身体动作捕捉、面部动作捕捉,结合实时计算和匹配技术,Live AR能够实时地将真人动作、表情、声音映射到虚拟人物模型上,模糊了真人角色和虚拟角色的边界。在虚拟世界中,虚拟角色几乎不受真人模板的限制,通过CG(动作捕捉技术)就可以获取各种能力,实时与观众进行交流。
“互联网时代需要交互,这是符合行业真实感的。”刘岩强调。
能够互动和直播被刘岩看做虚拟偶像的一个升级路径。“我们用Live AR将真人声优和虚拟偶像结合起来之后,就赋予了虚拟偶像温度和情感,让她可以像真人一样跟用户实时的情感语言交流。同时她又是一个虚拟偶像,没有道德风险,她的人设、亲和度、时代感、符号感会更强。我们认为她是符合这个时代的艺人。”刘岩说道。
高成本和高技术壁垒会成为蜜枝打造的虚拟偶像的主要特征。此次亮相于CCG的And.II安菟女团互动演唱会,蜜枝科技已经在技术层面筹备了将近两年的时间。从引进制作普通的AR模型,到研发出可以精准映射真人声优的动作、表情、声音和嘴唇的Live AR模型,六间房内部匹配了40多名数模专家研发映射引擎,这套技术也经历了几千个小时的机器学习过程。
数学系出身的刘岩对于人工智能表现出了极大的兴趣。在秀场直播需要年轻化和人工智能风口的交叉点上,刘岩找到了虚拟偶像直播。他认为虚拟偶像和直播结合将会成为人工智能技术的一个重要出口,如果技术足够成熟,会催生普通用户在虚拟偶像直播行业的广泛应用。
“虚拟偶像,之所以我们去这么重仓去做这件事,背后是我们多年技术积累的一个出口,我觉得非常好玩。”