现在很多新闻主播都用上了AI主播,无论是央视新闻还是地方新闻,你见到的主播可能都是AI数字人,泰国、韩国也纷纷开启了AI主播时代,
今天就给大家分享
随着以ChatGPT、文心一言为代表的大语言模型相继涌现,AI+电商也带来新的购物体验和新的经营模式。
▍
0
1.项目背景
「电商AI数字人直播解决方案-慧播星」依托自研StyleSync技术/音频自恢复预训练技术/文心一言/自研PicGen技术等,实现AI复刻/定制优质主播、稳定7*24小时在线开播。低成本搭建多元直播场景,专家级商品讲解、实时互动问答、丰富的互动形态精准传达信息,既让消费者获得全新的购物体验,也赋能中小商家零门槛、零成本一键创建商品售卖直播间、助推GMV增量,减少生产成本,实现消费体验和生产效能的“双提升”。
那么,设计团队如何打造AI数字人的智能化看播体验呢?
我们通过聚焦数字人直播间6层框架范式,从主播复刻/场景装修/互动创新3个方向解析如何实现智能化直播体验,以及体现设计核心价值。
其中,优质主播形象复刻通过4步完成:拍摄底板视频→技术抠像调优→VIS建模数字人→调整数字人在直播间位置大小。
设计团队聚焦第一步【拍摄底板视频】,通过现场打光和人物位置的把控,解决由视频光线暗造成的清晰度和人像过小问题;通过分品类的主播形象妆造指导和加入动作指导,解决表情机械的问题。
利用视觉/语音/大语言模型,结合用户群体画像(年龄/国家/地域/职业),数字人直播间有机会实现千人千面的展示效果,即同一时间同一主播可在不同的国家展示相应的特色妆造/播报语言/互动风格/所处的空间装修,以及针对不同用户状态推出差异化的商品交互和讲解,以更好地适配地域人群差异化的风俗喜好,全天候7*24小时在线服务,大大提升售卖效率。
着眼当下,最需要解决的问题是:如何让客户快速搭建合适的直播间场景?
设计团队拆解前景层和背景层的4大必要展示元素:「背景层」背景图/顶通商品卖点;「前景层」侧贴元素/底贴元素。结合模版+AI生图技术,最大限度简化商家装修难度。此外,还通过装修白皮书指导客户自由表达,针对售卖商品品类去装修最佳的直播间场景。
首先,设计团队基于电商消费TOP 6大品类,总结商品图风格特点,对近似风格进行归类合并,整合电商19大类风格,并深入VIS模型技术底层训练生图模型,作为电商AI生图相关产品的视觉基座。
背景图-AI生成
:跑通AI生背景图流程,商家上传商品图→系统自动扣出商品主体→VIS风格分品类匹配→合成背景图。
智能模版生成
:跑通AI模版流程,系统基于PSD的命名规则对模版元素类型进行定义,并记录元素位置信息。
背景层生成
:通过VIS/Midjourney AI生产背景图,降低采购成本。
前景层生成(顶通区/侧贴/底贴/文字
):提取背景图主调,根据贴片元素类型,匹配不同算色公式,保证配色和谐。
接下来,生成的背景和算色后的贴片/文字,根据位置标记重组成新的模版。相比于人工生产6个/天,智能化后每天可生成30个可用模版,提效5倍。
装修白皮书指导客户表达
:设计团队将直播间分成背景层/主播层/前景层,根据电商6大品类直播间特点,分别对各层特性指导装修布局,配合公开课的形式,赋能客户创意表达。
▍
03
.AR/3D互动打造临场空间
在打造超拟真直播间效果的基础之上,通过AR空间拓展/3D/手势交互方向的设计预研,期望做到超越真人的直播间效果。
模拟AR空间拓展
:为用户打造一个突破传统二维平面的环视空间,加深临场感。
3D商品交互
:可交互手势、720度的全方位展示商品,使用户深入了解商品的特性和亮点,激发购买兴趣。