沉浸式业态丨虚拟环境下“数智人”大模型的开发研究与营销案例分析
编者按
随着人工智能技术、云计算、5G移动通信等技术的发展,数智人行业不断加快的各种应用场景落地。数智创研院的《2022数智人分析洞察报告》显示,中国AI数智人市场规模呈现高速增长趋势,预计到2026年将达102.4亿元。
在过去,要完成一个超写实、高精度数智人的制作,可能需要数十小时的烘焙和渲染——而在今天,一项数智人技术的突破,或许会让这项技术,变成以后每个人都共有的“标配”。
INTRODUCTION
一 · 什么是数智人
数智人是由中国工程院院士钱旭红和赵星等团队提出的概念,原本定义为进化了数据智能能力和手段的新人类,如今已发展为“多源数据+智能算法+领域专家”的“数智人”框架体系。
赵星指出,“自主可控、包容审慎、敏捷治理”是中国数智人产业发展、政府治理和社会管理可以考虑的主要路径与原则,美学化、工具化和智能化是“数智人”的未来发展方向,其中,智能化是最为关键的一步,并在C端、G端和B端都具有巨大潜力空间,“数智人指向了人类意识永生的终极梦想,是一个无论有没有元宇宙概念,都具有极高成长性的前沿科技行业。”
(图片:腾讯云智能数智人|来源:网络公开)
简单来说,数智人如同它的名字,是智能的数字人。因此,数智人不仅具备数字人强劲的变现优势,而且数智人更拥有智能化与交互性特征,这也是“数智人”与普通的数字人最大的区别。
在AI技术、5G技术、XR技术以及深度学习等技术的支撑下,数智人将拥有更智慧的头脑、更灵活的动作、更丰富的表情以及更人性化的心智等特征。
二 · 国内数智人技术
今年4月,腾讯云智能小样本数智人生产平台首次对外发布,平台具有训练样本小、生产效率高、自动化生产等特性,可以轻松实现“自助式”数智人生产制作。依托行业大模型,腾讯云智能数智人工厂全新升级,覆盖三大方向:生成效率更高、应用场景更广、3D数智人生产运营更智能。
在生成效率上,全新发布的“通用口型”版小样本数智人,生产时间、生产素材需求都进一步降低。在AI大模型技术的加持下,基于自监督机制的通用多模态模型,通过扩充人像特征提取及口型关系绑定,无需训练即可生成每个人的个性化口型特征。这推动2D小样本数字人生产时长可从24小时缩短至1小时,生产素材简化至只需要1分钟真人口播视频。
(图片:腾讯云智能小样本数智人生产|来源:网络公开)
在应用场景上,全新升级的“交互式”小样本数智人,支持“倾听等待状态”识别,能够根据真实对话场景进行手势的停顿、变化。这将使得“交互式”小样本数智人不再局限于短视频生产等单向播报场景,也可以广泛用于服务咨询等交互场景。
在生产运营上,依托AI建模绑定算法,腾讯云智能实现照片式生成3D形象,改变手工作业形式,大幅提升3D形象生成速度,支持批量打造3D数智人;同时,全面升级“智能驱动”3D数智人,可以基于语义为3D数智人自动匹配动作,让3D “数智员工”服务体验接近于真人员工。例如,围绕大模型客服,数智人可以依据大模型实时生成的答案,匹配相应的表情、动作,实现更自然的交互。
(图片:3D “数智员工”服务体验|来源:网络公开)
今年9月7日举办的2023腾讯全球数字生态大会上,腾讯云智能数智人产品公布三大升级,依托行业大模型技术,实现数智人生产效率及交互体验提升,降低数字人应用门槛,加速推动AI数字人普惠。
其中,全新发布“通用口型版”小样本数智人,只需要1分钟真人口播视频,平台便可通过多模态数据输入,无需训练生成个性化口型,在1小时内制作出与真人近似的“数智人”。
三 · 数智人形象
生成式人工智能(AI)技术经过不断发展进步,融合计算机视觉、人工智能强化学习和生物信息学等学科和技术后,其应用范围已拓展至更多行业和领域,并支持处理文本、图像、音频、视频等多模态数据。
(一)国博虚拟数智人“艾雯雯”
(图片:国博虚拟数智人“艾雯雯”|来源:网络公开)
2022年7月,依托多模态人机交互技术,国家博物馆就与腾讯SSV数字文化实验室联合打造出首个虚拟数智人“艾雯雯”,成为国家博物馆虚拟世界的代言人,助力让文物活起来,成为文化数字化战略发展的典型案例。
(二)总台首个国风AI数智人“国小风”
(图片:总台国风AI数智人“国小风”|来源:央视频)
2023年9月8日,《中央广播电视总台首届青年京剧演员大会》暨重点戏曲节目发布仪式在京举行。由总台打造的首位国风AI数智人“国小风”也将在节目中亮相。融合诗词、美景、历史、风物等元素的融媒体系列活动《戏韵家国情》,汇集彰显爱国主义精神的戏曲经典唱段,将于国庆节期间在央视频“CMG戏曲”频道页上线,营造出浓厚的节日氛围。
(三)中国移动咪咕数智人“王小濛”
(图片:中国移动咪咕数智人“王小濛”|来源:中国移动咪咕)
2022年,12月17日,咪咕视频推出的世界杯衍生综艺《濛主来了之我的眼睛就是尺》中,“空降”了一位“濛”友——数智人“王小濛”。咪咕高度还原出王濛的身体特点,实现毫米级复刻。同时,本次复刻采用AI技术复刻了王濛的语音,最大程度地还原了她的“相声式解说”的腔调。
(四)科大讯飞虚拟数智人“小颜”
(图片:科大讯飞虚拟数智人“小颜”|来源:科大讯飞)
2022年10月24日,世界人工智能大会期间,科大讯飞最新版本的AI虚拟“数智人”——“小颜”首次亮相元空间大放送直播间,与主持人共同讨论了“什么是极客精神”、“未来制造”等问题。
科大讯飞技术团队运用人脸识别技术让“数智人”主播的形象更加真实生动,情感分析技术使“数智人”主播具备更充沛的情感表达能力,多模态交互技术则可以让用户通过多种方式与“数智人”主播进行互动,比如语音、手势等。
(五)中国移动杨杰董事长“数智人”
(图片:中国移动杨杰董事长“数智人”|来源:网络公开)
2023年2月27日,中国移动杨杰董事长首次以“数智人”方式出席大会开幕式。据了解,杨杰董事长的“数智人”形象,是中国移动综合运用人脸建模、表情迁移、语音合成等技术打造的,并依托于中国移动5G+算力网络实时渲染等超前数智技术,能够仿真人类的外貌、行为,未来甚至能够实现思想的“数字复刻”。
(六)中国移动周杰伦合作推出“周同学”
(图片:“周同学”数智人 |来源:网络公开)
2023年,5月8日,周杰伦亮相中国移动元宇宙总部,与中国移动达成元宇宙领域系列合作,共同推出了数智人“周同学”,并公布“周同学”三重新身份——中国移动动感星推官、中国移动5G元宇宙星际开拓官、中国移动5G视频彩铃推广大使。
据介绍,“周同学”是由中国移动联合巨星传奇公司以及好莱坞顶级特效团队维塔工作室为周杰伦量身打造。未来,双方还将以元宇宙手办为载体续写品牌文化内涵,并将在元宇宙空间中举办虚拟演唱会。
(七)中信金控“数智人”财富顾问——“小信”
(图片:中信金控“数智人”小信|来源:网络公开)
2022年9月1日,中信金控官宣了业内第一位“数智人”财富顾问——“小信”,搭载行业先进的智能建模、智能人像驱动、智能对话引擎等AI能力,建立了“超脑”知识库AI模型,为客户全面的提供银行、证券、信托、保险等综合项目服务;运用了精细的3D建模技术,使其更好地交互和适应多变应用场景;为客户提供沉浸式体验服务。
四 · 数智人营销案例
亚运和中秋国庆双节期间,中国移动咪咕以“智能”答题,让“内容+科技+融合创新”贯穿节庆始终,以新奇、应景的“数智人双节送祝福”活动为主题,以两大节日场景为沟通阵地,以数智人创新为主要玩法,并结合亚运新看点,为不少年轻人成功拿下了“过节显眼包”名号。
(一)把握节日社交场景
“新意+心意”数智人彩铃回应祝福新需求
“营销的本质,就是发现需求并满足需求”,中国移动咪咕在双节节点上,进一步将“需求”以“场景”为标准做精细划分。很显然,其瞄准的第一个需求场景就是“节日社交场景”。年轻人更需要新颖的、个性化的全新祝福方式,让自己能在千篇一律的传统祝福里脱颖而出——这份祝福,既要有心意,还得有新意。
洞察到“进阶版祝福需求”的中国移动咪咕,基于模型实时渲染、智能驱动交互等前沿数智人技术,并充分发挥数实融合场景,全链路智作运营的一体化能力,打造出“数智人双节送祝福”活动,全面升级数智人玩法和节日祝福方式。
(图片:“数智人双节送祝福”|来源:网络公开)
活动页面中,用户可选择自己喜欢的中秋赏月、长假出游或乒乓球、霹雳舞等节日、亚运相关主题模板并“一键设彩铃”。此外,“设彩铃,送祝福”活动区域还推出了两种“全新风格的数智形象”供用户选择,用户也可DIY自己形象的数智人,并制作同款视频彩铃。
(图片:“数智人”DIY |来源:网络公开)
形象之外,用户也能随心设置相关的“数智人状态彩铃”,晒出自己花式过节姿势。同步上线的“年轻人的亚运显眼包”也趁机通过海报分享,将宅家观赛、激情喝彩、出门特种兵旅行等趣味状态,玩成了朋友圈热门。
此外,活动中的“书卡红包”不仅送出了实在心意,还直接刷新了红包玩法。用户可以通过声纹复刻功能,复刻自己的专属声音,并将声音合成到制作的祝福视频中,通过发送书卡红包的方式,让“数智人视频”将心意和趣味送达。
(图片:咪咕“铃”取数智人活动 |来源:网络公开)
个性化的设置和状态彩铃,让每一次来电都变为一次祝福社交,而每一份祝福在个性外观和内在状态的加持下,都更像来自元宇宙的“另一个我”,更具专属心意感。书卡红包也在新意之外,更多了一份和好友相互鼓励的内涵。
通过这一套玩法,中国移动咪咕把中国人最常见的节日社交习惯全面拿捏,并将社交模式轻松代入进了元宇宙时代。立体、沉浸式的场景化内容带来的新鲜感和专属互动感,也是传统社交难以达到的。
(二)创新节日体娱场景
数智人开拓亚运多元新看法
基于视频彩铃的社交场景之外,节假日里人群覆盖最广泛的还得数“休闲娱乐场景”。“看亚运”必然是今年双节假期娱乐首选,而在这场以“智能亚运”为办赛理念的赛事中,“数字技术”又是重中之重的全民焦点。
作为杭州第19届亚运会的官方持权转播商的中国移动咪咕,又怎会放弃这个既能彰显科技实力,又能贯穿节假日体娱场景的契机?除了带来精彩赛事直播和特色亚运内容外,因数字科技发展而诞生的“数智人”们也打开了各种“亚运新看法”,开启大众假日娱乐新姿势。
1.比特空间陪伴观赛,解锁最酷过节方式
亚运期间,中国移动咪咕联合茅台推出的数智形象“茅小凌”就在咪咕亚运演播室中陪伴观赛,带来了全新观感。
(图片:数智形象“茅小凌”丨来源:网络公开)
数智主播陪伴外,用户还能创建个人专属数智人形象,在“比特小屋”里一站式看比赛、玩互动游戏、逛元宇宙街区、购亚运主题好物。
以亚运会、中秋和国庆为锚点,更多用户也进入到中国移动咪咕搭建的一站式体育、娱乐、休闲、消费场景,推动人们将现实文化娱乐生活逐步迁移进元宇宙。
2.社交场域文化传播,推广亚运中国故事
体育盛事常常也是文化舞台。数智人还带来了不少与亚运相关的“文化”内容,成为推广中国故事的“关键人物”。
例如开幕当天,中国移动咪咕携手人民日报新媒体推出的《“运”味杭州》MV中,张雨霏数智分身以及刘洋数智分身,成为了展示中国青年蓬勃向上之姿的主角;中国移动视频彩铃联合浙江移动推出的亚运特色数智人彩铃,也是传扬杭州在地文化的重要窗口。
(图片:《“运”味杭州》张雨霏数智分身丨来源:网络公开)
双节期间,中国移动咪咕与福建日报新媒体联合打造的《绣承亚韵》,又将数智人们和亚运项目以及国家非物质文化遗产“厦门珠绣”的各色花样巧妙结合,演绎传统文化新表达,借亚运舞台传承百年热爱。
(图片:《绣承亚韵》数智人丨来源:网络公开)
凭数智人赋能,中国移动咪咕在节假日中带人们找到了亚运的两大维度新看法:
一是“看”得更广——将“亚运会”从单纯的“观赛”,延展为了更适合双节休闲娱乐场景,也是人人皆可参与的“玩”、“买”、“逛”互动,从某种程度上拉升着“人人亚运”的参与感。
二是“看”得更深——不只是看到亚运赛场上的精彩与领奖台上的输赢,更通过数智人向外推广着亚运链接的体育精神、城市文化、非遗传统等,透过亚运赛事向世界更好的讲述中国故事。
(三)中国移动咪咕取胜之道
专注“科技赋能大众美好生活”
当我们从单一品牌视角抽离出来,在聚焦两大场景的数智人营销策略里,还可以看到其为更多品牌在更多营销场景下,留下了可供借鉴的营销之道:
1.发挥优势能力:内容+科技+融合创新,打出差异化体验。这场营销活动的出圈,根本原因是真正将“智能亚运”理念和中秋、国庆两大节日内涵融为一体形成特色内容,以数智人技术赋能创新传播,为大众在“节日祝福”和“节日娱乐”两大场景下打造出了全新体验。
2.找准情绪触动:应景又应情,深化品牌与用户共鸣。
以数智人打造 “送祝福、亚运新看法”互动中,充分集合了温情的、热血的中秋、亚运内容和中国文化故事,让人们能充分感受、参与其中,进一步激发共鸣。
(图片:“送祝福、亚运新看法”丨来源:网络公开)
编者后记
无论是“数字人”还是“数智人”,究其根本都是通过计算机图形学技术(Computer Graphic,CG)创造出与人类形象接近的数字化形象,并赋予其特定的人物身份设定,在进行深度学习后,在视觉上拉近和人的心理距离,为人类带来更加真实的情感互动。
中国移动咪咕通过元宇宙、数智人技术的普适化应用,让前沿技术全面走向大众、服务大众,发挥其内容+科技+融合创新融合的优势,引领元宇宙数智人的创新玩法。在未来,数智人基于底层大模型技术将使其更加智能,期待有更多的数智人同各行各业应用场景结合,创造出更多价值。
美编|梅兰妮
图文丨文献参考来源:参考文献:沉浸城市、影视制作、公关界的007
责编丨芦丽莹
校对|杨悦岐
审核|卜希霆










