虚拟数字人指存在于非物理世界中,由计算机图形学、图形渲染、动作捕捉、深度学习、语音合成等计算机手段创造及使用,并具有多种人类特征(外貌特征、人类表演能力、人类交互能力等)的综合产物。虚拟人可分为服务型虚拟数字人、身份型虚拟数字人。
虚拟人有多种分类方式:第一种依照技术分类,虚拟人可分为算法驱动型(AI实时或捏脸等)和真人驱动型(动作捕捉);第二种依照视觉维度分类,虚拟人可分为2D型和3D型;第三种依照结构组成分类,虚拟人可分为数字型(用户线上观看)和全息型(用户现场裸眼观看);第四种依照商业模式分类,虚拟人可分为IP类(KOL型、歌舞型、品牌型、娱乐公司推出的偶像型、明星分身型)和非IP类(功能型、学术型和身份型)。
虚拟数字人宜具备以下三方面特征:一是拥有人的外观,具有特定的相貌、性别和性格等人物特征;二是拥有人的行为,具有用语言、面部表情和肢体动作表达的能力;三是拥有人的思想,具有识别外界环境、并能与人交流互动的能力。
虚拟偶像是虚拟数字人较早被认可的细分赛道之一,属于身份型虚拟数字人。在群众娱乐需求持续增长以及网络和影像音频技术不断迭代的环境下,我国虚拟偶像产业逐渐走入发展的高峰期。多个方面数据显示,2020年,我国虚拟偶像市场规模为34.6亿元,较上年同比增长68.8%;2021年,我国虚拟偶像市场规模约为62.2亿元,较上年同比增长79.8%。
iiMediaResearch(艾媒咨询)多个方面数据显示,2022年中国虚拟偶像核心市场规模为120.8亿元,预计2025年将达到480.6亿元;2022年虚拟偶像带动周边市场规模为1866.1亿元,预计2025年为6402.7亿元。艾媒咨询分析师认为,虚拟偶像在内容和周边产品产出方面有着较强的可塑性,能根据时代潮流发展不断开发新的爆点,因此行业增长的延续性较强,未来一段时间内都将保持稳定增长态势。
虚拟主播则属于代表性服务型虚拟数字人。虚拟主播能够降低主播行业成本,为存量市场降本增效,且随着其趣味性优势凸显,虚拟主播规模快速增多。目前我国主播账号近1.4亿,其中虚拟主播占比40%。据bilibili视频平台统计,截至2022年底,共有23W名虚拟主播在B站开播,同比增长190%,直播弹幕互动量达14.2亿。全年稿件播放量达292亿,同比增长112%。
国内虚拟数字人还应用在游戏、金融、文旅、教育、智能服务等实用场景,如《英雄联盟》的人气女团K/DA登陆S8决赛舞台,现场观众可以通过AR设备做观看;华为云打造了首个虚拟数字人云笙入职华为云;京东进口超市推出了虚拟推荐官“ViVi子涵”;央视新闻联合百度智能云推出的总台首个AI手语主播正式亮相;百度App上线龚俊数字人语音助手。
《英雄联盟》的人气女团K/DA登陆S8决赛舞台,现场观众可以通过AR设备做观看
为了让玩家轻松定制专属虚拟形象,2019年5月网易伏羲AlLab携手密歇根大学发明面部捕捉深度学习算法MelnGame,仅需玩家上传一张人物肖像照片就可以生成虚拟面部的形状和纹理,与此同时该算法还会根据游戏年代设定调整面部特征,现已在《逆水寒》《永劫无间》等游戏中得到应用。
虚拟人产业链可分为基础层、平台层和应用层。基础层和平台层主要面对的用户是2B,而应用层主要的用户是2C。
基础层为工具层,软硬件作为虚拟人开发的基石。比如:VR/AR等3D显示设备给使用虚拟人的用户所带来了沉浸感和真实感,建模软件可以对虚拟数字人的人体、衣物进行三维建模。基础层的代表企业有Meta、影创科技、EPSON、英伟达、Unity和EpicGames等。
平台层是虚拟人解决方案的提供商。平台层利用建模、渲染、动作捕捉等技术让虚拟人活过来,有名的公司有Vicon、腾讯、百度、搜狗、商汤科技、创幻科技和科大讯飞等。
应用层为虚拟人添上“灵魂”,打造及运营虚拟人人设,最终应用于多样的场景。应用层领先企业有蓝色光标、芒果超媒和次世文化等。
虚拟数字人系统正常的情况下由人物形象、语音生成、动画生成、音视频合成显示、交互等5个模块构成。人物形象根据人物图形资源的维度,可分为2D和3D两大类,从外形上又可分为卡通、拟人、写实、超写实等风格;语音生成模块和动画生成模块可分别基于文本生成对应的人物语音以及与之相匹配的人物动画;音视频合成显示模块将语音和动画合成视频,再显示给用户。交互模块使数字人具备交互功能,即通过语音语义识别等智能技术识别用户的意图,并按照每个用户当前意图决定数字人后续的语音和动作,驱动人物开启下一轮交互。
影视是对视觉效果的要求最高且最大限度影响社会对数字人形象认知、品牌的一个领域。近年来中国影视数字人特效取得加快速度进行发展,部分特效大片获得市场认可。2019年中国影视票房收入超过640亿级别,连续多年增长8%左右,其中特效电影约占10%。
国家对于影视特效的发展十分重视,先后出台了一系列相关扶持政策。2019年,科技部、文化部联合六部委发布《关于促进文化和科技深层次地融合的指导意见》,提出加强激光放映、虚拟现实、光学捕捉、影视摄录、高清制播、图像编辑等高端文化装备自主研发及产业化。2020年,国家电影局《关于促进科幻电影发展的若干意见》,提出以科幻电影特效技术发展引领带动电影特效水平整体提升,并要落实财税支持政策,同时对入驻影视文化基地的科技公司进行租金减免。
于2019年2月22日在中国内地上映的《阿丽塔:战斗天使》是虚拟数字人技术与影视相结合的典型应用案例之一。剧中的女主角阿丽塔是一位完全采用数字人技术制作的角色。该电影通过采取了特殊的面部捕捉仪器对真人演员人脸细节进行精准捕捉,然后将其作为电脑中虚拟角色的运动依据,使虚拟角色的动作和表情能像真人一样自然逼真。
特效电影广受市场认可,扶持政策的密集出台,以数字替身为代表的虚拟数字人+影视类的产品应用正在展现广阔的市场前景。
以虚拟主播为代表传媒行业应用很好的满足了媒体传播领域对内容生成方面的业务需求,成为了融媒体时代的传媒利器。
据前瞻产业研究院统计,2019年中国视频直播行业收入达到1082亿人民币,全国有3.9亿人在关注虚拟偶像,其中最大的二次元活动社区B站月活用户达1140万,虚拟主播占直播营收40%。同期,B站、虎牙等大型直播平台也都开启了线上、线下虚拟主播活动。如BilibiliMacroLink系列活动VR直播观看如数达到660万,10万级的“up主”(指在视频网站、论坛、FTP站点上传视频音频文件的人)就能够达到100万级真人主播的营收。
此外,在传统媒体领域,以虚拟主持人为代表的数字人应用也开始步入公众视野。在2019年央视网络春晚舞台上,以撒贝宁为原型制作的AI虚拟主持人“小小撒”首次上岗与原型同台秀技。这也是国内第一次人类主持人和自己的虚拟孪生数字人共同主持大规模的国家级文化活动,引起了业界及网民的强烈关注。
游戏市场日趋激烈,对于精品的需求日渐增长,或是虚拟数字人技术在该领域落地的福音。2019年游戏市场规模达到2300亿,其中与数字人相关度较大的RPG类游戏约占30%的份额。我国国内游戏监管环境和游戏版号审批政策仍旧趋严,游戏用户数相比2018年仅增加0.1亿,市场之间的竞争日趋激烈,对于精品的需求越来越高。
虚拟数字人技术则能够有效简化和加快游戏动画制作的步骤,可以在有限成本的情况下让游戏中更多的虚拟角色都具备丰富的肢体动作和精细的面部表情,给玩家带来更沉浸的游戏体验。例如网易伏羲实验室成功将虚拟数字人技术应用到《逆水寒》等多个游戏剧情动画场景制作中,在无手工参与下,快速生成动画,这使得大量的虚拟角色都能富有视觉的表达能力。
虚拟数字人能够有效助力金融机构实现“降本增效”,各大金融巨头争相布局“数字员工”。运用金融科技实现“降本增效”应对市场之间的竞争成为金融行业发展共识,以科技为核心的竞争导向,带来了金融机构信息科技投入的逐年增加。
据轻金融统计,2019年,16家全国性银行科技总投入超千亿,总计1034.1亿元。其中工农中建四大行投入均超过100亿元,建行投入最高,达到176.33亿元。虚拟数字人拥有拟人的表情动作,可进行智能对话,能够与服务类场景较多的金融行业天然结合。
多家金融机构正利用虚拟数字人技术打造“数字员工”,成为了科学技术创新、降本增效的重要方向。以中国工商银行为例,其推出的数字人银行员工,在移动终端和大屏等媒介上展现数字拟态形象,能够在产品营销讲解、金融业务办理、资讯播报、咨询问答等多个业务场景,实现与用户的可视化交互,为用户所带来个性化服务,有效解除用户顾虑,提升使用者真实的体验和驻留时间,真正让数字化服务“听得见”的同时也“看得见”。
数字文旅产业表现突出,以虚拟讲解员为代表的虚拟字人应用或为其贡献蓬勃力量。据中国旅游研究院统计,2019年前三季度,文旅营业收入62187亿元,比上年同期增长7.6%,特别是数字文旅产业表现突出,成为文旅产业转变发展方式与经济转型的重要引擎。数字文化内容与互联网旅游、智慧旅游、虚拟旅游等新模式联动发展,特别是疫情期间得到不断增长。
2019年全年国内旅游人数60.06亿次,比上年同期增长8.4%。2020年国内旅游人数20.65亿次,同比下降53.8%。2021年全年国内旅游人数32.46亿次,同比增长12.8%。2022年全年国内旅游人数达25.3亿次,比上年同期减少7.16亿。
早期的静态建模技术以结构光扫描重建为主。结构光扫描重建能轻松实现0.1毫米级的扫描重建精度,但其扫描时间长,一般在1秒以上,甚至达到分钟级,对于人体这类运动目标在友好度和适应性方面都差强人意,因此被更多的应用于工业生产、检测领域。
近年来,拍照式相机阵列扫描重建得到快速的提升,目前可实现毫秒级高速拍照扫描(高性能的相机阵列精度可达到亚毫米级),满足数字人扫描重建需求,成为当前人物建模主流方式。国际上IR、Ten24等公司已将静态重建技术完全商业化,服务于好莱坞大型影视数字人制作,国内凌云光等公司制作的拍照式人体扫描系统也已经在电影、游戏、虚拟主播项目中成功应用。
相比静态重建技术,动态光场重建不但可以重建人物的几何模型,还可一次性获取动态的人物模型数据,并高品质重现不同视角下观看人体的光影效果,成为数字人建模重点发展方向。
2D、3D数字人均已实现嘴型动作的智能合成,其他身体部位的动作目前还只支持录播。2D、3D数字人嘴型动作智能合成的底层逻辑是类似的,都是建立输入文本到输出音频与输出视觉信息的关联映射,主要是对已采集到的文本到语音和嘴型视频(2D)/嘴型动画(3D)的数据来进行模型训练,得到一个输入任意文本都可以驱动嘴型的模型,再通过模型智能合成。
然而,2D视频和3D嘴型动画底层的数学表达不一样,2D视频是像素表达;3D嘴型动画是3D模型对应的BlendShape的向量表达。除了嘴型之外的动作,包含眨眼、微点头、挑眉等动作目前都是通过采用一种随机策略或某个脚本策略将预录好的视频/3D动作进行循环播放来实现。
通过将捕捉采集的动作迁移至数字人是目前3D数字人动作生成的主要方式,核心技术是动作捕捉。动作捕捉技术按照实现方式的不同,可分为光学式、惯性式、电磁式及基于计算机视觉的动作捕捉等。现阶段,光学式和惯性式动作捕捉占据主导地位,基于计算机视觉的动作捕捉成为聚焦热点。
渲染技术的进步以及重光照等新型渲染技术的出现使数字人皮肤纹理变得真实,突破了恐怖谷效应。在PBR技术出现之前,限于相关软硬件的发展程度,所有的3D渲染引擎,更多的着重在于实现3D效果,在真实感体现方面差强人意。PBR是基于真实物理世界的成像规律模拟的一类渲染技术的集合,它的重点是微表面模型和能量守恒计算,通过更真实的反映模型表面反射光线和折射光线的强弱,使得渲染效果突破了塑料感。实时渲染技术的突破助力写实类数字人实现实时交互,应用场景范围快速扩大。
随着5G高速传输、物联网、人工智能、柔性显示、移动式高性能图形计算卡等技术的出现,虚拟现实技术应用慢慢的变成了了我国的重点发展趋势之一。回顾政策发展历史,自2016年我国工信部发布《信息化和工业化融合发展规划(2016-2020年)》后,我国开始逐渐在技术领域支持虚拟现实的技术突破和创新;在2018年底我国出台了首个以“虚拟现实”为标题的政策文件,表现了我国政府对于虚拟现实行业发展和应用的重视。
2016年11月工信部《信息化和工业融合发展规划(2016-2020)》:提到支持虚拟现实核心技术突破和产品与应用创新
2017年1月工信部《信息通信行业发展规划(2016-2020年)》:提出发挥互联网公司创新主体地位和主导作用,带动虚拟现实核心技术的研发和产业化
2018年12月工信部发布《关于快速推进虚拟现实产业高质量发展的指导意见》:是我国首个以虚拟现实为标题的文件
2019年10月《产业体系调整指导目录(2019年本)》:将虚拟现实(VR)、增强现实(AR),纳入2019年“鼓励类”产业
2020年8月《国家新一代人工智能标准体系建设指南》:关键领域技术标准主要围绕自然语言处理、智能语音、计算机视觉、生物特征识别、虚拟现实、增强现实、人机交互等方面,为AI应用提供领域技术支撑
2021年初“十四五规划”及基础电子元器产业规划:指出加强虚拟现实技术与产业应用融合
除了2016-2019年发布的虚拟现实重点推动政策之外,2020-2021年我国还发布了多项关于虚拟现实行业的有关政策,大多分布在于虚拟现实的深度应用和产业融合,例如2021年5月发布的《关于开展出版业科技与标准创新示范项目试点工作的通知》中指出了要加强虚拟现实技术在出版领域的创新应用和研究。2022年1月发布的《“十四五”数字化的经济发展规划通知》中指出要创新发展、深化人工智能、虚拟现实、8k等技术的融合,扩展社交、购物、娱乐、展览等领域的应用,促进生活消费品质升级。
结合我国2018年发布的《关于快速推进虚拟现实产业高质量发展的指导意见》以及2021年我国发布的虚拟现实有关政策,总结得出我国“十四五”期间虚拟现实行业发展总体设计。能够准确的看出,我国虚拟现实基本目标是:到2025年我国虚拟现实产业整体实力进入全球前列,掌握虚拟现实关键核心专利和标准,并且要在虚拟现实与工业制造、学习教育、文娱活动、外贸商务等方面加强融合和应用。
虚拟数字人行业估值办法能够选择市盈率估值法、PEG估值法、市净率估值法、市现率、P/S市销率估值法、EV/Sales市售率估值法、RNAV重估净资产估值法、EV/EBITDA估值法、DDM估值法、DCF现金流折现估值法、NAV净资产价值估值法等。
虚拟人发展历程:虚拟数字人的发展与其制作技术的进步密不可分,从最早的手工绘制到现在的CG(ComputerGraphics,电脑绘图)、人工智能合成,虚拟数字人大致经历了萌芽、探索、初级和成长四个阶段。
20世纪80年代,人们开始尝试将虚拟人物引入到现实世界中,虚拟数字人步入萌芽阶段。该时期虚拟数字人的制作技术以手工绘制为主,应用极为有限。1982年,日本动画《超时空要塞》播出后,制作方将女主角林明美包装成演唱动画插曲的歌手,并制作了音乐专辑,该专辑成功打入当时日本知名的音乐排行榜Oricon,林明美也成为了世界上第一位虚拟歌姬。
1984年,英国人GeorgeStone创作出一个名为MaxHeadroom的虚拟人物,MAX拥有人类的样貌和表情动作,身穿西装,佩戴墨镜,曾参演了一部电影,拍摄了数支广告,一度成为英国家喻户晓的虚拟演员。由于技术的限制,其虚拟形象是由真人演员通过特效化妆和手绘实现。
21世纪初,传统手绘逐渐被CG、动作捕捉等技术取代,虚拟数字人步入探索阶段。该阶段的虚拟数字人开始达到实用水平,但造价不菲,主要出现在影视娱乐行业,如数字替身、虚拟偶像等。电影制作中的数字替身一般利用动作捕捉技术,真人演员穿着动作捕捉服装,脸上点上表情捕捉点,通过摄像机、动作捕捉设备将真人演员的动作、表情采集处理,经计算机处理后赋予给虚拟角色。
2001年,《指环王》中的角色咕噜就是由CG技术和动作捕捉技术产生,这些技术后续还在《加勒比海盗》、《猩球崛起》等电影制作中使用。2007年,日本制作了第一个被广泛认可的虚拟数字人“初音未来”,初音未来是二次元风格的少女偶像,早期的人物形象主要利用CG技术合成,人物声音采用雅马哈的VOCALOID1系列语音合成,呈现形式还相对粗糙。
近五年,得益于深度学习算法的突破,数字人的制作的步骤得到一定效果简化,虚拟数字人开始步入正轨,进入初级阶段。该时期AI成为虚拟数字人不可分割的工具,智能驱动的数字人开始崭露头角。2018年,新华社与搜狗联合发布的“AI合成主播”,可在用户输入新闻文本后,在屏幕展现虚拟数字人形象并进行新闻播报,且唇形动作能与播报声音实时同步。2019年,浦发银行和百度共同发布的数字员工“小浦”,也是利用自然语言处理、语音识别、计算机视觉等人工智能技术制作的虚拟数字人,可通过移动电子设备为用户更好的提供“面对面”的银行业务服务。
当前,虚拟数字人正朝着智能化、便捷化、精细化、多样化发展,步入成长期。2019年,美国影视特效公司数字王国软件研发部负责人DougRoble在TED演讲时展示了自己的虚拟数字人“DigiDoug”,可在照片写实级逼真程度的前提下,进行实时的表情动作捕捉及展现。今年,三星旗下的STARLabs在CES国际消费电子展上展出了其虚拟数字人项目NEON,NEON是一种由人工智能所驱动的虚拟人物,拥有近似真人的形象及逼真的表情动作,具备表达情感和沟通交流的能力。
虚拟数字人依托多项技术而存在,因此,技术进步是虚拟数字人行业发展主要驱动力。按照技术分类,虚拟数字人可分为真人驱动型和计算驱动型,在技术流程、细节方面存在差异。
形象设计及建模:基于IP设计或真人偶像绘制原画,进行面部及身体3D建模。选择关键点。
建模绑定:将识别关键点映射至模型上,进行绑定。关键点绑定的数量及位置影响最终效果。
表演捕捉:利用动作捕捉设备或特定摄像头+图像识别,捕捉在形体、表情、眼神、手势等方面的关键点变化。
驱动及渲染:真人演员(在虚拟偶像中称为中之人)根据制作有必要进行相应表演,实时驱动虚拟数字人表演。在较为精绍的制作中,会应该要依据真人演员和建模的区别进行重定向。并对动作、眼神、手指等采用不一样的驱动方式。需要时需进行语音合威。形成特定设置语音
设计形象,扫描真人形态及表演、采集驱动数据:利用多方位摄像头,对通用/特定模特进行打点扫描(视最终需求可进行全身或局部扫描),采集其说话时的唇动、表情、面部肌肉变化细节、姿态等数据
形象建模,进行绑定:设计所需的模型,或基于特定真人进行高还原度建模。进行关键点绑定。关键点绑定的数量及位置影响最终效果。
训练各类驱动模型,是决定最终效果的核心步骤:利用深度学习,学习模特语音、唇形、表情参数间的潜在映射关系,形成各自的驱动模型与驱动方式。
内容制作,基于输入的语音(或由输入文本转化的语音),预测唇动、表情等参数:核心的技术流程是基于输入的语音,或首先基于TTS技术(Text-to-speech,语音合成技术),将输入的本文转化为语音。基于语音,结合第3步到的驱动模型,并利用生成对抗模型GAN选出最符合现实的图片,推理得到每帧数字人的图片。通过时间戳.将语音和每航的数字人图片进行结。
进行渲染,生成最终内容:直播时进行实时渲染为保证在特定场晏下可以在一定程度上完成实时低延迟渲染,计算框架的大小、算力供给等技术问题同样会影响到虚拟数字人的最终生咸效果
附加步骤:针对有必要进行交互的虚拟数字人,生产商会预先设置有问答库、知识图谱等,并承接入虚拟数字人的对话系统。
虚拟人需要多种前沿技术获得极大发展和应用,是当下多种尖端科技的超级综合体,先进科技充斥其整个产业闭环。如,其内容生产运用人工智能、数字孪生技术,其存储和认证机制运用区块链技术,其数据处理运用人工智能、云计算、云存储技术,其网络环境依托5G技术,其虚实交互与联通运用人体感知、3D渲染、拓展现实、脑机接口、可穿戴、机器人技术等。这些技术当前均处于快速地发展阶段,5G、虚拟现实、增强现实技术很可能在近期得到快速推广和应用。
2016年以来,我国虚拟现实未来市场发展的潜力被普遍看好。在政策层面,文化部于2016年9月下发《关于推动文化娱乐行业转变发展方式与经济转型的意见》通知,鼓励高科技企业利用自身科研实力和技术优势,积极引入体感、多维特效、虚拟现实、增强现实等先进的技术,进入文化娱乐行业。
国务院于2016年12月印发《“十三五”国家战略性新兴起的产业发展规划》,提出加快虚拟现实、增强现实、全息成像、裸眼三维图形显示(裸眼3D)等创新数字文化创意技术和装备的发展,丰富数字文化创意内容和形式,推进游戏、影视、动漫等相关产业的融合发展。
在市场层面,中国互联网行业的飞速发展培育了大量用户群体,激发了人们对互动娱乐的高涨热情,以及对新技术新应用的开放态度,为虚拟现实产业提供了基于大文娱服务应用场景的C端市场空间。
新一轮信息技术革命中,数字技术与现实世界的结合变得更加深入。例如,工业互联网、物联网等技术强调数字技术对生产设备和工厂的数字化控制;智慧城市推动城市治理和管理的智能化;人工智能提供了自动驾驶、人机翻译等数字化的辅助服务,将用户需求直接转化为数据和算法产品。
虚拟数字人非常依赖技术的发展,如果CG建模,动捕、AI等技术不能有进一步的升级,无法满足更高交互要求,部分场景就无法真正落地。另外技术门槛无法降低使得成本居高不下,可能无法进行大规模的商业化应用。
虚拟人的管理跟现实人的管理不一样具有多样性,涉及文化行政部门、教育部门、公安机关、工商部门、电信管理机构、精神文明建设指导委员会以及相应的群团组织等机构。
但是,在具体的管理过程中除了文化行政部门和公安机关占主导作用外,其他部门在虚拟人管理中大都属于形式部门,而只有在专项整治活动中,如近年开展网吧等互联网上网服务营业场所专项整治活动,在主责部门的督促下各行政机构才会有所联合平时基本上对虚拟社会疏于管理,因此在一定程度上造成了现今虚拟社会管理的无序性。另外,对于虛拟人的管理虽形式上有这么多的职能部门进行管理但却没有一个统-一的管理部进行协调,造成管理的分散性。
由于虚拟人具有开放性和共享性等特点,政府相关部门难以对网上信息进行全面的监督和管理,信息污染等问题日益突出。同时,虚拟人过度追求个性独特化,使一些违背正常伦理道德现象产生,这对我国主流的思想、观念、政治、伦理道德等产生冲击,对虚拟社会的网络生态环境造成极大的破坏。
目前针对虚拟人的法律法规主要有《刑法》《治安管理处罚法》(2006年)《关于维护互联网安全的决定》(2000年)《互联网信息服务管理办法》(2000年)等法律法规,这些法律法规关于网络犯罪和网络违法的认定过于原则或笼统,缺乏-定的可操作性。而且针对互联网相关的立法大多在2000年(甚至更早以前),立法的步伐跟不上互联网发展的速度,相应法律法规相对滞后。
另外,由于虚拟人的超时空性,在案件管辖权界定原则下,网络案件的管辖权难以确定,易导致管辖纠纷,影响办案效率。法律尚不完善,在虚拟资产、数字资产以及版权方面还有很大的提升空间。
行业竞争者:虚拟实现的企业注册数量逐年增加,行业竞争者较多,竞争也是较为激烈。
潜在进入者:随着信息技术的发展,虚拟人有着愈加广阔的市场需求,同时在目前中国各级政府提出转方式、调结构的战略规划,大力支持虚拟实现和虚拟增强技术的良好扶持政策以及中国日益开放的良好外贸环境等,都使得更多的资本计划进入虚拟人行业,获得经济利润。潜在进入者的威胁较大。
替代品:无论是产业级市场,还是消费级市场,真实场景的体验需求成为VR/AR需求的重要驱动因素。VR/AR产品可以匹配更高层次的需求实现,同时其核心功能上具有不可替代性,手势识别、动作捕捉等变革性的交互方式及沉浸性,决定了其在某些领域存在着不可替代的需求。所以替代品的威胁较弱。
供应商:虚拟人行业供应链的上游主要是原材料、机械、电子元器件、工业设计公司等原材料供应企业和服务企业。虚拟人产品创业企业在供应链成员中处于相对弱势的地位,不具有较强的议价能力。
购买者:技术进步将使产品从笨重到轻便发展,并大幅提升用户体验;市场的扩大会带来成本的大幅降低,从而使硬件普及,并出现颠覆性产品;资本扶持会带动产业快速发展,使内容不断丰富,应用领域不断拓展,形成产业高质量发展正向循环。购买者的议价能力较强。
随着移动互联的不断发展,客户体验需求的不断提高,当前的平面体验已经不能完全满足用户的要求,虚拟人以虚拟真实体验来不断迎合客户体验上的需求,来尽量达到真实的效果:同时虚拟人的商业模式也存在多样化发展,与电影公司、游戏发公司进行合作或者开发自身独占的应用软件等来成为自身的盈利点:未来虚拟人会逐步应用到各行各业当中,其巨大的应用潜力仍在不断地开发当中。
当前虚拟人面临诸多技术瓶颈亟待克服:硬件、图像技术、数据等方面瓶颈,这也得虚拟人进一步突破变得困难重重:VR的成本相对较高,导致市场普及速度可能较慢而国内一些价格较低的虚拟人产品则不能给用户很好的体验:虚拟人应用当前仍然集中在视频、游戏为主,内容相对少,导致客户粘性不强。
目前虚拟人行业都处于起步阶段,但整个市场未来增长潜力巨大:根据DigiCapital的数据,至2020年,全球AR与VR市场规模达到1500亿美元,而根据市场研究机构BusinessIntelligence的统计,2020仅年头戴式VR硬件市场规模就达到28亿美元,未来5年复合增长率超过100%。如果能在块市场中抢占先机,未来所能带来超乎想象的回报。
虚拟人行业将迎来大爆发的时代,这种威胁不仅来自于国内所涌现出的诸如暴风魔镜、焰火工坊等虚拟人创业团队的竞争,更加来自于全球各大科技巨头如Facebook、索尼、HTC等进驻VR行业的威胁,未来虚拟人行业将是百花争妍、大浪淘沙的时代。
(1)海康威视[002415.SZ]:是以视频为核心的智能物联网解决方案和大数据服务提供商,业务聚焦于智能物联网、大数据服务和智慧业务,构建开放合作生态,为公共服务领域用户、企事业用户和中小企业用户提供服务,致力于构筑云边融合、物信融合、数智融合的智慧城市和数字化企业。
(2)大华股份[002236.SZ]:是全球领先的以视频为核心的智慧物联解决方案提供商和运营服务商,以技术创新为基础,聚焦城市与企业两大核心业务,不断构建AIoT和物联数智平台能力,围绕客户需求,全面推动城市与企业的数智化升级,为城市、企业、家庭提供一站式智慧物联服务与解决方案。
(3)高德红外[002414.SZ]:是一家专业制造红外热成像系统的高科技企业,是全球领先的红外热像仪专业研制厂商。自成立以来,高德公司立足自主创新,积极开展红外光学、成像电路、图像处理、人工智能、机械结构及系统工程等方面的设计与研究,开发出上百款拥有完全知识产权的红外热像系统及高科技光电系统,各项技术居国内领先、国际先进水平,并拥有“GuideIR”,“MobIR”,“Thermopro”等驰名海外的注册商标。
(4)香港航天科技[1725.HK]:托香港国际化中心地位与WTO四个独立关税区之一的产业优势,以卫星基础产业及卫星数据应用为核心,形成服务商业航天的上下游产业生态圈,推动香港再工业化进程,为香港社会经济的发展开拓新的产业路径,推动全球航天事业蓬勃发展进入快车道。
(5)FIT HONTENG [6088.HK]:鸿腾精密技术(FIT)是行业领先的全球解决方案提供商,为了让世界更美好,我们致力于实现连接能力。愿景是通过创新的技术、产品以及服务,让人们使用各种设备互相连接并且分享经验。
(1)安费诺(AMPHENOL)[APH.N]:成立于1932年,是一家总部位于美国康涅狄格州的跨国电子公司,主要生产和销售各种连接器、电缆组件和传感器等电子产品。该公司的产品广泛应用于通信、航空航天、汽车、工业、医疗保健等领域。
安费诺公司的产品线包括各种类型的连接器、电缆组件、天线和传感器等。这些产品在通信、航空航天、汽车和工业等领域得到广泛应用,例如手机、平板电脑、航空航天设备、汽车电子和医疗设备等。
(2)康宁(CORNING)[GLW.N]:成立于1851年,是一家总部位于美国纽约州的跨国企业,是全球最大的特种玻璃、陶瓷和复合材料制造商之一。该公司的产品被广泛应用于电子、通信、汽车、生命科学和工业等多个领域。
康宁公司的产品线包括各种特种玻璃和陶瓷材料,例如光学玻璃、自清洁玻璃、耐热陶瓷和特种玻璃纤维等。这些产品在通信、电子、航空航天和汽车等领域得到广泛应用,例如手机、平板电脑、LCD电视、光纤和光学传感器等。
(3)TDK[6762.T]:是一家总部位于日本的跨国电子公司,成立于1935年,是一家提供电子元器件、存储介质和传感器等各种电子产品的领先制造商。该公司的产品被广泛应用于消费电子、信息通信、汽车电子、工业自动化、医疗保健、能源管理等领域。
TDK公司的产品线包括各种类型的电子元器件,例如电容器、电感器、电源、声音器、磁性材料和传感器等。这些产品在广泛应用于消费电子、汽车电子、通信和计算机系统等领域。此外,该公司还生产用于存储介质的磁性材料、磁头和硬盘驱动器等。
(4)安川电机[6506.T]:是一家总部位于日本的跨国企业,成立于1915年,是一家领先的工业机器人和自动化设备制造商。该公司在世界各地拥有分支机构和销售网络,其业务涉及自动化控制、电机和驱动器、运动控制、机器人、信息技术和环保技术等领域。
安川电机公司的机器人产品在全球范围内得到了广泛的应用,其工业机器人被用于汽车制造、电子制造、半导体制造、食品加工等各个领域。该公司的机器人产品线涵盖多个领域,包括SCARA机器人、协作机器人、Delta机器人、6轴机器人和其他定制机器人等。
(5)OMRON[OMR.DF]:是一家全球性的高科技公司,总部位于日本京都市。该公司成立于1933年,起初是一家电磁继电器制造商,随着时间的推移,逐渐扩展业务范围,现在已成为一家提供广泛自动化、电子和医疗保健产品的公司。
OMRON公司的业务涵盖许多不同领域,包括工业自动化、电子元器件、医疗保健、环保和社会系统。该公司开发和制造各种电子和机电设备,例如传感器、工业自动化系统、交通设备、医疗设备、家用电器和游戏机等。
虚拟数字人是一种新兴的技术,随着人工智能、机器学习、计算机视觉和自然语言处理等技术的持续不断的发展和进步,虚拟数字人行业的未来发展前景非常广阔。
首先,虚拟数字人将在许多不同的行业和领域得到大范围的应用。在娱乐和游戏行业中,虚拟数字人已经成为游戏和动画制作的重要工具。随着技术的不断发展,虚拟数字人将能够更加逼真地模拟人类行为和动作,为电影、游戏、虚拟现实等领域提供更加真实和身临其境的体验。
其次,虚拟数字人还将在商业和工业领域得到普遍应用。在医疗保健领域,虚拟数字人可以用于模拟手术、教学和培训等方面,为医生和护士提供更加实用的工具和技术支持。在制造业和物流行业中,虚拟数字人可以帮助企业优化生产流程、提高工作效率和质量,降低生产成本和资源浪费。
此外,随着虚拟数字人技术的不断发展,人们也将能够更好地利用虚拟数字人来解决一些现实世界中存在的问题。例如,虚拟数字人可以用于在线教育和培训、远程工作和协作、虚拟旅游和文化体验等方面,为人们提供更加灵活和多样化的学习和生活方式。
总之,虚拟数字人行业的未来发展前景非常广阔,将在各个行业和领域得到大范围的应用。随着技术的不断发展和应用的深入,虚拟数字人将成为人们生活和工作中的重要组成部分,为人们带来更加智能、高效、方便和舒适的生活体验。
专业周到的服务
专业从事保洁清洗
专业人才,安全放心
正规专业的管理模式
虚拟数字人指存在于非物理世界中,由计算机图形学、图形渲染、动作捕捉、深度学习、语音合成等计算机手段创造及使用,并具有多种人类特征(外貌特征、人类表演能力、人类交互能力等)的综合产物。虚拟人可分为服务型虚拟数字人、身份型虚拟数字人。
虚拟人有多种分类方式:第一种依照技术分类,虚拟人可分为算法驱动型(AI实时或捏脸等)和真人驱动型(动作捕捉);第二种依照视觉维度分类,虚拟人可分为2D型和3D型;第三种依照结构组成分类,虚拟人可分为数字型(用户线上观看)和全息型(用户现场裸眼观看);第四种依照商业模式分类,虚拟人可分为IP类(KOL型、歌舞型、品牌型、娱乐公司推出的偶像型、明星分身型)和非IP类(功能型、学术型和身份型)。
虚拟数字人宜具备以下三方面特征:一是拥有人的外观,具有特定的相貌、性别和性格等人物特征;二是拥有人的行为,具有用语言、面部表情和肢体动作表达的能力;三是拥有人的思想,具有识别外界环境、并能与人交流互动的能力。
虚拟偶像是虚拟数字人较早被认可的细分赛道之一,属于身份型虚拟数字人。在群众娱乐需求持续增长以及网络和影像音频技术不断迭代的环境下,我国虚拟偶像产业逐渐走入发展的高峰期。多个方面数据显示,2020年,我国虚拟偶像市场规模为34.6亿元,较上年同比增长68.8%;2021年,我国虚拟偶像市场规模约为62.2亿元,较上年同比增长79.8%。
iiMediaResearch(艾媒咨询)多个方面数据显示,2022年中国虚拟偶像核心市场规模为120.8亿元,预计2025年将达到480.6亿元;2022年虚拟偶像带动周边市场规模为1866.1亿元,预计2025年为6402.7亿元。艾媒咨询分析师认为,虚拟偶像在内容和周边产品产出方面有着较强的可塑性,能根据时代潮流发展不断开发新的爆点,因此行业增长的延续性较强,未来一段时间内都将保持稳定增长态势。
虚拟主播则属于代表性服务型虚拟数字人。虚拟主播能够降低主播行业成本,为存量市场降本增效,且随着其趣味性优势凸显,虚拟主播规模快速增多。目前我国主播账号近1.4亿,其中虚拟主播占比40%。据bilibili视频平台统计,截至2022年底,共有23W名虚拟主播在B站开播,同比增长190%,直播弹幕互动量达14.2亿。全年稿件播放量达292亿,同比增长112%。
国内虚拟数字人还应用在游戏、金融、文旅、教育、智能服务等实用场景,如《英雄联盟》的人气女团K/DA登陆S8决赛舞台,现场观众可以通过AR设备做观看;华为云打造了首个虚拟数字人云笙入职华为云;京东进口超市推出了虚拟推荐官“ViVi子涵”;央视新闻联合百度智能云推出的总台首个AI手语主播正式亮相;百度App上线龚俊数字人语音助手。
《英雄联盟》的人气女团K/DA登陆S8决赛舞台,现场观众可以通过AR设备做观看
为了让玩家轻松定制专属虚拟形象,2019年5月网易伏羲AlLab携手密歇根大学发明面部捕捉深度学习算法MelnGame,仅需玩家上传一张人物肖像照片就可以生成虚拟面部的形状和纹理,与此同时该算法还会根据游戏年代设定调整面部特征,现已在《逆水寒》《永劫无间》等游戏中得到应用。
虚拟人产业链可分为基础层、平台层和应用层。基础层和平台层主要面对的用户是2B,而应用层主要的用户是2C。
基础层为工具层,软硬件作为虚拟人开发的基石。比如:VR/AR等3D显示设备给使用虚拟人的用户所带来了沉浸感和真实感,建模软件可以对虚拟数字人的人体、衣物进行三维建模。基础层的代表企业有Meta、影创科技、EPSON、英伟达、Unity和EpicGames等。
平台层是虚拟人解决方案的提供商。平台层利用建模、渲染、动作捕捉等技术让虚拟人活过来,有名的公司有Vicon、腾讯、百度、搜狗、商汤科技、创幻科技和科大讯飞等。
应用层为虚拟人添上“灵魂”,打造及运营虚拟人人设,最终应用于多样的场景。应用层领先企业有蓝色光标、芒果超媒和次世文化等。
虚拟数字人系统正常的情况下由人物形象、语音生成、动画生成、音视频合成显示、交互等5个模块构成。人物形象根据人物图形资源的维度,可分为2D和3D两大类,从外形上又可分为卡通、拟人、写实、超写实等风格;语音生成模块和动画生成模块可分别基于文本生成对应的人物语音以及与之相匹配的人物动画;音视频合成显示模块将语音和动画合成视频,再显示给用户。交互模块使数字人具备交互功能,即通过语音语义识别等智能技术识别用户的意图,并按照每个用户当前意图决定数字人后续的语音和动作,驱动人物开启下一轮交互。
影视是对视觉效果的要求最高且最大限度影响社会对数字人形象认知、品牌的一个领域。近年来中国影视数字人特效取得加快速度进行发展,部分特效大片获得市场认可。2019年中国影视票房收入超过640亿级别,连续多年增长8%左右,其中特效电影约占10%。
国家对于影视特效的发展十分重视,先后出台了一系列相关扶持政策。2019年,科技部、文化部联合六部委发布《关于促进文化和科技深层次地融合的指导意见》,提出加强激光放映、虚拟现实、光学捕捉、影视摄录、高清制播、图像编辑等高端文化装备自主研发及产业化。2020年,国家电影局《关于促进科幻电影发展的若干意见》,提出以科幻电影特效技术发展引领带动电影特效水平整体提升,并要落实财税支持政策,同时对入驻影视文化基地的科技公司进行租金减免。
于2019年2月22日在中国内地上映的《阿丽塔:战斗天使》是虚拟数字人技术与影视相结合的典型应用案例之一。剧中的女主角阿丽塔是一位完全采用数字人技术制作的角色。该电影通过采取了特殊的面部捕捉仪器对真人演员人脸细节进行精准捕捉,然后将其作为电脑中虚拟角色的运动依据,使虚拟角色的动作和表情能像真人一样自然逼真。
特效电影广受市场认可,扶持政策的密集出台,以数字替身为代表的虚拟数字人+影视类的产品应用正在展现广阔的市场前景。
以虚拟主播为代表传媒行业应用很好的满足了媒体传播领域对内容生成方面的业务需求,成为了融媒体时代的传媒利器。
据前瞻产业研究院统计,2019年中国视频直播行业收入达到1082亿人民币,全国有3.9亿人在关注虚拟偶像,其中最大的二次元活动社区B站月活用户达1140万,虚拟主播占直播营收40%。同期,B站、虎牙等大型直播平台也都开启了线上、线下虚拟主播活动。如BilibiliMacroLink系列活动VR直播观看如数达到660万,10万级的“up主”(指在视频网站、论坛、FTP站点上传视频音频文件的人)就能够达到100万级真人主播的营收。
此外,在传统媒体领域,以虚拟主持人为代表的数字人应用也开始步入公众视野。在2019年央视网络春晚舞台上,以撒贝宁为原型制作的AI虚拟主持人“小小撒”首次上岗与原型同台秀技。这也是国内第一次人类主持人和自己的虚拟孪生数字人共同主持大规模的国家级文化活动,引起了业界及网民的强烈关注。
游戏市场日趋激烈,对于精品的需求日渐增长,或是虚拟数字人技术在该领域落地的福音。2019年游戏市场规模达到2300亿,其中与数字人相关度较大的RPG类游戏约占30%的份额。我国国内游戏监管环境和游戏版号审批政策仍旧趋严,游戏用户数相比2018年仅增加0.1亿,市场之间的竞争日趋激烈,对于精品的需求越来越高。
虚拟数字人技术则能够有效简化和加快游戏动画制作的步骤,可以在有限成本的情况下让游戏中更多的虚拟角色都具备丰富的肢体动作和精细的面部表情,给玩家带来更沉浸的游戏体验。例如网易伏羲实验室成功将虚拟数字人技术应用到《逆水寒》等多个游戏剧情动画场景制作中,在无手工参与下,快速生成动画,这使得大量的虚拟角色都能富有视觉的表达能力。
虚拟数字人能够有效助力金融机构实现“降本增效”,各大金融巨头争相布局“数字员工”。运用金融科技实现“降本增效”应对市场之间的竞争成为金融行业发展共识,以科技为核心的竞争导向,带来了金融机构信息科技投入的逐年增加。
据轻金融统计,2019年,16家全国性银行科技总投入超千亿,总计1034.1亿元。其中工农中建四大行投入均超过100亿元,建行投入最高,达到176.33亿元。虚拟数字人拥有拟人的表情动作,可进行智能对话,能够与服务类场景较多的金融行业天然结合。
多家金融机构正利用虚拟数字人技术打造“数字员工”,成为了科学技术创新、降本增效的重要方向。以中国工商银行为例,其推出的数字人银行员工,在移动终端和大屏等媒介上展现数字拟态形象,能够在产品营销讲解、金融业务办理、资讯播报、咨询问答等多个业务场景,实现与用户的可视化交互,为用户所带来个性化服务,有效解除用户顾虑,提升使用者真实的体验和驻留时间,真正让数字化服务“听得见”的同时也“看得见”。
数字文旅产业表现突出,以虚拟讲解员为代表的虚拟字人应用或为其贡献蓬勃力量。据中国旅游研究院统计,2019年前三季度,文旅营业收入62187亿元,比上年同期增长7.6%,特别是数字文旅产业表现突出,成为文旅产业转变发展方式与经济转型的重要引擎。数字文化内容与互联网旅游、智慧旅游、虚拟旅游等新模式联动发展,特别是疫情期间得到不断增长。
2019年全年国内旅游人数60.06亿次,比上年同期增长8.4%。2020年国内旅游人数20.65亿次,同比下降53.8%。2021年全年国内旅游人数32.46亿次,同比增长12.8%。2022年全年国内旅游人数达25.3亿次,比上年同期减少7.16亿。
早期的静态建模技术以结构光扫描重建为主。结构光扫描重建能轻松实现0.1毫米级的扫描重建精度,但其扫描时间长,一般在1秒以上,甚至达到分钟级,对于人体这类运动目标在友好度和适应性方面都差强人意,因此被更多的应用于工业生产、检测领域。
近年来,拍照式相机阵列扫描重建得到快速的提升,目前可实现毫秒级高速拍照扫描(高性能的相机阵列精度可达到亚毫米级),满足数字人扫描重建需求,成为当前人物建模主流方式。国际上IR、Ten24等公司已将静态重建技术完全商业化,服务于好莱坞大型影视数字人制作,国内凌云光等公司制作的拍照式人体扫描系统也已经在电影、游戏、虚拟主播项目中成功应用。
相比静态重建技术,动态光场重建不但可以重建人物的几何模型,还可一次性获取动态的人物模型数据,并高品质重现不同视角下观看人体的光影效果,成为数字人建模重点发展方向。
2D、3D数字人均已实现嘴型动作的智能合成,其他身体部位的动作目前还只支持录播。2D、3D数字人嘴型动作智能合成的底层逻辑是类似的,都是建立输入文本到输出音频与输出视觉信息的关联映射,主要是对已采集到的文本到语音和嘴型视频(2D)/嘴型动画(3D)的数据来进行模型训练,得到一个输入任意文本都可以驱动嘴型的模型,再通过模型智能合成。
然而,2D视频和3D嘴型动画底层的数学表达不一样,2D视频是像素表达;3D嘴型动画是3D模型对应的BlendShape的向量表达。除了嘴型之外的动作,包含眨眼、微点头、挑眉等动作目前都是通过采用一种随机策略或某个脚本策略将预录好的视频/3D动作进行循环播放来实现。
通过将捕捉采集的动作迁移至数字人是目前3D数字人动作生成的主要方式,核心技术是动作捕捉。动作捕捉技术按照实现方式的不同,可分为光学式、惯性式、电磁式及基于计算机视觉的动作捕捉等。现阶段,光学式和惯性式动作捕捉占据主导地位,基于计算机视觉的动作捕捉成为聚焦热点。
渲染技术的进步以及重光照等新型渲染技术的出现使数字人皮肤纹理变得真实,突破了恐怖谷效应。在PBR技术出现之前,限于相关软硬件的发展程度,所有的3D渲染引擎,更多的着重在于实现3D效果,在真实感体现方面差强人意。PBR是基于真实物理世界的成像规律模拟的一类渲染技术的集合,它的重点是微表面模型和能量守恒计算,通过更真实的反映模型表面反射光线和折射光线的强弱,使得渲染效果突破了塑料感。实时渲染技术的突破助力写实类数字人实现实时交互,应用场景范围快速扩大。
随着5G高速传输、物联网、人工智能、柔性显示、移动式高性能图形计算卡等技术的出现,虚拟现实技术应用慢慢的变成了了我国的重点发展趋势之一。回顾政策发展历史,自2016年我国工信部发布《信息化和工业化融合发展规划(2016-2020年)》后,我国开始逐渐在技术领域支持虚拟现实的技术突破和创新;在2018年底我国出台了首个以“虚拟现实”为标题的政策文件,表现了我国政府对于虚拟现实行业发展和应用的重视。
2016年11月工信部《信息化和工业融合发展规划(2016-2020)》:提到支持虚拟现实核心技术突破和产品与应用创新
2017年1月工信部《信息通信行业发展规划(2016-2020年)》:提出发挥互联网公司创新主体地位和主导作用,带动虚拟现实核心技术的研发和产业化
2018年12月工信部发布《关于快速推进虚拟现实产业高质量发展的指导意见》:是我国首个以虚拟现实为标题的文件
2019年10月《产业体系调整指导目录(2019年本)》:将虚拟现实(VR)、增强现实(AR),纳入2019年“鼓励类”产业
2020年8月《国家新一代人工智能标准体系建设指南》:关键领域技术标准主要围绕自然语言处理、智能语音、计算机视觉、生物特征识别、虚拟现实、增强现实、人机交互等方面,为AI应用提供领域技术支撑
2021年初“十四五规划”及基础电子元器产业规划:指出加强虚拟现实技术与产业应用融合
除了2016-2019年发布的虚拟现实重点推动政策之外,2020-2021年我国还发布了多项关于虚拟现实行业的有关政策,大多分布在于虚拟现实的深度应用和产业融合,例如2021年5月发布的《关于开展出版业科技与标准创新示范项目试点工作的通知》中指出了要加强虚拟现实技术在出版领域的创新应用和研究。2022年1月发布的《“十四五”数字化的经济发展规划通知》中指出要创新发展、深化人工智能、虚拟现实、8k等技术的融合,扩展社交、购物、娱乐、展览等领域的应用,促进生活消费品质升级。
结合我国2018年发布的《关于快速推进虚拟现实产业高质量发展的指导意见》以及2021年我国发布的虚拟现实有关政策,总结得出我国“十四五”期间虚拟现实行业发展总体设计。能够准确的看出,我国虚拟现实基本目标是:到2025年我国虚拟现实产业整体实力进入全球前列,掌握虚拟现实关键核心专利和标准,并且要在虚拟现实与工业制造、学习教育、文娱活动、外贸商务等方面加强融合和应用。
虚拟数字人行业估值办法能够选择市盈率估值法、PEG估值法、市净率估值法、市现率、P/S市销率估值法、EV/Sales市售率估值法、RNAV重估净资产估值法、EV/EBITDA估值法、DDM估值法、DCF现金流折现估值法、NAV净资产价值估值法等。
虚拟人发展历程:虚拟数字人的发展与其制作技术的进步密不可分,从最早的手工绘制到现在的CG(ComputerGraphics,电脑绘图)、人工智能合成,虚拟数字人大致经历了萌芽、探索、初级和成长四个阶段。
20世纪80年代,人们开始尝试将虚拟人物引入到现实世界中,虚拟数字人步入萌芽阶段。该时期虚拟数字人的制作技术以手工绘制为主,应用极为有限。1982年,日本动画《超时空要塞》播出后,制作方将女主角林明美包装成演唱动画插曲的歌手,并制作了音乐专辑,该专辑成功打入当时日本知名的音乐排行榜Oricon,林明美也成为了世界上第一位虚拟歌姬。
1984年,英国人GeorgeStone创作出一个名为MaxHeadroom的虚拟人物,MAX拥有人类的样貌和表情动作,身穿西装,佩戴墨镜,曾参演了一部电影,拍摄了数支广告,一度成为英国家喻户晓的虚拟演员。由于技术的限制,其虚拟形象是由真人演员通过特效化妆和手绘实现。
21世纪初,传统手绘逐渐被CG、动作捕捉等技术取代,虚拟数字人步入探索阶段。该阶段的虚拟数字人开始达到实用水平,但造价不菲,主要出现在影视娱乐行业,如数字替身、虚拟偶像等。电影制作中的数字替身一般利用动作捕捉技术,真人演员穿着动作捕捉服装,脸上点上表情捕捉点,通过摄像机、动作捕捉设备将真人演员的动作、表情采集处理,经计算机处理后赋予给虚拟角色。
2001年,《指环王》中的角色咕噜就是由CG技术和动作捕捉技术产生,这些技术后续还在《加勒比海盗》、《猩球崛起》等电影制作中使用。2007年,日本制作了第一个被广泛认可的虚拟数字人“初音未来”,初音未来是二次元风格的少女偶像,早期的人物形象主要利用CG技术合成,人物声音采用雅马哈的VOCALOID1系列语音合成,呈现形式还相对粗糙。
近五年,得益于深度学习算法的突破,数字人的制作的步骤得到一定效果简化,虚拟数字人开始步入正轨,进入初级阶段。该时期AI成为虚拟数字人不可分割的工具,智能驱动的数字人开始崭露头角。2018年,新华社与搜狗联合发布的“AI合成主播”,可在用户输入新闻文本后,在屏幕展现虚拟数字人形象并进行新闻播报,且唇形动作能与播报声音实时同步。2019年,浦发银行和百度共同发布的数字员工“小浦”,也是利用自然语言处理、语音识别、计算机视觉等人工智能技术制作的虚拟数字人,可通过移动电子设备为用户更好的提供“面对面”的银行业务服务。
当前,虚拟数字人正朝着智能化、便捷化、精细化、多样化发展,步入成长期。2019年,美国影视特效公司数字王国软件研发部负责人DougRoble在TED演讲时展示了自己的虚拟数字人“DigiDoug”,可在照片写实级逼真程度的前提下,进行实时的表情动作捕捉及展现。今年,三星旗下的STARLabs在CES国际消费电子展上展出了其虚拟数字人项目NEON,NEON是一种由人工智能所驱动的虚拟人物,拥有近似真人的形象及逼真的表情动作,具备表达情感和沟通交流的能力。
虚拟数字人依托多项技术而存在,因此,技术进步是虚拟数字人行业发展主要驱动力。按照技术分类,虚拟数字人可分为真人驱动型和计算驱动型,在技术流程、细节方面存在差异。
形象设计及建模:基于IP设计或真人偶像绘制原画,进行面部及身体3D建模。选择关键点。
建模绑定:将识别关键点映射至模型上,进行绑定。关键点绑定的数量及位置影响最终效果。
表演捕捉:利用动作捕捉设备或特定摄像头+图像识别,捕捉在形体、表情、眼神、手势等方面的关键点变化。
驱动及渲染:真人演员(在虚拟偶像中称为中之人)根据制作有必要进行相应表演,实时驱动虚拟数字人表演。在较为精绍的制作中,会应该要依据真人演员和建模的区别进行重定向。并对动作、眼神、手指等采用不一样的驱动方式。需要时需进行语音合威。形成特定设置语音
设计形象,扫描真人形态及表演、采集驱动数据:利用多方位摄像头,对通用/特定模特进行打点扫描(视最终需求可进行全身或局部扫描),采集其说话时的唇动、表情、面部肌肉变化细节、姿态等数据
形象建模,进行绑定:设计所需的模型,或基于特定真人进行高还原度建模。进行关键点绑定。关键点绑定的数量及位置影响最终效果。
训练各类驱动模型,是决定最终效果的核心步骤:利用深度学习,学习模特语音、唇形、表情参数间的潜在映射关系,形成各自的驱动模型与驱动方式。
内容制作,基于输入的语音(或由输入文本转化的语音),预测唇动、表情等参数:核心的技术流程是基于输入的语音,或首先基于TTS技术(Text-to-speech,语音合成技术),将输入的本文转化为语音。基于语音,结合第3步到的驱动模型,并利用生成对抗模型GAN选出最符合现实的图片,推理得到每帧数字人的图片。通过时间戳.将语音和每航的数字人图片进行结。
进行渲染,生成最终内容:直播时进行实时渲染为保证在特定场晏下可以在一定程度上完成实时低延迟渲染,计算框架的大小、算力供给等技术问题同样会影响到虚拟数字人的最终生咸效果
附加步骤:针对有必要进行交互的虚拟数字人,生产商会预先设置有问答库、知识图谱等,并承接入虚拟数字人的对话系统。
虚拟人需要多种前沿技术获得极大发展和应用,是当下多种尖端科技的超级综合体,先进科技充斥其整个产业闭环。如,其内容生产运用人工智能、数字孪生技术,其存储和认证机制运用区块链技术,其数据处理运用人工智能、云计算、云存储技术,其网络环境依托5G技术,其虚实交互与联通运用人体感知、3D渲染、拓展现实、脑机接口、可穿戴、机器人技术等。这些技术当前均处于快速地发展阶段,5G、虚拟现实、增强现实技术很可能在近期得到快速推广和应用。
2016年以来,我国虚拟现实未来市场发展的潜力被普遍看好。在政策层面,文化部于2016年9月下发《关于推动文化娱乐行业转变发展方式与经济转型的意见》通知,鼓励高科技企业利用自身科研实力和技术优势,积极引入体感、多维特效、虚拟现实、增强现实等先进的技术,进入文化娱乐行业。
国务院于2016年12月印发《“十三五”国家战略性新兴起的产业发展规划》,提出加快虚拟现实、增强现实、全息成像、裸眼三维图形显示(裸眼3D)等创新数字文化创意技术和装备的发展,丰富数字文化创意内容和形式,推进游戏、影视、动漫等相关产业的融合发展。
在市场层面,中国互联网行业的飞速发展培育了大量用户群体,激发了人们对互动娱乐的高涨热情,以及对新技术新应用的开放态度,为虚拟现实产业提供了基于大文娱服务应用场景的C端市场空间。
新一轮信息技术革命中,数字技术与现实世界的结合变得更加深入。例如,工业互联网、物联网等技术强调数字技术对生产设备和工厂的数字化控制;智慧城市推动城市治理和管理的智能化;人工智能提供了自动驾驶、人机翻译等数字化的辅助服务,将用户需求直接转化为数据和算法产品。
虚拟数字人非常依赖技术的发展,如果CG建模,动捕、AI等技术不能有进一步的升级,无法满足更高交互要求,部分场景就无法真正落地。另外技术门槛无法降低使得成本居高不下,可能无法进行大规模的商业化应用。
虚拟人的管理跟现实人的管理不一样具有多样性,涉及文化行政部门、教育部门、公安机关、工商部门、电信管理机构、精神文明建设指导委员会以及相应的群团组织等机构。
但是,在具体的管理过程中除了文化行政部门和公安机关占主导作用外,其他部门在虚拟人管理中大都属于形式部门,而只有在专项整治活动中,如近年开展网吧等互联网上网服务营业场所专项整治活动,在主责部门的督促下各行政机构才会有所联合平时基本上对虚拟社会疏于管理,因此在一定程度上造成了现今虚拟社会管理的无序性。另外,对于虛拟人的管理虽形式上有这么多的职能部门进行管理但却没有一个统-一的管理部进行协调,造成管理的分散性。
由于虚拟人具有开放性和共享性等特点,政府相关部门难以对网上信息进行全面的监督和管理,信息污染等问题日益突出。同时,虚拟人过度追求个性独特化,使一些违背正常伦理道德现象产生,这对我国主流的思想、观念、政治、伦理道德等产生冲击,对虚拟社会的网络生态环境造成极大的破坏。
目前针对虚拟人的法律法规主要有《刑法》《治安管理处罚法》(2006年)《关于维护互联网安全的决定》(2000年)《互联网信息服务管理办法》(2000年)等法律法规,这些法律法规关于网络犯罪和网络违法的认定过于原则或笼统,缺乏-定的可操作性。而且针对互联网相关的立法大多在2000年(甚至更早以前),立法的步伐跟不上互联网发展的速度,相应法律法规相对滞后。
另外,由于虚拟人的超时空性,在案件管辖权界定原则下,网络案件的管辖权难以确定,易导致管辖纠纷,影响办案效率。法律尚不完善,在虚拟资产、数字资产以及版权方面还有很大的提升空间。
行业竞争者:虚拟实现的企业注册数量逐年增加,行业竞争者较多,竞争也是较为激烈。
潜在进入者:随着信息技术的发展,虚拟人有着愈加广阔的市场需求,同时在目前中国各级政府提出转方式、调结构的战略规划,大力支持虚拟实现和虚拟增强技术的良好扶持政策以及中国日益开放的良好外贸环境等,都使得更多的资本计划进入虚拟人行业,获得经济利润。潜在进入者的威胁较大。
替代品:无论是产业级市场,还是消费级市场,真实场景的体验需求成为VR/AR需求的重要驱动因素。VR/AR产品可以匹配更高层次的需求实现,同时其核心功能上具有不可替代性,手势识别、动作捕捉等变革性的交互方式及沉浸性,决定了其在某些领域存在着不可替代的需求。所以替代品的威胁较弱。
供应商:虚拟人行业供应链的上游主要是原材料、机械、电子元器件、工业设计公司等原材料供应企业和服务企业。虚拟人产品创业企业在供应链成员中处于相对弱势的地位,不具有较强的议价能力。
购买者:技术进步将使产品从笨重到轻便发展,并大幅提升用户体验;市场的扩大会带来成本的大幅降低,从而使硬件普及,并出现颠覆性产品;资本扶持会带动产业快速发展,使内容不断丰富,应用领域不断拓展,形成产业高质量发展正向循环。购买者的议价能力较强。
随着移动互联的不断发展,客户体验需求的不断提高,当前的平面体验已经不能完全满足用户的要求,虚拟人以虚拟真实体验来不断迎合客户体验上的需求,来尽量达到真实的效果:同时虚拟人的商业模式也存在多样化发展,与电影公司、游戏发公司进行合作或者开发自身独占的应用软件等来成为自身的盈利点:未来虚拟人会逐步应用到各行各业当中,其巨大的应用潜力仍在不断地开发当中。
当前虚拟人面临诸多技术瓶颈亟待克服:硬件、图像技术、数据等方面瓶颈,这也得虚拟人进一步突破变得困难重重:VR的成本相对较高,导致市场普及速度可能较慢而国内一些价格较低的虚拟人产品则不能给用户很好的体验:虚拟人应用当前仍然集中在视频、游戏为主,内容相对少,导致客户粘性不强。
目前虚拟人行业都处于起步阶段,但整个市场未来增长潜力巨大:根据DigiCapital的数据,至2020年,全球AR与VR市场规模达到1500亿美元,而根据市场研究机构BusinessIntelligence的统计,2020仅年头戴式VR硬件市场规模就达到28亿美元,未来5年复合增长率超过100%。如果能在块市场中抢占先机,未来所能带来超乎想象的回报。
虚拟人行业将迎来大爆发的时代,这种威胁不仅来自于国内所涌现出的诸如暴风魔镜、焰火工坊等虚拟人创业团队的竞争,更加来自于全球各大科技巨头如Facebook、索尼、HTC等进驻VR行业的威胁,未来虚拟人行业将是百花争妍、大浪淘沙的时代。
(1)海康威视[002415.SZ]:是以视频为核心的智能物联网解决方案和大数据服务提供商,业务聚焦于智能物联网、大数据服务和智慧业务,构建开放合作生态,为公共服务领域用户、企事业用户和中小企业用户提供服务,致力于构筑云边融合、物信融合、数智融合的智慧城市和数字化企业。
(2)大华股份[002236.SZ]:是全球领先的以视频为核心的智慧物联解决方案提供商和运营服务商,以技术创新为基础,聚焦城市与企业两大核心业务,不断构建AIoT和物联数智平台能力,围绕客户需求,全面推动城市与企业的数智化升级,为城市、企业、家庭提供一站式智慧物联服务与解决方案。
(3)高德红外[002414.SZ]:是一家专业制造红外热成像系统的高科技企业,是全球领先的红外热像仪专业研制厂商。自成立以来,高德公司立足自主创新,积极开展红外光学、成像电路、图像处理、人工智能、机械结构及系统工程等方面的设计与研究,开发出上百款拥有完全知识产权的红外热像系统及高科技光电系统,各项技术居国内领先、国际先进水平,并拥有“GuideIR”,“MobIR”,“Thermopro”等驰名海外的注册商标。
(4)香港航天科技[1725.HK]:托香港国际化中心地位与WTO四个独立关税区之一的产业优势,以卫星基础产业及卫星数据应用为核心,形成服务商业航天的上下游产业生态圈,推动香港再工业化进程,为香港社会经济的发展开拓新的产业路径,推动全球航天事业蓬勃发展进入快车道。
(5)FIT HONTENG [6088.HK]:鸿腾精密技术(FIT)是行业领先的全球解决方案提供商,为了让世界更美好,我们致力于实现连接能力。愿景是通过创新的技术、产品以及服务,让人们使用各种设备互相连接并且分享经验。
(1)安费诺(AMPHENOL)[APH.N]:成立于1932年,是一家总部位于美国康涅狄格州的跨国电子公司,主要生产和销售各种连接器、电缆组件和传感器等电子产品。该公司的产品广泛应用于通信、航空航天、汽车、工业、医疗保健等领域。
安费诺公司的产品线包括各种类型的连接器、电缆组件、天线和传感器等。这些产品在通信、航空航天、汽车和工业等领域得到广泛应用,例如手机、平板电脑、航空航天设备、汽车电子和医疗设备等。
(2)康宁(CORNING)[GLW.N]:成立于1851年,是一家总部位于美国纽约州的跨国企业,是全球最大的特种玻璃、陶瓷和复合材料制造商之一。该公司的产品被广泛应用于电子、通信、汽车、生命科学和工业等多个领域。
康宁公司的产品线包括各种特种玻璃和陶瓷材料,例如光学玻璃、自清洁玻璃、耐热陶瓷和特种玻璃纤维等。这些产品在通信、电子、航空航天和汽车等领域得到广泛应用,例如手机、平板电脑、LCD电视、光纤和光学传感器等。
(3)TDK[6762.T]:是一家总部位于日本的跨国电子公司,成立于1935年,是一家提供电子元器件、存储介质和传感器等各种电子产品的领先制造商。该公司的产品被广泛应用于消费电子、信息通信、汽车电子、工业自动化、医疗保健、能源管理等领域。
TDK公司的产品线包括各种类型的电子元器件,例如电容器、电感器、电源、声音器、磁性材料和传感器等。这些产品在广泛应用于消费电子、汽车电子、通信和计算机系统等领域。此外,该公司还生产用于存储介质的磁性材料、磁头和硬盘驱动器等。
(4)安川电机[6506.T]:是一家总部位于日本的跨国企业,成立于1915年,是一家领先的工业机器人和自动化设备制造商。该公司在世界各地拥有分支机构和销售网络,其业务涉及自动化控制、电机和驱动器、运动控制、机器人、信息技术和环保技术等领域。
安川电机公司的机器人产品在全球范围内得到了广泛的应用,其工业机器人被用于汽车制造、电子制造、半导体制造、食品加工等各个领域。该公司的机器人产品线涵盖多个领域,包括SCARA机器人、协作机器人、Delta机器人、6轴机器人和其他定制机器人等。
(5)OMRON[OMR.DF]:是一家全球性的高科技公司,总部位于日本京都市。该公司成立于1933年,起初是一家电磁继电器制造商,随着时间的推移,逐渐扩展业务范围,现在已成为一家提供广泛自动化、电子和医疗保健产品的公司。
OMRON公司的业务涵盖许多不同领域,包括工业自动化、电子元器件、医疗保健、环保和社会系统。该公司开发和制造各种电子和机电设备,例如传感器、工业自动化系统、交通设备、医疗设备、家用电器和游戏机等。
虚拟数字人是一种新兴的技术,随着人工智能、机器学习、计算机视觉和自然语言处理等技术的持续不断的发展和进步,虚拟数字人行业的未来发展前景非常广阔。
首先,虚拟数字人将在许多不同的行业和领域得到大范围的应用。在娱乐和游戏行业中,虚拟数字人已经成为游戏和动画制作的重要工具。随着技术的不断发展,虚拟数字人将能够更加逼真地模拟人类行为和动作,为电影、游戏、虚拟现实等领域提供更加真实和身临其境的体验。
其次,虚拟数字人还将在商业和工业领域得到普遍应用。在医疗保健领域,虚拟数字人可以用于模拟手术、教学和培训等方面,为医生和护士提供更加实用的工具和技术支持。在制造业和物流行业中,虚拟数字人可以帮助企业优化生产流程、提高工作效率和质量,降低生产成本和资源浪费。
此外,随着虚拟数字人技术的不断发展,人们也将能够更好地利用虚拟数字人来解决一些现实世界中存在的问题。例如,虚拟数字人可以用于在线教育和培训、远程工作和协作、虚拟旅游和文化体验等方面,为人们提供更加灵活和多样化的学习和生活方式。
总之,虚拟数字人行业的未来发展前景非常广阔,将在各个行业和领域得到大范围的应用。随着技术的不断发展和应用的深入,虚拟数字人将成为人们生活和工作中的重要组成部分,为人们带来更加智能、高效、方便和舒适的生活体验。