继在2019网络春晚中出现的与撒贝宁十分相似的虚拟主持人“小小撒”之后,近期播出的《2019主持人大赛》也引入了一项虚拟形象生成技术——“在线大众评审”。大赛主持人撒贝宁说,这个节目最大亮点是智能大众评委席,通过个性化人工智能(Personal AI),每位智能大众评委身后都是一个真实的自己,即这些在线评审的虚拟形象均根据真人评审生成、在线完成评审。
个性化人工智能技术是如何实现的?科技日报记者近日采访到独家支持这项“黑科技”的相关负责人。
通过自拍图片几秒生成虚拟形象
在节目现场,400名在线大众评审通过手机客户端自拍,即能获得属于自己的三维虚拟形象,当大众评审在线收看节目并对选手打分时,三维虚拟形象可代表其出现在千里之外的演播室大厅的虚拟观众席上,“观看”时还会像真人一样富有表情且轻微摇摆身体……
“目前我们可以实现通过一个人的单张自拍图片,几秒钟即可生成三维虚拟人形象。”美国南加州大学博士、偶邦智能首席科学家王睿哲说。
据介绍,一般传统算法试图使用一个光学成像模型来反推可以解释当前自拍的最佳人脸形状,这种方法的弊端是:假设的光学成像模型过于简单,无法真正模拟现实中人脸与光影交互的复杂情况;缺乏大量的三维人脸数据模型,很难有效训练一个深度学习模型。
针对这种情况,“在算法上可以采用视觉特效技术,从一个较小的三维人脸数据库,合成大量高精度的人脸自拍图片用于训练深度学习模型,然后利用迁移学习技术,把在数百万张图片上训练的人脸识别网络进一步精化训练,接着利用基于对抗神经网络的图片风格迁移技术,对自拍照去光影。”王睿哲说。
在效果上,这种单张自拍虚拟人生成技术可实现高相似度低面数的人脸几何形状,有效通过手机端形成高分辨率且去光影的人脸贴图,可以在各种不同光影下进行融入场景的逼真渲染。
形成在线大众评审的虚拟人像,除了建立及维护每位在线大众评审的形象模型之外,技术团队还利用了实时面部追踪技术和面部识别技术保证评审的连线效果,并对现场形象各异的大众评审3D形象进行实时渲染。
那么,如何做到让虚拟人脸部如真人一样富有生动表情和动作呢?王睿哲表示,可以通过面部动作捕捉技术实现。首先利用随机森林算法实时在人脸定位特征点,即脸部轮廓,五官如眉毛、眼睛、鼻子和嘴角等,然后算法利用这些特征点进而逆向推导出一个通用面部肌肉运动模型参数,用于驱动用户的虚拟人模型,实现虚拟人与真实人面部动作同步的效果。
催生新型互动生活消费模式
据介绍,为了实现数百个虚拟人的实时渲染效果,团队对每个模型的服装,头发等进行大量减面数的优化处理。还采用了阴影预处理技术减少实时渲染的负荷,不同细节技术即近景采用高细节渲染,远景采用低细节渲染,以节省渲染运算成本。
“世界将因为人工智能技术变得更近更平。我们正在尝试实现每个人都能拥有个人专属的智能虚拟形象,仿佛在平行世界里拥有另一个智能化的自己。通过智能虚拟观众席的系统,即使是在世界各地的人,都可以出现在任何一个国家的电视、互联网屏幕上,与当地观众进行沉浸式互动。不仅如此,那个虚拟数字形象的他(她)长得像用户本人,还能在一定时间内自我完善和进化,如在声音特征上学习用户,最终达到逼真的状态。”偶邦智能CEO郑毅表示。
据介绍,在电视节目中,除虚拟形象设计以外,人工智能在大众娱乐行业的应用还包括内容制作阶段的选角、策划、拍摄、剪辑,观众观看阶段的算法推送、面部识别、机器学习以及将影视娱乐产品变现阶段的算法推送及分析等。
郑毅说,智能虚拟人技术不仅可以通过AI技术驱动虚拟人的表情和动作,降低视频内容的制作成本,而且通过推出有人设的智能虚拟人,像虚拟主持人、虚拟主播、专属的企业虚拟代言人等,可以延展工作时长,提高产能,创造新的数字经济价值。
比如,有相关证券机构已经定制专属的虚拟代言人,通过快速制作互动短视频,为投资者提供投资者教育等服务。在5G和AI构建的数字经济里,智能虚拟人不但可以降低成本,更令人关注的是其正在催生新型互动生活消费模式的出现。
郑毅表示,人机共生时代新互动生态体系的构建,让生活变得更高效、有趣,为用户带来前所未有的虚拟社交体验。AI虚拟形象不仅是用户的高智能分身,可以帮忙打理各种事情,甚至在不久的将来,虚拟人或许能够有助人们在人间留住已故亲人或挚爱的生动形象,从某种意义上讲,让人类获得“永生”。
电脑开机黑屏只有鼠标怎么办 电脑开机黑屏只有鼠标解决办法? 电脑开机后会显示桌面,不显示桌面的原因有设置原因、系统本身原因和病毒破坏原因。方法一:设置原因的解决办法1、开机后如果不显示桌面的
笔记本键盘打不出字 手提电脑键盘打不出字的原因是什么? 手提电脑因为其体积小、携带方便,所以受到广大消费者的喜爱,在日常办公中很多人都喜欢将手提电脑带在身边。但是对于一些刚刚接触手提电脑
mdf是什么文件有什么用?mdf文件怎么打开? mdf是什么文件MDF(Mirror Disc File)文件是光盘镜像文件的一种,我们可能经常接触诸如系统文件的ghost镜像文件或者iso镜像文件等。同样的
电脑常见故障的维修技巧 维修大全及解决方法 电脑出现的故障原因扑朔迷离,让人难以捉摸。并且由于Windows操作系统的组件相对复杂,电脑一旦出现故障,对于普通用户来说,想要准确地找
io设备错误怎么解决 解决方法有哪些? io设备通俗来说,就是计算机的输入输出设备,键盘就是计算机的输入设备,而打印机等东西就是计算机的输出设备。Io设备作为计算机的重要组成
华兴转债发行公司是哪家 该公司主营业务是做什么的? 据最新消息,华兴转债将于2021年12月20日起在上海证券交易所挂牌交易。不少人好奇,华兴转债发行公司是哪家?该公司主营业务是做什么的?如果
股票分红需要持股多久 购买股票要看哪几个面? 随着社会的不断进步,现在越来越多老百姓投资股市了,股票分红是上市公司将利润拿出来送给投资者的一种方式,大多数人对于股票分红理解的不
花呗影响个人负债率吗 影响借款人个人负债率的因素还有哪些? 如今互联网发展越来越快速,市面上的小额贷款也越来越多。支付宝平台有不少小贷产品,大家所熟知的蚂蚁花呗。日前,有一个朋友询问,花呗影
彝人老家:深度根植贫困县,辐射带动你我他 凉山州位于四川西南边陲,广袤无垠,层峦叠嶂,北起大渡河,南临金沙江山山水水在亘古岁月中见证着沧海桑田。山高谷深、林峰苍茫,是典型的深度
前三季度完成交通固定资产投资25632亿元 同比增长2% 记者今天从交通运输部获悉,前三季...
1-9月份第一产业投资10395亿元 同比增长14.0% 据国家统计局官网消息,1-9月份,...
1-8月河南省货物贸易保持高速增长 商务运行稳中有进 据河南省商务厅官网消息,2021年1-...
医药板块投资性价比显现 基金公司密集调研医药上市公司 12月14日,资本邦了解到,随着年内...
拓荆科技针对科创板第二轮问询相关问题进行问询回复 盈利能力不足、产品类型单一且周转...
立讯精密涨6.32%目前报价36.99元 这家企业主要是干什么的? 据最新消息显示,立讯精密涨6 32%...
国漫多利好迈入黄金期 头部动漫公司扎堆IPO 今年以来,动漫市场绽放异彩。暑期...
4月1日起 北京市燃油车不得占用充电专用泊位 充电站必须配专人巡检 今日,记者从北京市市场监管局网站...