qvod xfplay播: 打造梅兰芳先生的孪生数字人有多难 qvod xfplay播_qvod xfplay播

点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:打造梅兰芳先生的孪生数字人有多难
首页> 文娱频道> 资讯 > 正文

打造梅兰芳先生的孪生数字人有多难

来源:科技日报2021-11-28 09:39
咪乐|视频|直播|下载 白子画、梅长苏、杀阡陌、明台等入选年度最受关注电视剧角色,其中电视剧《花千骨》中的白子画,凭借微博影响力、视频评论热度、论坛影响力三个满分和整体评分的成绩拔得头筹。

调查问题加载中,请稍候。
若长时间无响应,请刷新本页面

  某公司推出数字人美妆博主,一条短视频收获百万粉丝;新华社推出数字记者,“TA”也是全球首个数字航天员,吸引众多视线……如今虚拟数字人概念火热,但要打造真正高逼真、超写实的数字人,还有大量技术问题要解决。

  近日,“数字梅兰芳”大师复现项目启动仪式在北京梅兰芳大剧院举行。由北京理工大学参与研制的全国首个高精度京剧数字人“梅兰芳孪生数字人”在仪式现场亮相。

  该项目以京剧大师梅兰芳先生26岁时的模样为原型,对其进行复现。项目由中央戏剧学院、北京理工大学共同发起,腾讯公司提供技术支持,受到“北京高校卓越青年科学家”计划资助,并得到了多家单位和梅兰芳先生家人及弟子的大力支持。

  北京理工大学光电学院研究员翁冬冬告诉科技日报记者,未来他们将不断进行模型实时化升级,并在多个场景应用落地,力争打造国内第一套真正意义上的可实时交互的“京剧数字人”。

  扫描,分解,构建

  做数字人表情有讲究

  虚拟数字人是存在于数字世界的“人”,利用信息技术与人工智能技术,将人全身及肢体动作全方位地进行数字化、可视化复制,最终将现实生活中的人精确地在数字世界中模拟构建出来。

  做虚拟数字人,本身就是啃一块硬骨头。因为人天然就对人的面部特别敏感,虚拟数字人做得稍有不到位,就会让人觉得怪异。

  所以虚拟数字人的一大考验,就是表情。

  研究课题组找到和年轻时梅兰芳先生长相相似的演员,让他模仿梅先生的表情神态,然后利用光场采集技术,采集真实演员毫米级精度的三维数据,并以计算光学为基础构建物理属性皮肤纹理,从而实现对真实演员的高复原度重建。

  “其实一个人的表情神态是很难复现的。我们要扫描演员肌肉的走向、脸部的皱褶等。”翁冬冬说。他们需要将演员做出的表情,编码成几百个基础表情元素。比如完全闭上左眼、左眼半睁开、完全闭上右眼、嘴角向上微微扬起……但人在做表情时,脸上很多部位是联动的。所以,先要将已扫描出的表情拆分成单个的表情元素,再根据实际需要,重新将这些元素组合起来,构成新的表情。

  获取了这些表情之后,课题组还需要将演员脸上的表情,迁移到数字人梅兰芳先生的脸上。“京剧数字人,对眼神和表情的要求非常高。”翁冬冬说。

  由于已经无法采集到梅兰芳先生的真人三维数据源,在收集了大量梅先生的照片作为数字资产构建的参照后,研究团队邀请中央美术学院的师生以历史照片为依据完成了梅兰芳先生的实体肖像。在技术团队与雕塑团队的反复磨合后,完成了以三维数字化为目标的真人雕像数字人制作。

  接下来,他们还需要完善数字人的声音能力,完善数字人的实时语音交互能力,让数字人真正“活起来”。

  消失的布料,失传的手艺

  数字化也是一种抢救性保护

  难题,不仅在于技术。

  这一次,他们这帮技术出身的科研人员,切实感受到了科技和传统艺术的碰撞。“学京剧的人,对传统是很敬畏的,也是相当讲究的。”翁冬冬说。

  梅兰芳先生服装的数字化,就颇费一番周折。

  “现在的布料,和民国时期的布料是不一样的。”翁冬冬说,为了做出接近的衣服质感,项目的另一合作方、中央戏剧学院传统戏剧数字化高精尖中心主任宋震团队,通过各种关系找到了民间收藏的民国留存布样,以其为基础进行逼真服饰材质模拟。

  梅先生戏服上用到的线,叫金线,是用棉绳绕着金箔做出来的。团队被告知,这线现在没法做,因为工艺没有了,手艺失传了,而且当年的棉和现在的棉,根本就不一样。

  有此问题的还有头冠。团队找到专门做盔头的老师傅,来复现京剧《穆桂英出征》中的头冠。但老师傅说,制作这东西,没有图纸,手艺都是口口相传的,靠的是自行领悟。

  这种“只可意会不可言传”,也给数字化扫描带来了难度。

  在困难中,翁冬冬也更深刻体会到这一项目的意义——它其实也是在数字化保存那些正在消失的东西。

  “做梅兰芳先生的孪生数字人,不仅是一个技术实现的过程,也是一个科技和传统文化融合的过程。”翁冬冬说,亲身实践,才会碰到纸上谈兵时不曾想过的问题。融合没那么简单,确实需要双方的磨合、互相倾听和耐心沟通。

  目前,最为人熟知的数字人,当属虚拟偶像。一些主要采用AI换脸技术的数字人,也活跃在市场上。翁冬冬说,从长远来看,三维化的数字人数字资产价值会更高。特别是元宇宙,天然就需要以三维为基础,所以数字人是构成元宇宙的重要基础元素。

  “未来数字人可以成为人机交互的界面,成为人工智能的一个入口。毕竟人还是更容易接受和‘人’沟通交互。”翁冬冬说,但要让高逼真的数字人一颦一笑一举一动都不出戏,还有很长的路要走,“还是要冷静看待数字人的火热。”记者 张盖伦

[ 责编:张晓荣 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 黑龙江亚布力:感受冰雪魅力

  • 六中全会精神在基层|精确到“分钟”的改革让中欧班列更畅通

独家策划

推荐阅读
欧洲5G生态系统论坛“5G Techritory”25日在拉脱维亚首都里加闭幕,来自多国的信息和通信技术专家、决策者等就在欧洲及其他地区建立强大统一的5G生态系统进行探讨。
2021-11-28 15:23
近日,中国农业科学院植物保护研究所植物病害生物防治研究创新团队揭示了植物病原细菌丁香假单胞菌(Pst DC3000)通过激活植物茉莉酸信号来抑制水杨酸信号,从而抵御植物免疫、促进病原菌侵染的分子机制。
2021-11-28 11:14
2015年钛米机器人在上海创立,创始人潘晶毕业于上海交通大学控制工程专业,有着丰富的机器人研发经验。
2021-11-28 15:31
2021-11-28,陈茂带领的团队顺利实施了西部地区首例TAVR手术,今年3月,该团队在院内完成了第1000例TAVR手术,也是中国大陆单一团队TAVR例数首次破千。
2021-11-28 15:16
近日,全球首例光学导航机器人辅助全口无牙颌种植及数字化即刻修复手术在北京完成。
2021-11-28 15:14
北京高压科学研究中心研究员缑慧阳等在高温高压条件下合成了一种新形态的金刚石——次晶态金刚石,填补了非晶态结构和晶态结构之间原子排列尺度上的缺失环节。
2021-11-28 15:08
近日,中国工程院院士、西北农林科技大学植物保护学院教授康振生团队克隆了小麦抗旱基因TaNAC071-A,并揭示了其调控小麦抗旱性的分子机理。
2021-11-28 15:06
早在上世纪70年代,位于合肥的中国科学院等离子体物理研究所(以下简称中科院等离子体所)就开始了核聚变相关研究;90年代,开始了超导托卡马克的研究。
2021-11-28 14:57
张晟介绍,随着警方反电诈的不断深入,近年来诈骗分子转变犯罪手法,大肆使用不法App实施诈骗,危害巨大。
2021-11-28 10:45
北京高压科学研究中心研究员缑慧阳等在高温高压条件下合成了一种新形态的金刚石——次晶态金刚石,填补了非晶态结构和晶态结构之间原子排列尺度上的缺失环节。
2021-11-28 10:33
根据研究结果,科研人员进一步提出,及时更新疫苗的S蛋白氨基酸序列、合理安排加强免疫的时间或是更经济可行、更科学的免疫策略。
2021-11-28 10:13
研究人员通过先进的放射性碳测年方法确定吊坠、锥子和骨头碎片的年代为旧石器时代早期(距今4.2万至3.7万年之间),这种测年方法通过检测放射性碳的数量确定有机样品的年代。
2021-11-28 10:11
记者25日从中国科学技术大学获悉,该校郭光灿院士团队李传锋、柳必恒研究组携手合作者,首次实现了高维量子纠缠态的最优检测。
2021-11-28 10:00
记者25日从中国载人航天工程办公室获悉,该办公室近日正式发布《关于征集通过天舟系列货运飞船搭载科学技术试(实)验和应用项目的机会公告》,面向社会公开征集搭载项目。
2021-11-28 09:36
冬奥高精度天气预报系统在今年2月“相约北京”冬奥雪上项目测试活动以及当前的冬奥测试活动期间接受了实战检验。
2021-11-28 09:33
不少网民发现,手机扫一扫就能轻松开通各种会员包月、包年服务套餐,但稍不注意就可能掉进商家设好的“坑”。
2021-11-28 09:32
11月24日,2021中国网络媒体论坛责任论坛在广州举行,论坛由中央网信办、中央广播电视总台、广东省委网信委主办,光明网、微博、广东省互联网业联合会共同承办,主题是“责任:共治共享”。中央网信办副主任、国家网信办副主任牛一兵,光明日报社总编辑王慧敏,广东省委常委、宣传部部长陈建文等领导和嘉宾出席论坛,中国科协副主席、书记处书记孟庆海以视频方式出席论坛。
2021-11-28 19:38
“对于我们来说,要注重粉丝‘流量’的质量,因为在他们之中,我们希望培养出对科学有真正信仰、会成为科学的‘死忠粉’、甚至将来加入到科学研究中来的人。”在11月24日举行的2021中国网络媒体论坛责任论坛上,“科普界网红”、中科院物理所副研究员李治林表示,希望通过科普,让科学成为“顶流”。
2021-11-28 18:20
在11月24日举行的2021中国网络媒体论坛责任论坛上,百度副总裁、总编辑张东晨表示,“5G时代,互联网平台作为内容的传播载体,应该用价值观引领技术,让算法成为用户获取优质信息服务的载体,让大流量为正能量服务。”
2021-11-28 18:20
11月24日,在以“责任:共治共享”为主题的中国网络媒体论坛责任论坛上,腾讯互动娱乐副总裁崔晓春表示,腾讯正通过各项新技术、新措施在未成年人保护领域的探索和应用,不断地调整升级防沉迷方案。
2021-11-28 18:20
加载更多
百度