当前位置:首页 > 股市动态 > 人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力

人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力

2026年01月20日67640

人形机器人在学习真实的嘴唇动作。图片来源:美国哥伦比亚大学

人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力
图片来源于网络,如有侵权,请联系删除

  科技日报北京1月19日电 (记者张梦然)美国哥伦比亚大学科学家设计出一种新型框架,使人形机器人面部能够根据音频生成逼真的唇部动作,实现与人类语音的同步。该技术还展示了较强的泛化能力,可推广至包括法语、汉语和阿拉伯语在内的多种语言,即使这些语言并未出现在训练数据中。研究团队在发表于最新一期《科学·机器人学》上的论文中指出,这一进展是朝着构建不仅能执行功能,还能进行人性化交流的机器人迈出的重要一步。

人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力
图片来源于网络,如有侵权,请联系删除

  在对话中,如果机器人的唇部动作与声音不匹配,会显得呆板且不自然。然而,现有机器人普遍缺乏执行精细口部动作的灵活性,能实时将语音转化为自然唇部运动指令的技术也寥寥无几。

人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力
图片来源于网络,如有侵权,请联系删除

  研究团队在2024年曾发表研究,描述了一种人形机器人面部可以预测人类的微笑并同时再现该表情。在此基础上,为更加精细化唇部与声音的匹配,团队设计了一套学习流程:首先采集机器人唇部运动的视觉数据,用于训练模型并生成运动参考点;随后通过一个名为“面部动作转换器”的模块产生运动指令,使机器人的唇部能够流畅配合不同词语。他们还专门研制了一种人形机器人面部结构,采用柔软硅胶皮肤,配合磁性连接器,具备10个自由度,可驱动复杂的唇部运动。其唇部结构能形成覆盖24个辅音和16个元音的各种口型。

  在验证过程中,团队借助ChatGPT生成测试语句,并合成了具有理想唇部动作的视频作为对比基准。结果表明,该方法在5种比较方案中表现最优,其生成的唇部动作与理想视频差异最小。此外,该框架还能为11种不同语音结构的非英语语言生成自然的唇部同步效果。

  研究团队推测,这类人形机器人在教育、老年护理等领域具有应用潜力。但他们也强调,未来的设计工作需格外谨慎,以防止技术被滥用。

  【总编辑圈点】

  现在,AI让虚拟人物动嘴说话已经“不在话下”,然而让机器人做到这点还相当困难。大多数机器人“说话”时并不动嘴,即使动嘴,也只是象征性一张一合。这次,科研人员试图让机器人拥有人类一般细腻、精准的唇部动作,教它们通过合成视频以“照镜子”的方式学习;还开发了硅胶皮肤,设计了面部机械系统。结果表明,机器人可以“学会”多种语言的唇部动作。不过,研究也不禁让人思考,当机器人真的开口说话,“恐怖谷效应”是会加重还是减轻?

【责任编辑:冉晓宁】
    阅读下一篇:

              扫描二维码推送至手机访问。

              版权声明:本文由经济快讯网发布,如需转载请注明出处。

              “人形机器人可完成多语言逼真唇形动作 在教育和老年护理领域具应用潜力” 的相关文章

              助力山区儿童学会自我保护 字节跳动公益启动“益童普法小课堂”

              助力山区儿童学会自我保护 字节跳动公益启动“益童普法小课堂”

                暑期已到,为加强未成年人法律保护意识,助力乡村儿童健康成长,近日,北京字节跳动公益基金会联合正义网络传媒,启动了系列“益童普法小课堂”公益活动。该普法课程将持续半个月,走进贵州10个区县,为公益项目益童乐园的孩子们带来普法课。图片来源于网络,如有侵权,请联系删除  据悉,“益童普法小课堂”公益活...

              跨国公司税收战争阴云密布 美国停止支持全球税收协议有何影响?

              跨国公司税收战争阴云密布 美国停止支持全球税收协议有何影响?

                在“特朗普2.0政府”的全球贸易争端版图中,关税并不是唯一的议题。与美股超级巨头息息相关的全球企业税问题,现在已经“子弹上膛”。图片来源于网络,如有侵权,请联系删除   在周一晚间公布的总统备忘录中,特朗普指示美国财政部,撤回美国对经合组织全球税收协议的支持,并要求该部门制定美国公司遭到域外国...

              “特朗普币”暴跌!苹果公司评级遭下调

              “特朗普币”暴跌!苹果公司评级遭下调

                【导读】特朗普夫妇发行的代币“TRUMP”和“MELANIA”暴跌,公司评级遭到下调,股价大跌图片来源于网络,如有侵权,请联系删除   美股情况图片来源于网络,如有侵权,请联系删除   1月21日晚间,美股开盘后,道琼斯指数涨超300点,指数则基本持平,标普500指数上涨。图片来源于网络,如...

              谈关税、压油价、解决俄乌冲突 特朗普在世界经济论坛上说了这些事

              谈关税、压油价、解决俄乌冲突 特朗普在世界经济论坛上说了这些事

                当地时间1月23日,美国总统特朗普在世界经济论坛2025年年会上发表视频讲话时表示,如果不在美国生产产品,就将面临“数千亿美元甚至数万亿美元”关税。图片来源于网络,如有侵权,请联系删除   不在美国本土生产就要交税图片来源于网络,如有侵权,请联系删除   特朗普表示,呼吁企业在美国本土生产...

              淘宝发布2025春节送礼榜,寒假作业上榜 网友:大过年的,放过小孩哥!

              淘宝发布2025春节送礼榜,寒假作业上榜 网友:大过年的,放过小孩哥!

              春节送礼送什么?当代人的新年心意和祝福,全装在购物车里。图片来源于网络,如有侵权,请联系删除1月上旬,淘宝正式推出“送礼物”功能。临近春节,新功能为春节送礼打开了新姿势,带动年节礼品热销。1月21日,淘宝上线新年许愿活动,截至1月23日0点,已经有超过6000万人在淘宝许下了新年愿望。美好的祝福与愿...

              “接”住梦想,“淘”个好彩头,淘宝祈愿以心愿点亮奋斗之路

              “接”住梦想,“淘”个好彩头,淘宝祈愿以心愿点亮奋斗之路

              从“家人健康”到“国泰民安”“世界和平”……伴随着春节脚步的临近,淘宝与春晚携手推出的“上淘宝许愿,瓜分25亿”活动火热上演,既为这个节日增添了一份特别的期待与惊喜,也戳中了普罗大众向往新年新气象、“淘个好彩头”的心态。图片来源于网络,如有侵权,请联系删除淘宝祈愿,让每一个梦想都被看见数据显示,活动...