90%国际3A游戏发行商的首选,一文揭秘语音驱动面部动画生成技术!

news2024/11/19 19:37:54

在科技迅猛发展的时代,AI 正以破竹之势重塑着我们的世界。从激烈的“百模大战”到应用层生态的“百花齐放”, AIGC 产业迎来了快速增长的爆发期。AIGC 引领的创新应用,正推动着包括动漫游戏产业在内的各行各业加速升级。随着 AIGC 技术的不断进步和应用的深入,我们有理由相信,它将为动漫游戏产业带来更加广阔的发展空间和无限的可能性。

近日,第二十届中国国际动漫节国际动漫游戏商务大会 (iABC2024) 在杭州圆满落幕。据小智了解,为进一步展示 AIGC 在动漫数字文化领域的产业成果,推动动漫游戏产业持续高质量发展,本届国际动漫游戏商务大会特设以“体验革新,效率加速度”为主题的 AIGC 专场。作为 AI 技术的先锋实践者,网易数智游戏行业部受邀参加本次大会,携国际前沿的语音驱动面部动画生成技术亮相本次大会的 AIGC 专场。在大会现场,凭借领先的技术实力和一系列丰富的实践案例,赢得现场观众的热烈反响和高度认可。

图片

网易数智游戏行业部凭借着领先的语音驱动面部动画生成技术以及丰富的落地案例,吸引众多嘉宾驻足流连。

 

01. AI 革新动画制作 , 网易数智携SG亮相

在大会 AIGC 专场上,网易数智 AI 解决方案架构师陈春旭为各位动漫游戏人带来了一场精彩分享——《AI赋能与革新,语音驱动面部动画生成引领动画制作与实时交互新范式》,吸引多人探讨交流。小智有幸参与听讲,借此文章将会上干货内容分享给大家~

图片

在大会现场,网易数智特设置了该项技术的互动体验专区,在亲身体验之后,不得不感叹一句,语音驱动面部动画生成技术的运用无疑对于动画制作的周期制作质量以及效果带来革命性的改变,它不仅缩短了制作时间,还提高了作品的质量,增强了动画的生动性和感染力。小智相信,语音驱动面部动画生成技术的应用和推广将会为动漫游戏产业带来前所未有的“质”的飞跃。

如今,该技术已被应用于《最后生还者2》、《霍格沃茨遗产》、《High On Life》、《生化危机》、《堡垒之夜》、《星战绝地》、《古墓丽影》等游戏中。究竟有何魔力促使众多知名游戏企业选择?Speech Graphics 技术是如何为游戏、动画、直播以及广告制作等多个领域带来深远的变革?

图片

会上,网易数智给了我们答案。

例如,基于语音学、肌肉动力学及机器学习的交叉应用,能够带来非常逼真的效果,不仅能精确地驱动角色的嘴型,还能识别和表达情绪,并生成丰富的表情,甚至对角色的眼球、舌头和头部的动作都能实现驱动,为动画增添生动性与真实感。而且,语音驱动面部动画生成技术支持适配所有语言,包括虚构语言,利用语言模型能够对文本输入进行分析,进而提高动画质量。此外,该技术还支持各种类型的角色,包括非人类的角色,极大地拓宽了动画制作的创意边界。游戏AI智能体解决方案戳我了解!

感兴趣的朋友,可以✉:LTT936

实时性是语音驱动面部动画生成技术的另一大亮点。它不仅能够处理音频文件,还能处理音频流,实时生成动画,这对于需要实时交互的场景来说至关重要,能够为用户带来更加流畅和自然的交互体验。更值得一提的是,批量处理功能,它能够同时并行处理成百上千个音频文件,极大地提高了生产效率,缩短了动画制作的周期,这不仅为企业节省了大量的时间和成本,也为动画制作人员释放了更多的创意空间。

SGX 作为 Speech Graphics 的线下生产力套件,用于制作 CG 宣传片、游戏过场动画、剧情动画等预制动画场景,它支持语音+文本(可选)的输入,具备强大的后期精调功能。此外,支持与任何现有的工作流程、艺术风格和骨骼绑定系统无缝结合,极大地提升了动画制作的兼容性和灵活性。为进一步简化创作过程,SGX 还提供了 Maya 和 UE 插件,使动画师能够直接在这些流行的 3D 建模和游戏开发软件中使用 SGX 功能,无需进行繁琐的导入导出操作。

图片

在《堡垒之夜》中,使用了 SGCom 实时系统,玩家在游戏大厅中通过麦克风与朋友对话时,玩家的角色也同时生成对应的脸部动画。

SG Com 作为 Speech Graphics 的实时驱动方案,能用于支持跟虚拟人交互、用户的 Avatar 动画同步、游戏 NPC 交互等各种开放性的实时交互场景。据了解,SG Com 非常轻量化且易于接入,支持 UE 和 Unity 甚至是自研引擎,也支持各种操作系统,还能同 SGX 打通享受其精调效果,此外还能凭借最多 50 毫秒的延迟实现非常高的性能表现。

“高质量 + 灵活性 + 兼容性 + 调整工具 = 更好的效果,更高的效率,更低的成本”,通过此次分享,小智希望让更多的动漫游戏人看到并了解到 Speech Graphics 技术如何成为低成本且高质量的生成面部动画的不二选择,以及它如何助力创作者将创意变为现实。小智也期待这项技术在未来能够被广泛地应用于各个领域,为全球的创作者带来更多可能性,推动整个动漫游戏产业迈向更高效、更高质量的发展新阶段。

作为网易旗下专注于企业服务的部门,网易数智一直都在积极为动漫游戏产业贡献力量,并在不断的实践中得到了客户的广泛认可。比如自研的游戏 AI 智能体技术,为玩家提供接近真人的游戏体验,目前已广泛应用于棋牌、策略和角色扮演等游戏类型中。此外,正如大会互动体验专所见,网易数智通过携手英国 Speech Graphics 公司,推出了语音驱动的面部和角色动画生成技术,这项技术不仅大幅降低了动画制作周期,还显著得提升了动画呈现效果。另外,在 AI 美术建模、AI 生成音乐、智能 NPC、AI 智能客服等创新技术的应用方面,网易数智也在不断地让技术去落到实地,助力企业提高内容生产效率和质量,为游戏动漫产业的持续繁荣贡献力量。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1791707.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SVN安装详细教程

📖SVN安装详细教程 ✅1. 下载✅2. 安装✅3. 使用 ✅1. 下载 官方地址:https://tortoisesvn.net/downloads.html 123云盘地址:https://www.123pan.com/s/4brbVv-rsoWA.html ✅2. 安装 双击TortoiseSVN-1.14.6.29673-x64-svn-1.14.3.msi安装…

Kafka消费者api编写教程

1.基本属性配置 输入new Properties().var 回车 //创建属性Properties properties new Properties();//连接集群properties.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG,"node1:9092,node2:9092");//反序列化properties.put(ConsumerConfig.KEY_DESERIALIZER_CL…

云端狂飙:Django项目部署与性能优化的极速之旅

Hello,我是阿佑,这次阿佑将手把手带你亲自踏上Django项目从单机到云端的全过程,以及如何通过Docker实现项目的无缝迁移和扩展。不仅详细介绍了Docker的基本概念和操作,还深入探讨Docker Compose、Swarm和Kubernetes等高级工具的使…

车辆路径规划之Dubins曲线与RS曲线简述

描述 Dubins和RS曲线都是路径规划的经典算法,其中车辆运动学利用RS曲线居多,因此简单介绍Dubins并引出RS曲线。 花了点时间看了二者的论文,并阅读了一个开源的代码。 Dubins曲线 Dubins曲线是在满足曲率约束和规定的始端和末端的切线&#…

【python】IndexError: Replacement index 1 out of range for positional args tuple

成功解决“IndexError: Replacement index 1 out of range for positional args tuple”错误的全面指南 一、引言 在Python编程中,IndexError: Replacement index 1 out of range for positional args tuple这个错误通常发生在使用str.format()方法或者f-string&am…

网络编程 —— Http使用httpClient实现页面爬虫

先去找类型的a标签 取出图片所在网址 取出https://desk.3gbizhi.com/deskMV/438.html 搭建Form界面 Http类 public static HttpClient Client { get; } static Http() {HttpClientHandler handler new HttpClientHandler();//处理消息对象//ServerCertificateCustomValidat…

NeuralForecast TokenEmbedding 一维卷积 (Conv1d) 与矩阵乘法

NeuralForecast TokenEmbedding 一维卷积 (Conv1d) 与矩阵乘法 flyfish TokenEmbedding中使用了一维卷积 (Conv1d) TokenEmbedding 源码分析 在源码的基础上增加调用示例 下面会分析这段代码 import torch import torch.nn as nn class TokenEmbedding(nn.Module):def __i…

刷机 iPhone 进入恢复模式

文章目录 第 1 步:确保你有一台电脑(Mac 或 PC)第 2 步:将 iPhone 关机第 3 步:将 iPhone 置于恢复模式第 4 步:使用 Mac 或 PC 恢复 iPhone需要更多协助? 本文转载自:如果你忘记了 …

手写mybatis-预编译sql语句

sql表 mybatis数据库中的gxa_user表 /*Navicat Premium Data TransferSource Server : rootSource Server Type : MySQLSource Server Version : 80028Source Host : localhost:3306Source Schema : mybatisTarget Server Type : MySQLTarget…

图解DSPy:Prompt的时代终结者?!

大模型技术论文不断,每个月总会新增上千篇。本专栏精选论文重点解读,主题还是围绕着行业实践和工程量产。若在某个环节出现卡点,可以回到大模型必备腔调重新阅读。而最新科技(Mamba,xLSTM,KAN)则提供了大模…

Windows Linux下查看静态库,动态库各种命令的总结

Windows环境下查看库文件 静态库(.lib) 使用lib.exe查看库内容 命令示例:lib /list C.lib使用dumpbin.exe查看库的详细信息 命令示例:dumpbin /headers C.lib动态链接库(.dll) 使用dumpbin.exe查看DLL的导出信息 命令示例:dumpbin /exports B.dll

选择富唯智能的可重构装配系统,就是选择了一个可靠的合作伙伴

在数字化、智能化的浪潮中,制造业正迎来一场前所未有的变革。而在这场变革中,富唯智能凭借其卓越的技术实力和创新能力,成为引领行业发展的领军企业。选择富唯智能的可重构装配系统,就是选择了一个可靠的合作伙伴,共同…

注册用户超6亿,哈啰发布年度可持续发展暨ESG报告

6月5日,哈啰发布《2023年度可持续发展暨ESG报告》,深入全面地展示2023年哈啰在可持续发展领域的举措和阶段性成果。 报告显示,哈啰始终遵循健康可持续的商业模式,以科技创新推动出行进化,在促进行业发展、环境友好、社…

Spring Boot 应用打 WAR 包后无法注册到 Nacos怎么办

你好,我是柳岸花开。 在微服务架构中,服务注册与发现是至关重要的一环。Nacos 作为阿里巴巴开源的注册中心,能够很好地满足这一需求。然而,在将 Spring Boot 应用打包成 WAR 部署到外部服务器时,可能会遇到服务无法注册…

【C++奇妙冒险】日期类Date的实现

文章目录 前言日期类Date的接口设计构造函数和打印函数获取日期并判断日期是否合法日期类的大小比较关系<运算符重载 判断小于运算符重载 判断相等<运算符重载 判断小于等于>运算符重载 判断大于> 运算符重载 判断大于等于! 运算符重载 不等于 日期类计算日期天数日…

WordPress 插件推荐:菜单缓存插件——Menu Caching

今天在缙哥哥博客上发现了一个 WordPress 速度优化插件的优化感觉很不错&#xff0c;明月自己装上也体验了一番&#xff0c; WordPress 菜单的载入速度无论是 PC 端和移动端都非常不错&#xff0c;并且这个叫 Menu Caching 的菜单缓存插件还完美的兼容 WPRocket&#xff0c;W3 …

现代园区管理工具:“园区运营管理平台”全景解析!

当下&#xff0c;我国各地区产业园区、工业园区、经济开发区、科技园区、商务园区如雨后春笋般迅速崛起&#xff0c;成为推动区域经济增长、促进产业升级的重要载体。然而&#xff0c;如何高效、智能地管理这些园区&#xff0c;提高这些园区的运营效率、服务质量和综合竞争力&a…

AI办公自动化:用kimi批量提取音频中的标题并重命名

很多音频文件&#xff0c;文件名很乱&#xff0c;需要根据音频信息中的标题聪明吗 在kimi中输入提示词&#xff1a; 你是一个Python编程专家&#xff0c;一步步的思考&#xff0c;完成以下脚本的撰写&#xff1a; 打开文件夹&#xff1a;E:\有声\a16z播客 读取里面所有的mp3格…

文件夹如何加密码?这4个文件夹加密方法值得一试!

文件夹如何加密码&#xff1f;在与朋友、家人和同事共享同一电脑计算机时&#xff0c;您可能有一些不希望他们查看的重要或机密文件。那么如何避免这种情况呢&#xff1f;使用密码保护锁定文件和文件夹可以提高你的数字隐私和安全性&#xff0c;因为这意味着你需要输入密码才能…

【React篇 】React项目中常用的工具库

我们可以从项目初始化、开发、构建、检查及发布的顺序总结react项目开发常用的工具库。 首先是初始化。 初始化工程项目一般用官方维护的 create-react-app&#xff0c;这个工具使用起来简单便捷&#xff0c;但 create-react-app 的配置隐藏比较深&#xff0c;修改配置时搭配…