用Audio2Face导出Unity面部动画

news2024/11/23 3:22:47

开始之前说句话，新年前最后一篇文章了
一定别轻易保存任何内容，尤其是程序员不要轻易Ctrl + S

在A2F去往Unity的路上，还要经历特殊Blender，自己电脑中已下载好的可能不是很好使。

如果想查看UE相关的可以跳转到下边这两篇链接

1. 用Audio2Face驱动UE - MetaHuman

2. 用Audio2Face导出驱动MetaHuman的面部动画

如果在操作的时候导致模板usd文件损坏，可以加QQ群（点击不能进群后，右键复制链接，在新页面复制进去就行）QQ群，获得一个新的模板

前期安装

  1. 先检查自身电脑配置看是否满足，按最小配置再带个UE可能会随时崩，按推荐来带个UE可能会略有小卡(亲身体会)。
  2. 下载 Omniverse Develop on NVIDIA Omniverse Platform | NVIDIA Developer
  3. 之后下载Audio2Face，如果在第三步找不到该应用，则到第四步搜索
  4. 接着下载Bleder Alpha USD Branch
  5. 打开Omniverse的NUCLEUS面板，在Omniverse一栏下选择Add Server，并且增加一个Local Nucleus Server（按照自己所需配置就好）
  6. 安装完成后，部分机器可能需要重启，然后启动你刚下载好的Local Nucleus Server 

先导出一份记录面部动画的.USD文件

这一步骤和给UE的动画一样，不过到最后一步之后还有步骤，所以中间会的可以跳过

英语好的话可以直接看这个视频：Unity and Audio2Face FBX animation transfer workflow

  1. 打开Audio2Face，找到Al Models面板，然后选择亚洲人Claire面孔，当然因项目而异啊。
  2. 导入claire_bs_46.usd文件，选择后拖入到Stage面板下就行，记得把两个文件分开，不然叠在一起，后面看的不明显。
  3. 打开A2F Data Conversion面板，设置绑定BS的相关转换，选择BLENDSHAPE & JOINT CONVERSION模块，分别设置输入的动画网格和输出的BS网格，最后点击SET UP BLENDSHAPE SOLVE(处理)，得到处理结果。
  4. 回到Audio2Face Tool面板，选择自己的音轨，设置表情之类后进行播放，可以看出二者相同了，这时候证明我们的绑定是没有任何问题的，如果有问题则返回上边重新过一遍。
  5. 重新回到A2F Data Conversion面板，设置导出路径，文件名字，以及想要的帧率，以及导出格式设置为USD，接着导出
    1. 如果报错[ Export ] No solver selected，或者弹出以下窗口，则先选择所要导出的解算器，再导出。
  6. 至此，导出USD文件完成，切记不要保存任何内容，除非你复制一份新的usd文件出来，不然你之后所用到的文件就都是你所保存的内容了。再或者加QQ群（点击不能进群后，右键复制链接，在新页面复制进去就行），群文件中有备份，你下载后替换即可。

接着保存真正的USD动画文件

  1. 此时，我们要删除场景内多余的内容，只保留我们接下来需要用到的部分，只保留transfer_data与claire_bs_46
  2. 然后设置保存路径、文件名后另存到一份新文件中：File > Save Flattened As...  
  3. 接着我们打开新存好的这份文件：File > Open > File Path (你文件的路径)，然后Window > Animation > TimeLine，然后点击播放 ( 空格也行 )， 看你的动画是否正常播放，正常则接着往下看，没有动画播放则退回之前的步骤重来。
  4. 接着在Stage面板下的joint1中，删除不需要的节点，只保留joint1与你自己命名的动画文件
  5. 在Stage面板下选中joint1节点，接着在Property面板中的Skeletal Animation下，把Animation Source对象替换为在Stage面板下选中你自己命名的动画文件节点（也就是红框所选），接着Ctrl + S保存这份USD文件

通过Blender中转动画

  1. 通过Omniverse打开我们下载好的Blender，删除场景中原有内容然后导入刚才保存好的USD文件
  2. 接着打开动画视窗，然后点选导入进来的人物模型，接着播放面部动画，看是否成功，成功跳到下一步，不成功则返回之前重来
  3. 接着打开动作编辑器新建一个动画，在开头帧和结尾帧增加两个相同的任意关键帧（我这里增加了缩放）。（因为BS动画无法被Blender导出，所以我们得添加动画，附带着BS动画导出）
  4. 导出FBX

Unity中使用BS动画

  1. 打开一个Unity工程，导入保存好的FBX文件，有的Unity可能需要手动勾选导入面部动画：选中导入后的物体 > Inspector面板下 > 勾选Import BlendShapes
  2. 接着用TimeLine，把音频和导进来的动画文件关联起来进行播放
  3. 然后和Blender中的效果对比
  4. 至此，Audio2Face中通过语音生成的面部动画，以及成功的在Unity中运行了起来，因为带有音频，所以就没给大家放GIF文件，有什么问题随时加QQ问我就行，或者QQ群也可以

  • ​​​​​​博客杂货铺
  • GoF23 种设计模式的分类和功能
  • 我QQ：841298494

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1425107.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Qt QWidget Loading界面并覆盖在其他控件上面

Qt QWidget Loading界面并覆盖在其他控件上面

目录 一、效果图二、Loading三、使用 一、效果图 界面中有一个Label&#xff0c;一个Button 点击Buttion&#xff0c;显示Loading的界面&#xff0c;并覆盖到Label和Button上面 二、Loading loadingwidget.h #ifndef LOADINGWIDGET_H #define LOADINGWIDGET_H#include <…
阅读更多...
曲线拟合、多项式拟合、最小二乘法

曲线拟合、多项式拟合、最小二乘法

最近在做自车轨迹预测的工作&#xff0c;遇到 曲线拟合、多项式拟合、最小二乘法这些概念有点不清晰&#xff0c; 做一些概念区别的总结&#xff1a; 曲线拟合用于查找一系列数据点的“最佳拟合”线或曲线。 大多数情况下&#xff0c;曲线拟合将产生一个函数&#xff0c;可用于…
阅读更多...
1.26模拟退火

1.26模拟退火

模拟退火是爬山算法的一种&#xff0c;是搜索算法 初始阶段 即只有在每次更新方案时&#xff0c;才会使循环次数增加
阅读更多...
Maven安装，学习笔记，详细整理maven的一些配置

Maven安装，学习笔记，详细整理maven的一些配置

Maven 1. 初识Maven 2. Maven概述 Maven模型介绍 Maven仓库介绍 Maven安装与配置 3. IDEA集成Maven 4. 依赖管理 01. Maven课程介绍 1.1 课程安排 学习完前端Web开发技术后&#xff0c;我们即将开始学习后端Web开发技术。做为一名Java开发工程师&#xff0c;后端 Web开发技术…
阅读更多...
屈子祠镇黑鱼岭，不可移动文物预防性保护系统守遗珍

屈子祠镇黑鱼岭，不可移动文物预防性保护系统守遗珍

一、何止秦俑 秦陵苑囿青铜水禽等文物集中展出 文物保护&#xff0c;尤其是不可移动文物的保护&#xff0c;一直都是文化遗产的重要环节。湖南省汨罗市屈子祠镇双楚村黑鱼岭墓地&#xff0c;作为长江中游地区的重大考古发现&#xff0c;其商朝晚期的历史背景赋予其不可估量的历…
阅读更多...
鸿蒙开发实战-运动app开发

鸿蒙开发实战-运动app开发

主要开发内容 3.1 开发准备 想要实现以下功能的话&#xff0c;需要学习“Tabs”&#xff0c;“TabContent”&#xff0c;“Row”&#xff0c;“Column”&#xff0c;等等相关技术。 主页 静坐页面   除此之外&#xff0c;还需要先准备8张图标的图片以及应用开发所需要的图片…
阅读更多...
Python下载安装与环境配置

Python下载安装与环境配置

本文将指导您完成Python的下载、安装以及环境配置过程&#xff0c;确保您在编写和运行Python代码时能够获得最佳体验。我们将提供详细的步骤和代码示例&#xff0c;帮助您顺利完成设置。 一、Python下载与安装 访问Python官网&#xff1a;首先&#xff0c;您需要访问Python的官…
阅读更多...
Django模型(六）

Django模型(六）

一、其它查询 文档：https://docs.djangoproject.com/zh-hans/4.1/ref/models/querysets/#count 1.1、排序 Queryset.order_by(*fields) 默认情况下，QuerySet 返回的结果是按照模型 Meta 中的 ordering 选项给出的排序元组排序的 可以通过使用 order_by 方法在每个 QueryS…
阅读更多...
RocketMq5源码搭建

RocketMq5源码搭建

最近公司使用到了RocketMQ,所以打算研究一下RocketMQ 准备自己动手搭建一下RocketMq源码 前提 需要搭建jdk环境&#xff0c;jdk版本需要高于1.8 首先 从github 拉源码 源码地址&#xff1a;rocketMq源码传送门 启动namesrv 启动之前需要配置一下ROCKERMQ_HOME 配置如下&a…
阅读更多...
【C++】 C++入门—内联函数

【C++】 C++入门—内联函数

C入门 1 内联函数1.1 定义1.2 查看方式1.3 注意 Thanks♪(&#xff65;ω&#xff65;)&#xff89;谢谢阅读下一篇文章见&#xff01;&#xff01;&#xff01; 1 内联函数 1.1 定义 程序在执行一个函数前需要做准备工作&#xff1a;要将实参、局部变量、返回地址以及若干寄存…
阅读更多...
pnpm : 无法加载文件 D:\tool\nvm\nvm\node_global\pnpm.ps1，因为在此系统上禁止运行脚本

pnpm : 无法加载文件 D:\tool\nvm\nvm\node_global\pnpm.ps1，因为在此系统上禁止运行脚本

你们好&#xff0c;我是金金金。 场景 新创建的项目&#xff0c;在vscode编辑器终端输入 pnpm i&#xff0c;显示报错如上 解决 在终端输入get-ExecutionPolicy(查看执行策略/权限) 输出Restricted(受限的) 终端再次输入Set-ExecutionPolicy -Scope CurrentUser命令给用户赋予…
阅读更多...
如何在淘宝和Shopee上进行选品：策略和原则

如何在淘宝和Shopee上进行选品：策略和原则

在当今数字化时代&#xff0c;电商平台已经成为卖家们扩展业务和增加销售额的重要渠道。而在淘宝和Shopee这两个知名电商平台上进行选品时&#xff0c;卖家可以遵循一些相似的原则和策略&#xff0c;以确保他们的产品能够吸引目标客户并取得成功。本文将为您介绍一些在淘宝和Sh…
阅读更多...
uniapp H5 px转换rpx

uniapp H5 px转换rpx

uniapp H5 px转换rpx 安装 px2rpx 重启 HBuilderX在要转换的文件 点击右键 点击 开启px2rpx(1px转成2rpx) 开启成功&#xff01;使用 编辑页面后 按下键盘 Ctrl s 保存&#xff01;转化成功&#xff01;当然 你也需要对使用的插件 进行转换&#xff01;否则可能导致样式出现…
阅读更多...
基于Python的Selenium详细教程_

基于Python的Selenium详细教程_

一、PyCharm安装配置Selenium 本文使用环境&#xff1a;windows11、Python 3.10.5、PyCharm 2022.1.3、Selenium 4.3.0 需要你懂的技术&#xff1a;Python、HTML、CSS、JavaScript 1.Seleium安装&#xff1a; 在PyCharm终端或window命令窗口输入以下命令 #查看已安装的Pytho…
阅读更多...
指针深入了解7

指针深入了解7

1.qsort的模拟实现&#xff08;冒泡排序的原型制作&#xff09; 1.排序整型 int cmp_int(const void* p1, const void* p2) {return *((int*)p1) - *((int*)p2); } void swap(char* p1, char* p2)//完成交换 {int tmp *p1;*p1 *p2;*p2 tmp;} void bubble_sort(void* base,…
阅读更多...
Docker本地部署可编辑开源导航页并发布公网分享好友可访问

Docker本地部署可编辑开源导航页并发布公网分享好友可访问

文章目录 1. 使用Docker搜索镜像2. 下载镜像3. 查看镜像4. 启动容器5. 浏览器访问6. 远程访问6.1 内网穿透工具安装6.2 创建远程连接公网地址6.3 使用固定二级子域名地址远程访问 今天和大家分享如何使用Docker本地部署一个开源的简约风格网址导航页&#xff0c;支持五种搜索引…
阅读更多...
成熟的汽车制造供应商协同平台 要具备哪些功能特性？

成熟的汽车制造供应商协同平台 要具备哪些功能特性？

汽车行业是一个产业链长且“重”的行业&#xff0c;整个业务流程包括了研发、设计、采购、库存、生产、销售、售后等一系列环节&#xff0c;在每一个环节都涉及到很多信息交换的需求。对内要保证研发、采购、营销等业务环节信息流通高效安全&#xff0c;对外要与上、下游合作伙…
阅读更多...
【LeetCode每日一题】1109. 航班预订统计1094. 拼车 (差分数组)

【LeetCode每日一题】1109. 航班预订统计1094. 拼车 (差分数组)

差分数组 差分数组的主要适用场景是频繁对原始数组的某个区间的元素进行增减。 一、基本概念&#xff1a; 差分数组的定义如下&#xff1a; 假设原始数组为arr&#xff0c;差分数组为diff&#xff0c;其中diff[i] arr[i] - arr[i-1]&#xff08;0 < i < n&#xff0…
阅读更多...
机器学习 | 掌握逻辑回归在实践中的应用

机器学习 | 掌握逻辑回归在实践中的应用

目录 初识逻辑回归 逻辑回归实操 分类评估方法 初识逻辑回归 逻辑回归&#xff08;LogisticRegression&#xff09;是机器学习中的一种分类模型&#xff0c;逻辑回归是一种分类算法&#xff0c;虽然名字中带有回归&#xff0c;但是它与回归之间有一定的联系。由于算法的简单…
阅读更多...
搭建网站详细教程

搭建网站详细教程

一.领取一个免费域名和SSL证书&&CDN 特点&#xff1a;支持Cloudflare CDN Cloudflare是全球知名的CDN提供商&#xff0c;如果你不想暴露你的源站&#xff0c;又想使用我们的二级域名&#xff0c;不需要前往Cloudflare添加域名&#xff0c;修改NS记录&#xff0c;现在…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023