中文: Avatary Studio

From FACEGOOD
Jump to navigation Jump to search
Avatary Studio

Avatary Studio 是新一代高精度面部表情后期处理软件，它能够将由任意相机拍摄的面部表情视频转换为高质量的 3D 面部表情动画，并且支持任何 3D 面部表情绑定系统。由 Avatary Studio 计算生成的高精度面部表情动画可以导出到诸如 Maya、3ds Max、等主流数字内容创作（DCC）软件中。

现在快去下载!!!

Avatary Studio 凭借其独特的巧思，不遗余力地保障您的资产安全！

它开创了一种将计算节点与资产相分离的架构，彻底消除了资产迁移的麻烦，有力地保护着每一项数字资产。



当前支持的数字内容创作（DCC）软件版本：

  • Maya 2020
  • Maya 2022
  • Maya 2023
  • 3ds Max 2022

待办事项列表：

  • MotionBuilder
  • UE
  • Unity


Avatary Studio 软件详细使用说明

一、软件概述

（一）核心文件格式解析

  • Shot 文件：存储视频 / 音频元数据、所选解算模式、对应的solver文件 和 解算结果，是项目媒体信息的核心载体。
  • Solver 文件：包含 Tracker 模块的训练数据库（Training Database），以及 Retargeter 模块的控制器模板和表情库（Pose Library）。

（二）解算模式分类体系

软件支持 4 大类解算模式，其中 With-Track 模式按跟踪模板细分为 6 个子类型，具体分类规则如下：

  • 独立性原则：所有解算模式（含 With-Track 的 子类型）相互独立，可单独选择。
  • 文件自动生成：选择解算模式后，系统自动创建对应的 Shot 和 Solver 文件。
  • 模板修改限制：One-Click 系列模式的控制器模板不可修改，With-Track 模式在表情库为空时可自定义模板。
大类 简称示例（With-Track 细分类型） 特性说明
With-Track AI02、AI03、AI04、AI05、AI04Pro、AI06 需同时使用 Tracker+Retargeter 模块，支持不同精度的面部跟踪模板
No-Track —— 无需跟踪，直接处理媒体文件
One-Click MetaHuman —— 一键生成 MetaHuman 风格动画，模板固定
One-Click ARKit —— 一键适配 ARKit 标准，模板固定

二、项目管理与文件生成

（一）新建项目与文件组织

  1. 在软件主界面创建新项目，可添加多个视频 / 音频文件，每个文件可独立选择解算模式（如 AI06、One-Click MetaHuman 等）。
  2. 选择解算模式后，系统自动生成：
    1. Shot 文件：以媒体文件名称命名（如媒体名为 “video_01”，生成 “video_01.shot”）。
    2. Solver 文件：以媒体文件名称命名（如 “video_01.solver”）。

（二）文件组织规范

  1. 重复媒体名处理：若多个媒体文件同名（如均为 “video”），系统将在名称后添加 “_1”“_2” 等后缀，例如：
    1. 首个媒体文件：video.shot、video.solver
    2. 同名媒体文件：video_1.shot、video_1.solver

三、解算模式详解

（一）With-Track 系列模式（需同时使用 Tracker+Retargeter）

1. 跟踪模板特性对比
简称 分组 点数详情 支持设备 计算方式 云端加速
AI02 Brow/Eye/Mouth Brow 10 点（上沿）/Eye 14 点 / Mouth 23 点（轮廓） FACEGOOD HMC CPU 不支持
AI03 Brow/Eye/Mouth Brow 12 点（轮廓）/Eye 26 点 / Mouth 47 点 FACEGOOD HMC CPU 不支持
AI04 Brow/Eye/Mouth Brow 24 点（轮廓）/Eye 26 点 / Mouth 47 点 FACEGOOD HMC CPU 不支持
AI05 Brow/Eye/Nose/Mouth Brow 32 点 / Eye 38 点 / Nose 34 点 / Mouth 44 点 任意视频 CPU 不支持
AI04Pro Brow/Eye/Mouth Brow 24 点 / Eye 26 点 / Mouth 47 点（高精度轮廓） FACEGOOD HMC CPU+GPU 支持
AI06 Brow/Eye/Mouth Brow 24 点 / Eye 18 点 / Mouth 49 点（含鼻翼、下巴） 任意视频 GPU 支持
2. 操作流程
  • 手动跟踪计算逻辑： 点击「M」按钮后，系统将同时调用 Training Database（存储于 Solver 文件）与当前视频的手动关键帧进行计算：
    • 黄色框区域：Training Database 预设数据
    • 绿色框区域：手动添加的当前视频关键帧 两者混合计算以优化跟踪精度。
3. Retargeter 模块核心机制
  • 控制器模板底层逻辑： 定义控制器分组（如 Brow / Eye / Mouth），可在 Retargeter 的 Auto Pose 中查看与修改，规则如下：
    • Pose Library 非空时：模板锁定，不可修改；
    • Pose Library 为空时：允许修改模板，但 Manual Pose 中的值将被重置；
    • 修改方式：在 DCC 中框选目标控制器，点击「Update」完成同步。
  • Pose Library 内容来源： 仅支持通过 Manual Pose 手动添加表情库数据。
  • Manual Pose 颜色标识规则：
颜色 状态说明 计算参与逻辑
红色 未记录控制器值 不参与计算
黄色 已记录值但未参与当前计算 点击计算时参与计算，计算后转为绿色
绿色 已记录值且参与当前计算 持续参与计算

（二）One-Click 系列模式

  • One-Click MetaHuman：预设控制器模板，直接生成 MetaHuman 风格面部动画。
  • One-Click ARKit：基于 ARKit 标准预设模板，快速适配 AR 场景。
  • 控制器模板锁定： One-Click MetaHuman 与 One-Click ARKit 模式预设模板不可修改，仅支持直接使用预设的控制器分组。

（三）No-Track 模式

1. 核心特性
  • 流程简化：无需执行 Tracker 模块的跟踪流程，直接进入关键帧设置与后续处理。
  • 关键帧自动生成：支持根据预设强度自动识别关键帧，建议操作：手动设置所有关键帧（表情相似的帧可使用复制功能提高效率）。
2. 与 With-Track 模式的核心区别
对比维度 No-Track 模式 With-Track 模式
跟踪流程 无需执行 Tracker 模块 必须通过 Tracker 完成目标跟踪
Solver 文件特性 生成的表情库对角度变化更稳定 依赖跟踪数据，角度适应性取决于跟踪精度
跨平台应用 可导入 Capture Studio 进行实时计算 -

快速介绍

如何解决 Avatary Studio 中的相机抖动问题

Load video
Bilibili

登录 Avatary Studio

  • 打开 Avatary Studio，在登录界面输入您的账号进行登录。

创建新的本地项目

  • 找到并点击 "Create Project" 按钮，以启动项目创建过程。
  • 在弹出的对话框中，准确输入 project path, 也就是指定你想要存储项目文件的确切位置。 然后输入一个独一无二的项目名称。 输入完成后，点击 "Create" 按钮。

注意: 此时，系统会在指定的项目路径下自动创建一个以项目名称命名的专用文件夹，该文件夹用于存储与该项目相关的各种数据和文件，以确保项目资源得到有序管理。

  • 项目成功创建后，您只需切换到 "Recently Used Projects" 列表区域，就能立即找到新创建的项目，这样您就可以快速开始后续的项目操作，并顺利衔接工作流程。
点击 "Create Project" 按钮
输入 project path.
Recently Used Projects.

将视频导入项目

  • 如果你想导入视频文件，只需直接将视频拖放到资源管理器中即可。

注意: 仅支持 .mov and .mp4 格式的视频文件。 如果您选择的视频格式不匹配，则无法完成拖拽操作。请提前确认视频格式是否正确。


与 DCC 连接

  • 开始连接操作，首先在 Avatary Studio 界面上找到 settings 按钮，它的形状像一个齿轮，然后轻轻点击它。
  • 随后，在弹出的设置菜单的 “目标” 项目栏中，选择已安装且受支持 DCC 版本.
  • 然后，将 Connect 按钮切换到开启状态，为接下来的对接做好准备。
  • 打开相应的 DCC 软件。时，只需将目光移至该软件的菜单栏区域，你就会发现那里列有 Avatary Studio 插件。 点击打开这个插件，然后进一步找到并点击 "start" 按钮，激活软件之间的初步通信连接。
  • 耐心等待片刻，并密切留意 Avatary Studio 左下角的 "Status" 指示灯。 一旦它从红色顺利变为绿色，就意味着你已成功建立了二者之间的连接。恭喜！

注意: 在整个使用过程中，当你无需在 DCC 中操作 Avatary Studio 插件，切勿直接关闭它。相反，应将其最小化至任务栏。这样一来，你可以确保连接保持稳定，避免不必要的重复连接操作，并提高工作效率。

求解器模式

With-Track

视频教程

Load video
Bilibili

No-Track

视频教程

Load video
Bilibili

One-Click

视频教程

Load video
Bilibili

One-Click Audio

视频教程

Load video
Bilibili

Cloud Batch Solver

视频教程

Load video
Bilibili

FAQ

Avatary Studio 无法打开

在 Avatary Studio 的安装目录中安装 vc_redist.x64.exe 程序。

Avatary Studio 中无法进行计算，或者软件在计算过程中崩溃

下载并安装 CUDA 11.8.

在 DCC 中找不到 Avatary Studio 插件

请检查注册表中 DCC 软件的安装目录是否正确。

前往注册表中的以下位置: HKEY_LOCAL_MACHINE\SOFTWARE\Autodesk\VaultQualified， 然后检查相应版本 DCC 软件的安装目录

如何打开注册表？

  1. 按下 “Win + R” 组合键。这个快捷键将打开 “运行” 对话框。
  2. 在 “运行” 对话框中，输入 “regedit”（这是注册表编辑器的命令），然后点击 “确定” 按钮或按下回车键。之后，注册表编辑器将会打开。它的界面类似于文件资源管理器。左侧是注册表项的树状结构，右侧是所选注册表项的具体键值。
Retrieved from "https://www.facegood.ca/wiki/index.php?title=中文:_Avatary_Studio&oldid=587"