从网格动画到手绘表情:Mesh Avatar Studio 眼睛嘴巴变体的绘制与导入

原创2026-11-03 16:22:331,933 阅读

从网格动画到手绘表情:Mesh Avatar Studio 眼睛嘴巴变体的绘制与导入

Mesh Avatar Studio 能把一张静态插画变成会眨眼、说话、转头、呼吸的 2D 网格动画虚拟形象(2D mesh avatar)。但仅靠网格变形,闭眼时会残留淡淡的睫毛碎片,说话时嘴型也只是"撑开"而非真正开口。为闭眼、半闭眼、笑眼和 あ/い/お 等嘴型绘制表情差分(Drawn variants),就能让眨眼和口型同步(lip sync)看起来像手绘动画一样自然。本文讲解如何在 Mesh Avatar Studio 中生成蒙版、绘制变体并导入项目。

1️⃣ 为什么需要手绘眼睛和嘴巴变体

没有手绘变体时,虚拟形象的闭眼和开口完全依赖 mesh 变形。docs/agent-guide.md 中明确提到:

Without drawn variants, a closed eye can keep faint fragments of the original upper lash or crease above the closed line.

也就是说,闭眼上方会残留原始上睫毛和眼皮的细线,开口时下巴可能被"拉伸"。绘制好的差分图会在眨眼、说话、情绪表达时被引擎自动替换到脸上,效果提升非常明显。

内置样例 Miko(旗袍少女)就是一个完整的示范,它的差分文件都放在 samples/miko-qipao/ 目录下:

Mesh Avatar Studio 样例 Miko 的原始插画 source.png

编辑器打开后的整体效果——左侧部件列表、中间源图与 rig 控制点、右侧实时预览:

Mesh Avatar Studio 编辑器总览:源图 rig 与 Live 实时预览

2️⃣ 打开 Drawn variants 面板

启动编辑器(npm run dev)并打开项目后,右侧会出现 表情差分(Drawn variants) 面板,面板逻辑见 src/editor/VariantsPanel.tsx。它把差分分成三组:

组别 包含的变体 说明
Eyes(眼睛) eyes_closed、eyes_half、eyes_smile 闭眼、半闭眼、笑眼,必填核心
Mouth(嘴型) mouth_a、mouth_a_half、mouth_i、mouth_o 对应日语元音开口形状,用于口型同步
Expressions(表情) eyes_sad、eyes_surprise、mouth_angry、mouth_sad 可选,让悲伤/惊讶/生气表情更自然

勾选需要的组后,面板会显示一条可直接复制、粘贴给编码代理(Codex / Claude Code)的指令消息:

Mesh Avatar Studio Drawn variants 面板:勾选嘴型后复制变体生成指令

粘贴到在本仓库中打开的代理即可——Codex 会用内置的图像生成直接画出全部差分并导入;Claude Code 则负责准备好蒙版和提示词,由你转交给任意图像生成工具。

3️⃣ 导出蒙版与提示词:绘制变体的依据

每个变体的绘制都不是凭空画的,而是基于编辑蒙版(edit mask):只在蒙版的透明区域作画,不透明像素必须与原图逐像素一致。

  • 眼睛类变体使用眼睛蒙版(覆盖双眼区域,刻意排除眉毛——眉毛由 rig 独立驱动,画进图里会出现"双份眉毛")
  • 嘴部变体使用嘴部蒙版,保持嘴处于闭口状态重新绘制

内置样例的蒙版可直接参考(variant-masks/ 由 rig 中的眼睛 roi 与嘴部 area 自动生成):

Mesh Avatar Studio 眼睛变体编辑蒙版:仅双眼区域可修改

Mesh Avatar Studio 嘴巴变体编辑蒙版:嘴部椭圆区域可修改

如果你偏好手动流程,也可以直接用命令行工具生成全套蒙版 + 提示词,写入 projects/<name>/variant-requests/(每个变体一个文件夹,内含 mask.png、prompt.md 和说明):

uv run tools/variant-requests.py projects/<name>

该脚本 tools/variant-requests.py 中还内置了每个变体的详细绘制要求,例如:

  • eyes_closed:一条自然下弯的上睫毛线,移除全部虹膜、眼白及原始上睫毛与眼纹;
  • mouth_a:按日语元音 あ 自然纵向张开,带轻微舌头上齿;
  • eyes_sad:外眼角下垂、眼珠略向下,不要在脸颊画泪。

4️⃣ 生成变体图:三条规则必须遵守

把 source.png、对应蒙版和提示词交给图像生成工具后,返回的图必须满足:

  1. 尺寸不变:与 source.png 完全相同(如样例为 1254 × 1254)的 RGBA PNG,不能裁切、缩放或移位;
  2. 只改透明区:蒙版不透明区域必须与源图像素级一致,不能重绘、不能填色;
  3. 文件名对应:保存为 projects/<name>/variants/<variant>.png,如 eyes_closed.png、mouth_o.png。

生成结果的效果对比(同一角色,仅眼睛区域被替换为闭眼):

Mesh Avatar Studio 生成的闭眼变体 eyes_closed.png

如果生成工具重压缩了整张图、填白了透明背景或偏移了 1 像素,导入环节会自动处理小误差(≤3 px 位移校正、按源图比例缩放、去除蒙版边缘的均匀色偏),但整图大幅偏移、蒙版外被重绘、超出蒙版边界或比例不符的图会被明确拒绝,需要按拒绝原因重新生成。

5️⃣ 导入变体:让形象真正"活"起来

导入有两种方式:

方式一:编辑器内导入(推荐) 在 Drawn variants 面板底部,把生成的 PNG 直接拖入(或点击"选择差分图片"多选),编辑器会运行导入任务:裁出蒙版区域内的差分图,输出到 built/sprites/(每只眼睛一张,如 eyes_closed_0.png、eyes_closed_1.png),编辑器自动重载,右侧状态从 Missing 变为 COUNT / TOTAL 张。

方式二:命令行导入 手动把图片放到 projects/<name>/variants/ 后执行:

uv run tools/build-sprites.py projects/<name>

tools/build-sprites.py 会校验并裁切所有被接受的变体,被拒绝的会打印原因——照着提示重新生成即可。

6️⃣ 验证效果:Pose 测试与口型预览

导入完成后,建议在编辑器中做两项检查:

  • Pose test:拉低 Eyes open 滑杆,观察闭眼是否为一条干净的睫毛线,有无残留虹膜;
  • Lip sync:输入假名文本,看 あ/い/お 嘴型是否随发音正确切换。

Mesh Avatar Studio 口型同步预览:嘴型随假名切换

如果代理流程中执行过姿态渲染(Step 5),重新渲染后 angry、sad、surprise 帧也会自动使用新的表情差分。最后别忘了用 Export .mavatar 导出——导出的单个 .mavatar 文件会包含 rig、图层、手绘差分和元数据,方便分享或备份。

💡 小建议:眼睛和嘴型是"必做",表情差分是"加分项"。即使只导入闭眼和四个嘴型,眨眼和说话的观感也会有质的飞跃;而 eyes_sad、mouth_angry 这类差分只在对应情绪标签出现时才被使用,随时可以后补。

更多细节可查阅 docs/agent-guide.md 中的 Step 6(Drawn variants)与 docs/format.md 的 .mavatar 文件结构。

登录后查看全文
mesh-avatar-studio