Locomotion

任务：实时控制虚拟角色进行高效、真实、可控且自适应的行走、奔跑、跳跃等基础位移运动。

mindmap
    Locomotion
        多
            更多的动作类型
                适配不同地形（平地、楼梯、斜坡）
                适配不同角色
                    二足/四足
                    不同体型
                不同的动作
                不同的风格
            更多的应用场景
                路径引导
                风格控制
                动作类型切换
                动作插帧
                实时运动输入（如动捕、VR 追踪数据）
        快
            满足交互式场景的帧率要求
            快速地数据准备
        好
            动作具有物理真实感
                运动轨迹、肢体姿态、步态节奏符合生物力学规律
                无穿模、僵硬、浮空等失真现象
            动作具有生物真实感
                还原人类 / 生物自然运动特征
            符合用户控制
                支持用户高层指令（速度、方向、动作风格、启停）的精准响应
                实现细粒度运动调节
            稳定性
                具备外力扰动下的稳定性
        省
            计算开销低
            更少的数据
            更少的人工参与
            更少的预处理
                在适配不同泛化性问题时，无需重新设计运动逻辑

基于匹配的方法

graph TD
    A[当前帧 frame] --> B{是否匹配？}
    B -- N --> C[下一帧 frame]
    B -- Y --> D[提取特征]
    D --> E[当前特征]
    F[获取数据] --> D
    G["(5) 角色状态"] --> D
    D --> H[最近邻搜索]
    H --> I[当前帧 frame]
    J[控制目标] --> H
    H --> K["(3) 下一帧动作"]
    L["(6) 角色的动作数据集"] --> M[提取特征]
    M --> N[特征集]

P41 Ⓐ

Motion Graph / Motion Matching / Motion Field

笔记P2

flowchart LR
A([当前帧frame]) --> B("是否重新匹配(1)")
    B -->|"N"|C([当前帧frame])
    C --> D["(3)取下一帧动作"]
    D --> E([下一帧frame])
    E --> A
    F --> G(["(5)角色状态"])
    H([控制目标])
    G --> I["(4)提取特征"]
    H --> I
    I --> N([当前特征])
    N -->J["(2)最近邻搜索"]
    J -->C
    B --> F["(5)取数据"]
    K(["(6)角色的动作数据集"])
    K --> L["(4)<br>提取特征"]
    L --> M(["特征集"])
    M --> J
    K --> D

笔记P1

P41 A

通过检索、拼接、插值实现运动生成，是工业界长期主流方案。

优势：

1. 实现简单：基于准备好的数据库，即可以与角色进行实时控制
2. 可控性高

缺点：

1. 依赖特定角色的海量数据
2. 最近邻搜索成本高
3. 内存占用大
4. 对不同地形泛化性差
5. 随着数据集规模增大，扩展性较差

基于监督学习的方法

非相位方法

基于相位的方法

笔记P3

flowchart LR
    C([NN2])-->A
    D([NN3]) -->A
    E([NN4]) -->A
    B([NN1]) -->A[专家混合]
    A-->F([混合专家模型])
    F-->G[模型推理]
    H(["控制目标<br>(轨迹、标签)"])-->G
    J([当前状态])-->G
    G -->K([相位变化量])-->P([相位])-->O([当前相位])
    G -->L([触地信息])-->R[IK]-->N
    G -->Q([未来轨迹])-->N
    G -->M([下一帧状态])-->N([动作输出])-->J 
    O -->A

笔记P4

优势：

1. 能对用户输入做出稳定实时的响应。

局限性：

1. 依赖精心的设计
2. 用高度可变的运动数据进行训练，会产生平均化的结果。
3. 难以泛化到数据以外的动作。

基于生成的方法

笔记P7

生成 + 控制

(1) 无控制自回归生成模型

flowchart LR
 A([数据集])-->|"预训练"|C[先验模型]
 B([当前状态])--> C-->D([下一帧状态])

(2) 引入控制策略

flowchart LR
 A([控制目标])-->B([策略])--> D[先验模型]--> E([下一帧状态])
 C([当前状态])--> D

flowchart LR
 A([当前状态])-->B[先验模型]
 B--> C([生成1])--> F
 B--> D([生成2])--> F
 B--> E([⋮])--> F
 B--> G([生成n])--> F
 F([选出下一帧])

笔记P8

笔记P9

条件生成

flowchart LR
 A([当前状态])--> C
 B([控制目标])--> C
 C([条件])--> F[Diffusion]--> G([latent code]) --> H[Decoder]--> I([下一帧状态])
 D([噪声])--> F
 E([t])-->F

1. 难以在各种控制信号间进行泛化。
2. 难以泛化到数据以外的动作。
3. 支持多模态条件信号和任意损失引导。
4. 能够实现更长期的目标和复杂任务。

基于动力学的方法

优势：
(1) 能够生成新颖且符合物理规律的动作
(2) 数据依赖少

局限性：
(1) 开销问题
(2) 可扩展性问题

笔记P13

运动先验 + 下游控制

类似于“生成 + 控制”

1. 每个任务都需要单独训练策略

笔记P12

运动规划器 + 运动控制器

类似“可控生成 + 动作优化”

1. 规划器和控制器之间存在GAP，导致动作质量下降
2. 控制策略难以准确跟踪规划的运动，需要微调，限制了其泛化能力
3. 优点同“可控生成”

笔记P11