rinkplanner/docs/findings-2026-11-11-ai-skater-retarget.md

71 lines
3.5 KiB
Markdown
Raw Normal View History

# Findings – AI-Skater mit Glide-Retargeting (2026-11-11)
## Ziel
Prüfen, ob die Meshy-T2.5-Figur (`character.skater.figure_ai`) den bestehenden
`Glide`-Clip der Produktionsfigur (`character.skater.figure`) übernehmen kann
und ob das Ergebnis für die 3D-Vorschau taugt.
## Aufbau
- Produktion: 30 Deform-Bones, 8 Bone-Influences, 13.956 Dreiecke,
`Glide` als 2-s-Loop (48 Keys bei 24 fps).
- AI-Figur: 24 Bones, 4 Bone-Influences, 28.090 Dreiecke, A-Pose, nur ein
statischer Baseline-Keyframe; Walk/Run liegen als separate GLBs vor.
- Blender 5.2.1, beide GLBs importiert, Füße auf Z=0, Figuren nebeneinander.
- Retargeting über **Richtungsabbildung**: Für jede zugeordnete Bone wird die
Weltrichtung der Produktions-Pose auf die AI-Ruhepose angewendet
(`rotation_difference`), Twist/Roll bleibt aus der AI-Ruhepose erhalten.
Hips wird nicht gedreht, damit die Figur auf dem Boden bleibt.
- Gemappt: Spine-Kette, Hals/Kopf, Schulter-/Arm-/Hand-Kette,
Oberschenkel/Unterschenkel/Fuß/Zehen. Twist- und Stretch-Hilfsbones der
Produktionsfigur haben kein Gegenstück und bleiben ungenutzt.
## Ergebnis
- Das Retargeting läuft mechanisch sauber: Arme, Beine und Oberkörper folgen
der Produktionspose, ohne sichtbares Kollabieren der Schultern.
- Der `Glide`-Clip ist allerdings sehr subtil: Die Armrichtung ändert sich
über den Loop nur um wenige Grad. Der Test validiert daher vor allem die
Zuordnung, nicht die Deformation unter starker Bewegung.
- Im direkten Vergleich wirkt die AI-Figur anatomisch sauberer; die
Produktionsfigur zeigt im selben Pose-Frame deutlich sichtbare
Ärmel-/Schulter-Beulen (bekanntes Gewichtsproblem der bestehenden Figur).
- Die AI-Figur ist 1,68 m groß, die Produktionsfigur 1,90 m. Für die Vorschau
müsste sie skaliert oder die Kamerahöhe angepasst werden.
- 4 Bone-Influences reichen für diese Pose aus. Ein Stresstest mit Armen über
Kopf und tiefen Knien steht noch aus.
## Artefakte
- Vergleichsbild:
`~/Downloads/rinkplanner_skater_meshy_t25/retarget_comparison.png`
- Statischer Vergleich (nur die beiden Posen-Meshes, ohne Rig):
`~/Downloads/rinkplanner_skater_meshy_t25/retarget_comparison_static.png`
- Blender-Testdatei mit Rig und retargeteter Action:
`~/Dokumente/workbench_rinkplanner/source/characters/skater_ai/skater_ai_retarget_test_v001.blend`
- Aufgeräumte, statische Vergleichsdatei (beim Öffnen direkt in Kameraansicht):
`~/Dokumente/workbench_rinkplanner/source/characters/skater_ai/skater_ai_retarget_comparison_v001.blend`
- Getestete Frames: 01, 13, 25, 37 (Produktion links, AI-Retarget rechts).
## Empfehlung
Retargeting ist der richtige Weg; der eingebaute Clip der AI-Figur ist
statisch und unbrauchbar. Für einen Austausch der Vorschau fehlen noch:
1. Stresstest der 4-Influence-Gewichte (Arme hoch, Knie tief).
2. Skalierung auf die Produktionshöhe bzw. Kamera-/Szenenanpassung.
3. Entscheidung, ob die AI-Figur die bestehende `Glide`-Figur ersetzt oder
nur als Alternative verfügbar bleibt.
## Nachtrag: Abbruch (2026-11-11)
Der reine Meshy-Download zeigt im Solid-/Wireframe-Modus ein **zerstörtes
Gesicht**: Löcher und überlappende Dreiecke an Augen, Nase und Mund. Die
Textur hat das in der Vorschau kaschiert. Das ist ein Geometrieproblem des
30k-Smart-Topology-Meshs, nicht des Retargetings. Die AI-Figur ist damit für
die Produktionsvorschau ungeeignet. `character.skater.figure` bleibt
unverändert die aktive Figur; `character.skater.figure_ai` bleibt vorerst
nur als dokumentierte Alternative im Manifest, ohne `Skater3D`-Verdrahtung.