rinkplanner/docs/findings-2026-11-11-ai-skater-retarget.md
torsten e79b477ee0 feat: Tripo-Skater als Evaluationsasset aufnehmen
- Gewinner der ersten Runde als character.skater.figure_tripo
- 30k-Decimation im Projekt, 116k-Quelle nur in der Workbench
- Manifest-Test akzeptiert unriggte Assets
- Export-Presets und check_export schließen das Asset aus
- Lizenzstand und Retargeting-Findings dokumentiert
- Lizenz-Log der fal-Generierungen ergänzt
2026-11-11 13:14:20 +01:00

70 lines
3.5 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

# Findings – AI-Skater mit Glide-Retargeting (2026-11-11)
## Ziel
Prüfen, ob die Meshy-T2.5-Figur (`character.skater.figure_ai`) den bestehenden
`Glide`-Clip der Produktionsfigur (`character.skater.figure`) übernehmen kann
und ob das Ergebnis für die 3D-Vorschau taugt.
## Aufbau
- Produktion: 30 Deform-Bones, 8 Bone-Influences, 13.956 Dreiecke,
`Glide` als 2-s-Loop (48 Keys bei 24 fps).
- AI-Figur: 24 Bones, 4 Bone-Influences, 28.090 Dreiecke, A-Pose, nur ein
statischer Baseline-Keyframe; Walk/Run liegen als separate GLBs vor.
- Blender 5.2.1, beide GLBs importiert, Füße auf Z=0, Figuren nebeneinander.
- Retargeting über **Richtungsabbildung**: Für jede zugeordnete Bone wird die
Weltrichtung der Produktions-Pose auf die AI-Ruhepose angewendet
(`rotation_difference`), Twist/Roll bleibt aus der AI-Ruhepose erhalten.
Hips wird nicht gedreht, damit die Figur auf dem Boden bleibt.
- Gemappt: Spine-Kette, Hals/Kopf, Schulter-/Arm-/Hand-Kette,
Oberschenkel/Unterschenkel/Fuß/Zehen. Twist- und Stretch-Hilfsbones der
Produktionsfigur haben kein Gegenstück und bleiben ungenutzt.
## Ergebnis
- Das Retargeting läuft mechanisch sauber: Arme, Beine und Oberkörper folgen
der Produktionspose, ohne sichtbares Kollabieren der Schultern.
- Der `Glide`-Clip ist allerdings sehr subtil: Die Armrichtung ändert sich
über den Loop nur um wenige Grad. Der Test validiert daher vor allem die
Zuordnung, nicht die Deformation unter starker Bewegung.
- Im direkten Vergleich wirkt die AI-Figur anatomisch sauberer; die
Produktionsfigur zeigt im selben Pose-Frame deutlich sichtbare
Ärmel-/Schulter-Beulen (bekanntes Gewichtsproblem der bestehenden Figur).
- Die AI-Figur ist 1,68 m groß, die Produktionsfigur 1,90 m. Für die Vorschau
müsste sie skaliert oder die Kamerahöhe angepasst werden.
- 4 Bone-Influences reichen für diese Pose aus. Ein Stresstest mit Armen über
Kopf und tiefen Knien steht noch aus.
## Artefakte
- Vergleichsbild:
`~/Downloads/rinkplanner_skater_meshy_t25/retarget_comparison.png`
- Statischer Vergleich (nur die beiden Posen-Meshes, ohne Rig):
`~/Downloads/rinkplanner_skater_meshy_t25/retarget_comparison_static.png`
- Blender-Testdatei mit Rig und retargeteter Action:
`~/Dokumente/workbench_rinkplanner/source/characters/skater_ai/skater_ai_retarget_test_v001.blend`
- Aufgeräumte, statische Vergleichsdatei (beim Öffnen direkt in Kameraansicht):
`~/Dokumente/workbench_rinkplanner/source/characters/skater_ai/skater_ai_retarget_comparison_v001.blend`
- Getestete Frames: 01, 13, 25, 37 (Produktion links, AI-Retarget rechts).
## Empfehlung
Retargeting ist der richtige Weg; der eingebaute Clip der AI-Figur ist
statisch und unbrauchbar. Für einen Austausch der Vorschau fehlen noch:
1. Stresstest der 4-Influence-Gewichte (Arme hoch, Knie tief).
2. Skalierung auf die Produktionshöhe bzw. Kamera-/Szenenanpassung.
3. Entscheidung, ob die AI-Figur die bestehende `Glide`-Figur ersetzt oder
nur als Alternative verfügbar bleibt.
## Nachtrag: Abbruch (2026-11-11)
Der reine Meshy-Download zeigt im Solid-/Wireframe-Modus ein **zerstörtes
Gesicht**: Löcher und überlappende Dreiecke an Augen, Nase und Mund. Die
Textur hat das in der Vorschau kaschiert. Das ist ein Geometrieproblem des
30k-Smart-Topology-Meshs, nicht des Retargetings. Die AI-Figur ist damit für
die Produktionsvorschau ungeeignet. `character.skater.figure` bleibt
unverändert die aktive Figur; `character.skater.figure_ai` bleibt vorerst
nur als dokumentierte Alternative im Manifest, ohne `Skater3D`-Verdrahtung.