AI-gestützte Choreografie-Generierung mit EDGE
EDGE: Editable Dance Generation from Music ist ein innovatives KI-Tool, das qualitativ hochwertige Tanzroutinen aus Musik erstellt. Es nutzt Musik-Embeddings des Jukebox-Modells zur Kodierung von Eingabemusik und generiert mithilfe eines bedingten Diffusionsmodells eine Serie von 5-Sekunden-Tanzclips. Durch die Anwendung von zeitlichen Einschränkungen wird die Konsistenz der Clips sichergestellt, bevor sie zu einem vollständigen Video zusammengesetzt werden. Die Flexibilität bei räumlichen und zeitlichen Vorgaben macht EDGE vielseitig einsetzbar, insbesondere für Tänze mit gelenkbezogenen Einschränkungen und Bewegungskontinuität.
Zusätzlich implementiert EDGE eine neue Kontaktkonsistenzverluste, die die physische Realitätsnähe verbessert und ungewolltes Gleiten der Füße vermeidet. Das Tool wurde mit dem Fokus auf physische Plausibilität trainiert und übertrifft frühere Ansätze, wie menschliche Bewertungen zeigen. Insgesamt ist EDGE eine leistungsstarke Lösung zur Generierung von Choreografien aus Musik, die in verschiedenen Branchen, einschließlich Unterhaltung und Kunst, Anwendung finden kann.
