Zeichnungen erwachen durch DrawingSpinUp in beeindruckender 3D-Animation zum Leben

Die Lösung: DrawingSpinUp

Um diese Herausforderungen zu überwinden, haben die Forscher DrawingSpinUp entwickelt, ein neuartiges System zur Erzeugung plausibler 3D-Animationen aus einfachen Zeichnungen. DrawingSpinUp verwendet eine Strategie der Entfernung und Wiederherstellung, um zunächst die ansichtsabhängigen Konturlinien zu entfernen und sie nach der Retargetierung des rekonstruierten Charakters wieder einzublenden. Für die geometrische Verfeinerung haben die Entwickler einen skelettbasierten Ausdünnungsalgorithmus entwickelt, um die schlanken Strukturen, die durch die einfachen Linienkonturen dargestellt werden, zu verfeinern.

Experimentelle Evaluationen und Benutzerstudie

Die experimentellen Bewertungen und eine Wahrnehmungsstudie zeigen, dass DrawingSpinUp die bestehenden 2D- und 3D-Animationsmethoden übertrifft und hochwertige 3D-Animationen aus einer einzigen Zeichnung erzeugt. Das System wurde an 120 repräsentativen amateurhaften Zeichnungen getestet, die aus dem Amateur Drawing Dataset von Smith et al. (2023) stammen. Die Ergebnisse zeigen, dass DrawingSpinUp sowohl in Bezug auf die Geometrie als auch auf das Erscheinungsbild eine plausible 3D-Rekonstruktion aus einfachen Zeichnungen erreicht und lebendige 3D-Animationen erzeugt.

Verwandte Arbeiten

2D-Charakteranimation

Die Animation von Zeichnungen im 2D-Bereich basiert häufig auf Algorithmen wie dem "As-Rigid-As-Possible" (ARAP) Deformationsalgorithmus, der es Benutzern ermöglicht, eine 2D-Form durch Ziehen von Schlüsselpunkten intuitiv zu deformieren. Methoden wie Live Sketch und AniClipart haben diese Ansätze weiterentwickelt, um Skizzen zu animieren und Cliparts in neue Posen zu bringen. Diese Methoden sind jedoch auf 2D-Animationen beschränkt und können keine 3D-Animationen erzeugen.

3D-Charakteranimation

Um 3D-Bewegungen zu übertragen, haben Forscher vorgeschlagen, 3D-Modelle als Proxy aus Einzelansichtszeichnungen zu rekonstruieren. Frühe Methoden basierten auf Silhouetten und Skeletten und verwendeten Techniken wie Aufblasen, um 3D-Maschen zu erzeugen. Neuere Ansätze nutzen tiefes Lernen und datengetriebene Methoden, um Charakteranimationen durch Bewegungstransfer zu erzeugen. Diese Methoden sind jedoch oft auf festgelegte Blickwinkel beschränkt und können keine freien Ansichten erzeugen.

Fazit

DrawingSpinUp stellt einen bedeutenden Fortschritt in der Animationstechnologie dar, indem es einfache Zeichnungen in lebendige 3D-Animationen verwandelt. Mit seiner innovativen Strategie der Entfernung und Wiederherstellung von Konturlinien und der geometrischen Verfeinerung dünner Strukturen übertrifft DrawingSpinUp die bestehenden Methoden und bietet eine neue Möglichkeit, Zeichnungen zum Leben zu erwecken. Die Ergebnisse der experimentellen Studien zeigen, dass DrawingSpinUp hochwertige 3D-Animationen aus einer einzigen Zeichnung erzeugt und damit neue Möglichkeiten für die visuelle Inhaltserstellung eröffnet.

Bibliographie

1. https://arxiv.org/abs/2409.08615
2. https://arxiv.org/html/2409.08615v1
3. https://github.com/LordLiang/DrawingSpinUp
4. https://x.com/_akhaliq?lang=de
5. https://monstermash.zone/
6. https://sketch.metademolab.com/canvas
7. https://www.youtube.com/watch?v=XjahSjZLPKc