8 Alternativen zu Higgsfield Genjutsu für den Figurentausch in Videos

Higgsfield Genjutsu sorgt mit Videos für Aufmerksamkeit, in denen eine vertraute Szene plötzlich anders besetzt ist. Mit Motion Transfer übernimmt die Figur auf einem Foto die Bewegungen aus einem Referenzvideo. Mit Object Swap lässt sich ein einzelnes Detail der Aufnahme austauschen, etwa eine Jacke oder eine Requisite. Hier sind acht Genjutsu-Alternativen für solche Bearbeitungen mit eigenem Material.

Die acht Werkzeuge im Überblick

1. DomoAI — Übertrage die Bewegungen einer gefilmten Person auf deine Figur. Für Figurenanimation und Stilwechsel in einer Arbeitsumgebung.
2. Viggle — Animiere eine Figur mit einer Bewegungsvorlage. Für Tanz-Remixe.
3. Runway — Prüfe die neue Figur in einem Schlüsselbild, bevor du die Änderung auf die Aufnahme überträgst. Für gezielte Änderungen an einzelnen Einstellungen.
4. Kapwing — Besetze eine Szene neu und ergänze Untertitel und Ton im selben Editor. Für die Fertigstellung von Social-Media-Videos.
5. WaveSpeed — Tausche Figuren über eine gehostete API aus. Für die Automatisierung wiederkehrender Aufgaben.
6. Wan-Animate — Lade die Modellgewichte herunter und ersetze Figuren auf der eigenen GPU. Für den Betrieb auf eigener Infrastruktur.
7. Luma — Verändere mit Ray3.2 Modify Video die Optik einer Szene auf Basis der gefilmten Darbietung. Für einen neuen Look bei vorhandenem Material.
8. Kling AI — Steuere die Bewegung einer Figur mit einer Videoaufnahme. Für die Animation eines Standbilds anhand einer gefilmten Darbietung.

1. DomoAI – Bewegungen aus einem Video auf eine Figur übertragen

Lade ein Referenzvideo und ein Foto deiner Figur in Charakter zu Video. Das Video liefert die Bewegung, das Foto bestimmt das Aussehen. Brauchst du nur einen Teil der Aufnahme, kannst du ihn beim Hochladen zuschneiden. Das spart einen separaten Schnitt und Credits für überflüssiges Material.

Soll ein Maskottchen winken, wähle die Stelle, an der die gefilmte Person die Hand hebt. Auf dem Bild des Maskottchens sollte der Arm gut zu erkennen sein. Änderungen am Bild kannst du im KI-Bildeditor vornehmen und die neue Fassung anschließend aus dem Verlauf oder der Medienbibliothek auswählen.

Hast du dich für eine Aufnahme entschieden, kannst du mit Restyle Video eine Anime-Fassung erstellen oder mit dem Video-Upscaler die Auflösung auf bis zu 4K erhöhen. Beide Schritte lassen sich einzeln auf den Clip anwenden, den du veröffentlichen möchtest.

Geeignet für: Für alle, die ein Figurenbild vorbereiten, mit eigenem Videomaterial animieren und das Ergebnis am selben Ort fertigstellen möchten.

Wichtigste Einschränkung: Jede andere Figur oder Kleidung erfordert eine eigene Generierung, auch wenn du dasselbe Referenzvideo verwendest.

Preise und Zugang: Die Tabelle zeigt monatliche Preise bei jährlicher Abrechnung. Ab Standard steht bei unterstützten Modellen der Relax-Modus zur Verfügung. Der oben gezeigte Ablauf mit Kling 4.0 verbraucht Credits im Fast-Modus.

2. Viggle – Figuren-Remixe mit Bewegungsvorlagen

Viggle kombiniert mit dem Werkzeug Mix ein Figurenbild und ein Bewegungsvideo. Du kannst einen eigenen Clip oder eine Vorlage verwenden, um einen bekannten Tanz oder ein Meme mit einer neuen Figur zu besetzen.

Vorlagen helfen besonders, wenn die Figur feststeht, die passende Bewegung aber noch fehlt. Beim Durchsehen kannst du einschätzen, was zu ihr passt. Für mehrere Varianten eines kurzen Formats lässt sich dieselbe Darbietung erneut verwenden.

Mix verbindet eine Figur mit einem Bewegungsvideo. Multi nimmt mehrere Figurenbilder für einen Clip an. Motion Control überträgt eine Referenzbewegung auf ein Standbild. Welche Einstellungen verfügbar sind, hängt vom jeweiligen Modus ab.

Für Entwickler gibt es außerdem Viggle-Animate zum Austausch von Figuren. Dieses Angebot ist von Mix getrennt. Die API-Preise und Spezifikationen gelten daher nicht für jede Generierung in der Endkunden-App.

Geeignet für: Für kurze Figuren-Remixe, Tanzvarianten und Videos mit Bewegungsvorlagen, besonders wenn du noch nach einer passenden Darbietung suchst.

Wichtigste Einschränkung: Für feine Änderungen an einer bestimmten Aufnahme können Vorlagen zu wenig Spielraum bieten. Prüfe vor dem Kauf von Credits, ob Mix oder Multi passt. Auch mit mehreren Figuren gelingt nicht jede komplexe Interaktion.

Preise und Zugang: Die Viggle-AI-Tarife in der Tabelle werden jährlich abgerechnet. Für die API fallen separate Kosten an.

3. Runway – Figuren in vorhandenen Aufnahmen bearbeiten

Runway eignet sich, wenn der Figurentausch Teil einer umfangreicheren Bearbeitung ist. Edit Studio arbeitet mit Aleph 2.0 und kann Figuren, Objekte und Hintergründe vorhandener Aufnahmen verändern. Du kannst die Änderung an einem Schlüsselbild ausarbeiten, bevor du sie auf das Video anwendest.

So lassen sich Kostüm, Silhouette und Position der Figur vor dem Rendern prüfen. Ein gelungenes Standbild garantiert noch keine flüssige Bewegung, aber du kannst die Gestaltung vorab festlegen.

Bei der Neubesetzung einer kurzen Realfilmszene kann die Position der Figur im Bild ebenso wichtig sein wie das Gesicht. Die Vorschau hilft bei dieser gestalterischen Entscheidung, wenn du mehr kontrollieren möchtest als die Wahl einer Bewegungsvorlage.

Die Dokumentation von Edit Studio beschreibt den Modus Single edit. Multi-edit und Expand sind als kommende Funktionen gekennzeichnet. Orientiere dich beim Kauf an den bereits verfügbaren Einstellungen.

Geeignet für: Für alle, die das Aussehen der Figur im Bild prüfen und dann gezielt am Video weiterarbeiten möchten. Auch für Teams sinnvoll, die Runway bereits nutzen.

Wichtigste Einschränkung: Die Arbeit am Einzelbild kostet Zeit, die für eine schnelle Remix-Serie womöglich unnötig ist. Auch ein freigegebenes Schlüsselbild garantiert keine durchgehende Kontinuität im fertigen Clip.

Preise und Zugang: Die Tabelle zeigt Einzeltarife bei jährlicher Abrechnung. Eine zehnsekündige Bearbeitung mit Aleph 2.0 kostet 280 Credits für die Videogenerierung. Die Erzeugung von Schlüsselbildern wird separat berechnet.

4. Kapwing – Figuren austauschen und das Video fertig schneiden

Kapwing ist interessant, wenn nach der Generierung der neuen Figuren noch Schnittarbeit ansteht. In Kai kannst du Seedance 2.5 mit mehreren Referenzen verwenden. Der Editor bietet Untertitel, Formatänderungen, das Zusammenfügen von Clips und Tonbearbeitung.

Die Figurenbilder bestimmen das Aussehen, ein Video gibt die Bewegung vor. Weitere Bilder können Kulisse und Kostüm festlegen. Das passt zu Projekten, bei denen die Szene um eine neue Besetzung herum aufgebaut wird.

Kapwing hat eine Szene für zwei Personen mit getrennten Figurenbögen und einer Bewegungsreferenz nachgestellt. Das zeigt eine Einsatzmöglichkeit mehrerer Referenzen. Eine Erfolgsquote für Szenen, in denen Personen einander kreuzen, berühren oder verdecken, lässt sich daraus nicht ableiten.

Nach der Generierung kannst du am selben Ort Musik, Untertitel und das passende Seitenverhältnis für die Veröffentlichung ergänzen. Eine Tonspur lässt sich im Schnitt platzieren, ohne den ganzen Soundtrack vom Modell nachbilden zu lassen.

Bei einer Serie bleiben so die generierten Clips und die Gestaltung für die Veröffentlichung zusammen.

Geeignet für: Für Einzelpersonen und kleine Teams, die eine Szene neu besetzen und anschließend für soziale Medien schneiden möchten.

Wichtigste Einschränkung: Bei mehreren Referenzen kann sich auch die Umgebung der Figuren ändern. Die Vorbereitung ist aufwendiger als bei einem einzigen Bild-Video-Paar. Wer bereits einen Editor nutzt, hat manche Funktionen womöglich schon.

Preise und Zugang: Die angegebenen Preise der Bezahltarife gelten bei jährlicher Abrechnung. Prüfe vor der Generierung die Credit-Schätzung des gewählten Modells.

5. WaveSpeed – Gehostete Modelle per Browser und API nutzen

WaveSpeed bietet verschiedene gehostete Modelle zum Ausprobieren und zur Einbindung in eigene Anwendungen. Bewegungssteuerung und Objektaustausch sind per Browser und API zugänglich. Du kannst den Ablauf zunächst im Browser testen, bevor du eine Integration entwickelst.

Die Bewegungsmodelle müssen nicht einzeln installiert werden. Welche Eingaben, Einstellungen und Generierungsbedingungen gelten, richtet sich nach dem Modell und dem gewählten API-Endpunkt.

Für größere Stückzahlen kann ein Entwickler das Einreichen freigegebener Figurenbilder und Quellclips, die Fortschrittskontrolle und die Dateiabholung automatisieren. Diese Stapelverarbeitung baut das Team selbst um die API herum auf.

Der Nutzen liegt in der Modellauswahl und der programmierbaren Generierung. Untertitel, Reihenfolge der Einstellungen und Endmontage bleiben gegebenenfalls in anderen Werkzeugen.

Geeignet für: Für Entwickler, technisch versierte Kreative und Teams, die gehostete Modelle auswählen oder die Generierung per API automatisieren möchten.

Wichtigste Einschränkung: Du musst dich mit dem gewählten Modell vertraut machen. Die Grenzen eines Endpunkts gelten nicht automatisch für andere Modelle. Objektaustausch und Bewegungsübertragung erfüllen unterschiedliche Aufgaben. Mehr Auswahl bedeutet auch mehr Prüfaufwand.

Preise und Zugang: Für Seedance 2.5 Motion Control zählt die auf volle Sekunden aufgerundete Dauer der Referenzaufnahme im Bereich von 4 bis 30 Sekunden. Die Tabelle zeigt Listenpreise. Prüfe die Schätzung für deinen Auftrag.

6. Wan-Animate – Ein Modell zum Figurentausch selbst betreiben

Wan-Animate empfiehlt sich, wenn du die Generierungsumgebung selbst verwalten willst. Wan2.2-Animate-14B stellt Gewichte und Inferenzcode zur Animation und zum Austausch von Figuren bereit. Du führst das Modell in einer selbst eingerichteten Umgebung aus.

Im Animationsmodus wird das Figurenbild anhand einer Darbietung bewegt. Im Austauschmodus wird die Figur innerhalb des Videos ersetzt. Die offizielle Implementierung erklärt Vorverarbeitung und Inferenz für den Einstieg mit eigener oder gemieteter GPU.

Nach der Einrichtung kannst du Eingabedateien, Warteschlangen und Ausgabespeicher nach den Anforderungen deines Teams organisieren. Das ist besonders bei wiederkehrenden Produktionen nützlich.

Auch Einrichtung, Vorverarbeitung, GPU-Kapazität und Ausgabe gehören dann zu euren Aufgaben. Jemand muss Fehler untersuchen und die Software warten. Hosting-Anbieter übernehmen gegebenenfalls Teile davon, haben aber eigene Preise und Einschränkungen.

Geeignet für: Für technische Teams mit ausreichender Rechenleistung und einem konkreten Grund, den Figurentausch in eigener Regie zu betreiben.

Wichtigste Einschränkung: Wer nur einen Clip hochladen und das Ergebnis herunterladen möchte, muss hier zunächst die Umgebung einrichten. Modellgewichte enthalten weder Schnittwerkzeuge noch laufenden Infrastruktur-Support. Die nötige Leistung hängt vom Arbeitsvolumen ab.

Preise und Zugang: Beim Eigenbetrieb gibt es keinen festen Clippreis. Die Kosten ergeben sich aus Hardware und Rechenzeit.

7. Luma – Gefilmte Darbietungen mit Ray3.2 Modify Video umgestalten

Luma passt, wenn Schauspiel und Kameraarbeit stimmen, die Szene aber anders aussehen soll. Mit Ray3.2 Modify Video beschreibst du für eine vorhandene Aufnahme ein neues Kostüm oder eine neue Umgebung. Aus einem Auftritt im Proberaum kann so derselbe Auftritt in Kostüm und Kulisse werden.

Geeignet für: Für die visuelle Neugestaltung einer gefilmten Darbietung, vor allem wenn sich neben der Figur auch die Umgebung verändern darf.

Wichtigste Einschränkung: Ein Stilwechsel kann das gesamte Bild betreffen. Soll der Hintergrund erhalten bleiben, prüfe bei Bewegungen die Konturen der Figur.

Preise und Zugang: Die Tabelle zeigt die SDR-Basistarife für Video-zu-Video mit Ray3.2. Das Beispiel bezieht sich auf eine einzelne Generierung von fünf Sekunden.

8. Kling AI – Figurenbilder mit Motion Control animieren

Kombiniere in Motion Control von Kling AI ein Standbild der Figur mit einem Video der gewünschten Bewegung. Für eine Verbeugung auf der Bühne sollte der Clip die ganze Verbeugung und das Bild den Oberkörper zeigen. So gibst du das Timing durch deine Darbietung vor, ohne jede Bewegung im Prompt beschreiben zu müssen.

Geeignet für: Für alle, die bereits einen Figurenentwurf haben und die Körperbewegungen mit eigenem Filmmaterial steuern möchten.

Wichtigste Einschränkung: Auf dem Bild müssen die für die Aktion wichtigen Körperteile erkennbar sein. Ein enges Gesichtsporträt liefert für eine Ganzkörperdrehung zu wenige Details.

Preise und Zugang: Die Tabelle zeigt die API-Tarife für Kling 3.0 Motion Control. Die Web-App gibt eine eigene Kostenschätzung aus.

Wenn du Figurenreferenzen und Videos an einem Ort verarbeiten möchtest, sieh dir DomoAIs Alternative zu Genjutsu an. Dort findest du die benötigten Eingaben, Beispiele und passende Werkzeuge für dein Projekt.