KI-Videobearbeitung: Prompts, Video-to-Video, Objekt- und Hintergrundentfernung

Welches Tool für welche Aufgabe

Videobearbeitung per Prompt

Eine Prompt-Änderung verändert einen Teil eines Clips, während die Bewegung erhalten bleibt. Formulieren Sie es als Anweisung: was sich ändern soll und was unverändert bleiben muss. „Ersetze die zwei LKWs durch zwei Elefanten an derselben Stelle und lass die anderen Einstellungen unverändert.“ Fragen Sie sich danach immer, ob wirklich editiert oder die Einstellung heimlich neu generiert wurde. Vergleichen Sie es mit der Quelle: Wenn Personen stillstehen oder sich der Bildausschnitt ändert, war es eine neue Generierung.

Edits berechnen Input und Output, daher kürzen Sie die Quelle auf die Einstellung, die Sie ändern möchten. Bei Kling erhöht ein Input, der länger als der Output ist, die Kosten.

Video-to-Video

Unser Recast-Test führte einen 16-sekündigen Werbespot mit elf Schnitten über vier Wege mit denselben freigegebenen Bildern durch. Kling 4.0 Edit und Wan 3.0 behielten die Schnitte und Gesten bei, Higgsfield Genjutsu Lite bearbeitete die gesamten 16 Sekunden in einem Durchgang, und Seedance 2.5 Preview in Dreaminas Multimodal-Modus inszenierte die Einstellung neu. Um auch das Format zu ändern, bearbeiten Sie lieber von einem horizontalen Original, anstatt ein vertikales per Outpainting zu erweitern.

Einen Video-Hintergrund entfernen

Es existieren zwei Ansätze, die unterschiedlichen Bedürfnissen entsprechen. Matting findet die Person und behält deren Originalpixel bei, sodass das Gesicht unverändert bleibt und Sie die Person über alles andere legen können. Generative Ersetzung zeichnet den Raum neu und kann das Licht anpassen, zeichnet dabei aber auch die Person neu.

Alle drei hatten Schwierigkeiten mit feinen Haaren vor einer hellen Wand. Halten Sie Overlays aus dem Clip heraus, den Sie senden, und fügen Sie diese in der Montage wieder hinzu. Die ehrliche Antwort für einen kostenlosen Video-Hintergrundentferner lautet also: Open-Source-Modelle funktionieren, kosten aber Zeit und beeinträchtigen die Kantenschärfe. Der vollständige Test zeigt die Clips.

Ein Objekt aus einem Video entfernen

Unsere Notiz zur Objektbearbeitung umfasst sechs Tools. Um etwas zu entfernen, nennen Sie das Objekt in einem kurzen Prompt und sagen Sie, dass alles andere unverändert bleibt. Seedance 2.5 Video Edit nutzt einen Text-Prompt, und einige Anbieter bieten eine Möglichkeit, das Objekt auf einem Frame zu markieren, auf dem es vollständig sichtbar ist. Wir haben damit noch keine Entfernung durchgeführt.

Bei unserem eigenen Projekt mit Genjutsu hat das Modell etwa die Hälfte der Objekte, die wir ändern wollten, übersehen; prüfen Sie daher jedes Bild.

Es gibt kostenlose Online-Tools zur Objektentfernung, die wir jedoch nicht getestet haben. Rechnen Sie mit Einschränkungen bei Länge und Auflösung sowie einem Wasserzeichen. Wir werden einen Test durchführen, bevor wir eine Empfehlung aussprechen.

Face Swap und das Ersetzen einer Person

Unsere Erfahrung hierbei ist das Neubesetzen ganzer Personen in einem Werbespot, wobei neue Gesichter zuerst als Bilder freigegeben werden. Wir haben keine Apps für reinen Face-Swap getestet. Ein Recasting behält die Performance bei und ändert nur die darstellende Person, was dieselben Fragen aufwirft wie jeder Face-Swap: Nutzen Sie nur Personen, die zugestimmt haben, und stellen Sie keine reale Person bei etwas dar, das sie nicht getan hat. Einige Plattformen lehnen zudem Clips von realen Personen ab, wie es Seedance 2.5 von fal in unserem Test tat.

Style Transfer

Restyling bedeutet, die Bewegung beizubehalten und das gesamte Erscheinungsbild zu ändern. Unser nächster Beleg ist das Room-and-Outfit-Restyle, bei dem Seedance 2.5 Video Edit ein einzelnes Referenzbild als Ziel-Look verwendet hat. Google gibt an, dass Gemini Omni Flash hochgeladene Videos mit neuen Prompts und Zutaten bearbeiten kann, bei etwa $0.10 pro Sekunde 720p-Ausgabe auf seinem API, und wir haben dies nicht getestet. Wir haben keinen kontrollierten Test für künstlerischen Stiltransfer durchgeführt, wie etwa Realfilm in Anime, daher treffen wir hierzu noch keine Entscheidung.

Benötigen Sie überhaupt einen KI-Videoeditor?

Für Schnitte, Untertitel und Ton ist ein herkömmlicher Editor immer noch schneller. Nutzen Sie KI, wenn Sie den Inhalt innerhalb der Einstellung ändern möchten. CapCut und Canva integrieren nun die Generierung direkt in den Editor, wie unserer Zusammenfassung zu entnehmen ist, und unsere Plattform zielt auf dieselbe Lücke für die Produktion ab. Für den Feinschliff lesen Sie den Hinweis zum Upscaling, bevor Sie auf 4K zurückgreifen.

Geschrieben von Oleksiy Onishchenko, der KI-Filme für Marken produziert und KI-Video-Workshops lehrt. Gründer von easyai.video.