Frame-Interpolation

Frame-Interpolation ist ein Verfahren, das zwischen zwei vorhandenen Einzelbildern eines Videos zusätzliche Zwischenbilder berechnet. Dadurch steigt die Zahl der Bilder pro Sekunde, Bewegungen wirken flüssiger, und ein Clip lässt sich als Zeitlupe abspielen. Bei KI-Videos wird Interpolation oft genutzt, um Clips mit niedriger Bildrate nachträglich auf 30 oder 60 Bilder pro Sekunde zu bringen.

Wie funktioniert Frame-Interpolation?

Das einfachste Verfahren blendet zwei Bilder ineinander über. Das wirkt bei Bewegung unscharf und verwaschen. Bessere Methoden schätzen die Bewegung jedes Bildbereichs zwischen zwei Frames, den sogenannten optischen Fluss, und berechnen daraus, wo sich ein Objekt im Zwischenbild befinden müsste. KI-gestützte Interpolation geht noch weiter und erzeugt Zwischenbilder mit einem trainierten Modell, das auch Verdeckungen und komplexe Bewegungen besser abschätzen kann.

Aus einem Clip mit 24 Bildern pro Sekunde wird so zum Beispiel einer mit 48 oder 60. Für eine Zeitlupe erzeugt das Verfahren viele Zwischenbilder und spielt das Ergebnis mit normaler Bildrate ab.

Wann ist Interpolation sinnvoll?

• Ruckelnde KI-Clips flüssiger machen
• Zeitlupen aus normal schnellen Clips erstellen
• Videos an eine höhere Ziel-Bildrate anpassen, etwa für Bildschirme oder Plattformen mit 60 fps
• Übergänge zwischen kurzen Clips glätten

Viele KI-Video-Editoren bieten Interpolation als eigene Funktion an. Es gibt außerdem frei verfügbare Interpolationsmodelle, die du lokal nutzen kannst, siehe Open Source.

Grenzen der Frame-Interpolation

Interpolation erfindet Bewegung, die es im Original nicht gab. Bei schnellen Bewegungen, sich kreuzenden Objekten oder plötzlichen Schnitten entstehen leicht neue Artefakte, etwa verschwommene Kanten, Geisterbilder oder kurz verzerrte Hände. Bei Schnitten zwischen zwei Szenen erzeugt das Verfahren unsinnige Mischbilder, wenn es den Schnitt nicht erkennt.

Ein weiterer Punkt ist der Look. Spielfilme werden traditionell mit 24 Bildern pro Sekunde gezeigt. Wird ein solches Video auf 60 fps interpoliert, wirkt es für viele Zuschauer eher wie eine Fernsehaufnahme. Für filmische Clips ist es deshalb oft besser, bei der ursprünglichen Bildrate zu bleiben und Interpolation nur für Zeitlupen einzusetzen.