Fine-Tuning

Fine-Tuning bedeutet, ein bereits trainiertes KI-Modell mit zusätzlichen, gezielt ausgewählten Daten weiterzutrainieren. Das Modell behält sein allgemeines Wissen und lernt dazu etwas Bestimmtes, etwa einen Zeichenstil, ein Produkt oder das Aussehen einer Figur. Der Aufwand ist viel geringer als ein Training von Grund auf.

Wie funktioniert Fine-Tuning?

Ausgangspunkt ist ein großes Grundmodell, das schon weiß, wie Menschen, Licht und Bewegung aussehen. Du stellst eine kleinere Sammlung eigener Beispiele zusammen, bei Bild- und Videomodellen jeweils mit einer Textbeschreibung. Im Training passt das Modell seine Gewichte ein Stück weit an diese Beispiele an. Danach reagiert es auf bestimmte Begriffe oder Prompts mit dem gelernten Stil oder der gelernten Figur.

Beim vollständigen Fine-Tuning werden alle Gewichte verändert. Das braucht viel Grafikspeicher und ergibt eine neue, große Modelldatei. Deshalb ist bei Bild- und Videomodellen ein sparsameres Verfahren verbreitet: LoRA, beschrieben im Paper LoRA: Low-Rank Adaptation of Large Language Models. Dabei bleiben die Originalgewichte unverändert, und nur eine kleine Zusatzschicht wird trainiert.

Wofür nutzen Kreative Fine-Tuning?

Typische Ziele sind wiedererkennbare Figuren, die über viele Clips gleich aussehen, ein einheitlicher Look für eine Marke, bestimmte Produkte, die originalgetreu dargestellt werden sollen, oder Bewegungsarten und Kameraeffekte, die das Grundmodell nicht gut beherrscht. Manche Web-Tools bieten das als einfache Funktion an, bei der du nur Bilder hochlädst. Bei offenen Modellen trainierst du selbst, meist mit eigener Grafikkarte oder gemieteter Rechenleistung.

Worauf du achten solltest

Ein Fine-Tuning ist nur so gut wie die Daten. Unscharfe, einseitige oder schlecht beschriebene Beispiele führen zu Fehlern, die sich in jedem Clip wiederholen. Trainierst du zu lange, verliert das Modell an Flexibilität und erzeugt fast nur noch Varianten deiner Beispiele. Verwende nur Material, an dem du die Rechte hast. Für Gesichter echter Personen brauchst du deren Einwilligung, mehr dazu im Ratgeber Rechtliches bei KI-Videos.