LoRA

LoRA steht für Low-Rank Adaptation und ist ein Verfahren, mit dem du ein vorhandenes KI-Modell gezielt nachtrainierst. Du zeigst dem Modell einige Beispiele, etwa Bilder einer Figur, eines Produkts oder eines Stils, und erhältst eine kleine Zusatzdatei. Mit ihr erzeugt das Modell genau diese Figur oder diesen Stil zuverlässiger, als es ein Prompt allein schafft.

Wie funktioniert LoRA?

Große KI-Modelle haben Milliarden Parameter. Sie komplett neu zu trainieren, kostet viel Rechenzeit und Speicher. Die LoRA-Methode, 2021 von Forschern bei Microsoft für Sprachmodelle vorgestellt, lässt das Grundmodell unverändert. Stattdessen werden wenige zusätzliche Gewichte trainiert, die an bestimmten Stellen des Modells eingehängt werden. Diese Ergänzung ist klein, oft nur einige Megabyte groß, und lässt sich an- und abschalten.

Später wurde das Verfahren auf Bildmodelle übertragen und ist dort heute weit verbreitet. Inzwischen gibt es LoRAs auch für Videomodelle. Du kannst mehrere LoRAs kombinieren und meist über einen Regler festlegen, wie stark sie wirken.

Wofür brauchst du LoRA bei KI-Videos?

Der wichtigste Einsatz ist Konsistenz. Wenn dieselbe Figur in vielen Clips gleich aussehen soll, stößt ein Prompt schnell an Grenzen. Eine LoRA, die auf diese Figur trainiert ist, hält Gesicht, Kleidung und Proportionen stabiler. Dasselbe gilt für Produkte, die in Werbeclips immer exakt gleich aussehen müssen, und für einen festen visuellen Stil einer Marke.

LoRAs sind vor allem bei Open-Source-Modellen üblich, die du lokal oder über einen Cloud-Dienst betreibst. Manche Plattformen bieten das Training auch im Browser an. Krea etwa nennt LoRA-Training als Funktion neben Bild- und Videogenerierung. Einen Überblick über solche Dienste findest du unter KI-Plattformen.

Worauf du achten solltest

Die Qualität einer LoRA hängt direkt von den Trainingsbildern ab. Nimm scharfe Bilder mit unterschiedlichen Blickwinkeln, Hintergründen und Lichtsituationen. Wenn alle Bilder denselben Hintergrund zeigen, lernt die LoRA diesen Hintergrund mit. Eine zu stark gewichtete LoRA kann Bilder verzerren, deshalb lohnt es sich, mit der Stärke zu experimentieren.

Eine LoRA passt immer nur zu dem Grundmodell, für das sie trainiert wurde. Wechselst du das Modell oder die Version, musst du in der Regel neu trainieren. Und trainiere nur auf Material, an dem du die Rechte hast. Eine LoRA, die eine echte Person ohne deren Zustimmung nachbildet, ist rechtlich heikel. Mehr dazu im Ratgeber KI-Videos und Recht.