Hoe een LoRA werkt
Een heel model finetunen betekent honderden miljoenen tot miljarden gewichten herschrijven en een bestand van 2 tot 7 GB opleveren voor SD 1.5 of SDXL. Een LoRA bevriest het model en traint alleen paren kleine matrices, vooral naast de attention-lagen; het product van elk paar benadert de verandering. Het resultaat vangt "wat nieuw is" in een klein bestand en wordt bij het genereren toegepast, met een vermenigvuldigingsfactor. Tien tot dertig afbeeldingen zijn vaak genoeg om er een te trainen op een consumenten-GPU, in minuten tot enkele uren, afhankelijk van het basismodel.
Hoe gebruik je een LoRA?
- Download een LoRA die gemaakt is voor jouw basismodel: een SD 1.5-LoRA werkt niet met SDXL, en omgekeerd; SD 3.5 heeft zijn eigen LoRA's.
- Zet het bestand in de map
models/Loravan Automatic1111 (of het equivalent in ComfyUI, Forge of Fooocus). - In Automatic1111, Forge en Fooocus roep je hem in de prompt aan met
<lora:bestandsnaam:0.8>; in ComfyUI voeg je in plaats daarvan een Load LoRA-node toe. Het getal is het gewicht; 0,6 tot 1,0 is het gebruikelijke bereik. - Voeg het triggerwoord toe dat de maker opgeeft, als dat er is (een personagenaam, een stijltoken).
- Stel bij: te sterk en elke afbeelding ziet er hetzelfde uit, te zwak en er verandert niets.
LoRA's combineren
Je kunt meerdere LoRA's stapelen: een stijl op 0,7, een personage op 0,8, een detailversterker op 0,4. Verlaag elk gewicht naarmate je er meer toevoegt, en zet de seed vast terwijl je ze afstelt, anders zie je niet wat elke LoRA doet. LoRA's die op hetzelfde concept zijn getraind vechten met elkaar; kies er één.
LoRA, embeddings, checkpoints: wat kies je?
| Type | Grootte | Geschikt voor | Gebruik |
|---|---|---|---|
| Checkpoint (finetune) | 2–7 GB (SD 1.5, SDXL) | een complete esthetiek (realistisch, anime) | vervangt het basismodel |
| LoRA | enkele MB tot enkele honderden MB | een stijl, personage, voorwerp, pose | <lora:naam:gewicht> in de prompt, of een Load LoRA-node in ComfyUI |
| Textual inversion (embedding) | enkele KB tot 100 KB | één enkel token, vaak voor de negatieve prompt | de tokennaam in de prompt |
Een gangbare opzet is één goed checkpoint, met LoRA's die je per afbeelding wisselt.
Waar vind je LoRA's?
Civitai en Hugging Face hosten er tienduizenden, met voorbeeldafbeeldingen, triggerwoorden en het basismodel dat ze nodig hebben. Controleer de licentie: sommige verbieden commercieel gebruik, en Civitai heeft sinds mei 2025 LoRA's van echte personen verwijderd. Onze vergelijking van kunstenaarsstijlen is een goed alternatief voor stijlen: een naam in de prompt doet vaak wat een stijl-LoRA zou doen, zonder iets te downloaden.