Dein Einstieg in die Welt der LoRAs mit ComfyUI: Mehr als nur ein Filter!
Stell dir vor, du hast ein unglaublich vielseitiges Werkzeug, das schon von Haus aus beeindruckende Dinge erschaffen kann – zum Beispiel Bilder. In ComfyUI ist dieses mächtige Basiswerkzeug dein sogenannter Checkpoint. Er ist das Fundament, auf dem all deine künstlich generierten Bilder entstehen.
Aber was, wenn du deinen Bildern einen ganz bestimmten Dreh geben möchtest? Einen besonderen Stil, ein bestimmtes Objekt oder sogar das Aussehen einer speziellen Person hinzufügen willst, ohne das gesamte Basiswerkzeug umzukrempeln? Hier kommen die LoRAs (Low-Rank Adaptations) ins Spiel.
LoRA: Dein kleines Extra-Talent für große KI-Bilder
Eine LoRA ist wie ein kleiner, spezialisierter Aufsatz oder ein Filter für dein großes Werkzeug. Anstatt den gesamten Checkpoint zu verändern oder neu zu trainieren, fügst du einfach diesen kleinen „Aufsatz“ hinzu.
Was macht dieser LoRA-Aufsatz genau?
- Er ist darauf trainiert, spezifische Stile, Objekte, Charaktere oder Details zu erzeugen. Denk an einen LoRA für einen bestimmten Malstil wie Aquarell, ein Auto einer bestimmten Marke oder eben das Aussehen einer bestimmten Person.
- Er beeinflusst den Checkpoint so, dass die erzeugten Bilder diese besonderen Merkmale aufweisen, ohne dass das Basismodell seine allgemeinen Fähigkeiten verliert.
Du kannst dir eine LoRA in ComfyUI also wie ein kleines Extra-Talent für dein großes KI-Bildwerkzeug vorstellen. Es erlaubt dir, deinen Bildern spezifische Stile und Inhalte hinzuzufügen, ohne das Hauptwerkzeug zu verändern – und das auf eine einfache und effiziente Weise.
So nutzt du eine LoRA in ComfyUI
ComfyUI macht dir den Einstieg leicht. Es gibt sogar schon ein Template für einen LoRA-Workflow. Wenn du dieses öffnest, wirst du wahrscheinlich feststellen, dass ein Checkpoint und eine LoRA fehlen. Keine Sorge, die Lösung ist einfach:
- Lade die benötigten Dateien herunter und verschiebe sie in die entsprechenden Ordner: ComfyUI/models/Checkpoints für den Checkpoint und ComfyUI/models/loras für die LoRA.
Sobald du auf „Run“ klickst, laufen die folgenden Schritte ab:
- Checkpoint laden (Load Checkpoint)
- LoRA laden (Load LoRA)
- Positiven und negativen Prompt in Computersprache übersetzen (CLIP Text Encode)
- Bildinformation in Computersprache laden (Empty Latent Image)
- Die Bildinformationen bearbeiten (K-Sampler)
- Das Ergebnis in ein Bild zurückverwandeln (VAE Decode)
- Das Bild speichern (Save Image)
Du siehst, der LoRA-Workflow unterscheidet sich vom Standard-Workflow hauptsächlich durch den zusätzlichen Schritt des LoRA-Ladens.
Was du als Anfänger beachten solltest
Jetzt kommt dein Part, aber keine Sorge, es ist weniger kompliziert als es klingt:
- Wähle einen Checkpoint und eine LoRA, die zueinander passen. Nicht jede LoRA harmoniert perfekt mit jedem Checkpoint.
- Finde heraus, ob die gewählten Modelle zusätzliche Einstellungen benötigen, besonders im K-Sampler, und passe diese gegebenenfalls an.
- Ganz wichtig: Mit welchen Worten wird die LoRA aktiviert? Diese sogenannten Aktivierungswörter musst du in deinen positiven Prompt eintragen, damit die LoRA ihre Wirkung entfaltet.
Zum Ausprobieren kannst du den Workflow wie er vorgegeben ist benutzen und abändern!
Trau dich zu experimentieren!
Du musst nicht jeden Schritt im Detail planen. Der größte Spaß kommt oft beim Experimentieren und Ausprobieren. Spiele mit verschiedenen Checkpoints, LoRAs und Prompts. Du wirst schnell ein Gefühl dafür bekommen, wie sie zusammenwirken.
Wo findest du weitere Hilfe?
Wenn du tiefer in die Materie eintauchen möchtest, beachte die braune Notiz links unten im ComfyUI-Workflow. Dort findest du oft Adressen mit weiteren Informationen und Beispielen. Ansonsten sind das Internet, Civitai und Hugging Face großartige Ressourcen, um mehr zu lernen und neue Modelle zu entdecken.
Also, worauf wartest du noch? Lade dir eine LoRA herunter und verleihe deinen KI-Bildern eine ganz persönliche Note! Viel Spaß beim Experimentieren!
Checkpoint: Dreamshaper_8
LoRA: Moonriver
https://civitai.com/models/107860/lora-moonriver-concept-with-dropout-and-noise-version
Trigger: moonriver
Positiv: moonriver, scenery, sky, night, star (sky), starry sky, outdoors, water, night sky, nature, rock, glowing, tree, no humans, blue theme, river
Negativ: extra fingers,fewer fingers,(low quality, worst quality:1.65), (bad anatomy), (inaccurate limb:1.2),bad composition,
Steps: 20, CFG scale: 7, Sampler: DPM++ 2M, scheduler: Karras