🤳 Trainiere eine eigene Bild AI (z. B. von dir selbst)

Moin AInauten,

Willkommen zur neuen Ausgabe deines Lieblingsnewsletters.

Heute ein Experiment. Keine News, dafür tiefe Praxis.

Wir trainieren ein eigenes AI Bildmodell. So kannst du z. B. für dich selbst ein AI-Model trainieren und brauchst nicht mehr zu reisen für großartige Instagram Shots. 😉 

Hier die Agenda für heute:

• 🤳 Deep Dive: Trainiere eine eigene Bild AI (z. B. von dir selbst)

• 🤯 Nutze mehrere trainierte Bild AIs (LoRAs) gleichzeitig

Bitte gib uns Feedback, ob du sowas gut findest zwischendurch oder lieber mehr News und Updates aus der Welt der AI willst.

Los geht’s!

🤳 Deep Dive: Trainiere eine eigene Bild AI (z. B. von dir selbst)

Seit einigen Wochen ist das Internet voll mit Hype um die neue Bild AI FLUX, made in Germany. Wir haben auch schon einige Male darüber geschrieben.

FLUX macht alles so viel einfacher. Und das in wahnsinnig guter Qualität.

Heute deshalb einmal ein Beispiel, welches bisher eher nur für Techies umsetzbar war, aber nun von jedem gemacht werden kann:

Wir trainieren eine eigene Bild-AI, die Bilder immer mit derselben Person ausgibt - und das Ganze für unter 5 Euro, ohne Abo-Tools!

Solche trainierten Modelle nennen sich LoRAs.

Warum kann das nützlich sein?

Solche trainierten Modelle nennen sich LoRAs. Und falls du dich jetzt fragst, warum zur Hölle ist das spannend, hier ein paar Gründe:

1) Du willst Bilder immer mit derselben Person erstellen

Das ist zum Beispiel ideal, wenn du einen AI-Influencer Account betreiben willst. Oder Bilder von dir selbst erstellen willst an Orten oder in Situationen ,in denen du noch nie warst.

2) Du willst Bilder in einem bestimmten Stil erstellen, der immer gleich sein soll

Auch super praktisch, wenn du zusammenhängende Comics erstellen willst. Oder Charaktere im selben Stil brauchst.

Du kannst also mit LoRAs dafür sorgen, dass deine Bilder konsistent bleiben mit der Person oder dem Stil, den du willst.

Vielleicht kennst du Websites wie HeadshotPro und PhotoAI. Deren Gründer verdienen Millionen und nutzen im Prinzip genau dies Technik, die wir uns jetzt anschauen.

Schritt 1: Folgende Tools brauchst du

Um eine eigene LoRA auf Basis von FLUX zu trainieren, brauchst du im Wesentlichen zwei Plattformen. Erstelle dazu einfach jeweils einen kostenlosen Account bei:

• Replicate

• Hugging Face

Es gibt zu Replicate auch noch die Alternative Fal. Wir haben in diesem Fall Replicate gewählt, weil die Plattform super praktisch ist - besonders, wenn man automatisieren will.

Schritt 2: Sammle 12 Bilder deiner Person oder des gewünschten Stils

In unserem konkreten Use Case erstellen wir eine LoRA für unsere AInauten Influencerin. Dürfen wir vorstellen: AIlexa

Wenn du eine LoRA von dir selbst erstellen willst, dann stelle einfach mindestens 12 Fotos von dir zusammen.

Im nächsten Schritt benennst du die 12 Bilder im Format: a_photo_of_PLATZHALTER

In unserem Fall heißen alle Bilder: a_photo_of_Allexa

So sieht der Ordner von uns aus. Wie du siehst, ist es eine bunt gemischte Auswahl von Bildern.

Die Benennung ist aber wichtig, weil dadurch deine LoRA später versteht, wenn du im Prompt schreibst: “Erstelle ein Bild von AIlexa…”

Als letzten Schritt in der Vorbereitung erstellst du dann eine ZIP-Datei von allen deinen Bildern.

Schritt 3: Hugging Face Modell und Token aufsetzen

Wir nutzen nun Hugging Face, um auf Modelle zuzugreifen. Dazu mache bitte Folgendes:

1) Erstelle einen Access-Token

Dazu gehst du in deinem Account auf „Settings“, und dann auf „Access Tokens“.

Gib deinem Token einen Namen und die Rechte wie oben im Bild. Wahrscheinlich sind das eh zu viele, aber mit denen funktioniert es auf jeden Fall. 😉 

Den Token, den du bekommst, speicherst du kurz ab - den brauchen wir dann gleich für Replicate.

2) Erstelle ein Model Repository

Als nächsten Schritt erstellen wir einen Ordner für unser Model. Das funktioniert wieder über dein Profil, mit einem Klick auf “New Model”.

Hier gibst du deinem Model einen sprechenden Namen - in unserem Fall z.B. ailexa-lora. Hier das Modell auf Public stellen, sonst klappt es später mit Replicate nicht wie gewünscht.

Damit haben wir dann alles, was wir bei Hugging Face brauchen. Jetzt geht es ans trainieren.

Schritt 4: Trainiere deine LoRA

Um unsere LoRA nun zu trainieren, nutzen wir Replicate.

Klicke hier, und öffne das AI-Trainings Toolkit. Klicke auf den Reiter “Train”.

Das Training ist nicht ganz kostenlos. Wir nutzen dazu einen Nvidia A100 Chip von Replicate, und das kostet natürlich etwas.

$0,0014 pro Sekunde um genau zu sein. Konkret heißt das, dass ein trainiertes Model dich zwischen 2 und 5 Euro kostet.

Ziemlich überschaubar, finden wir.

Jetzt geht es ans Ausfüllen der Trainingsmaske. Auch das ist simpel, wir lassen die meisten Werte auf Standard stehen. Hier im Detail:

Wenn du dein Modell später über Replicate nutzen willst, dann wähle bei destination den Eintrag Creating New Model.

Bei images lädst du deine ZIP Datei mit Bildern hoch.

Bei hf_token trägst du deinen Hugging Face Token ein, den wir vorher erstellt und kopiert haben.

Bei der repo_id gibst du den Pfad deines Models an, welches wir vorher bei Hugging Face angelegt haben.

Es hat immer folgendes Format: deinBenutzername/deinModelName

Alle anderen Werte kannst du erst einmal im Standard lassen.

Und das war’s auch schon, jetzt einfach noch das Training starten.

Du siehst dann bei Replicate, wann das Training abgeschlossen ist. In unserem Allexa Fall hat das 38 Minuten gedauert und 3 USD gekostet.

Schritt 5: Nutze deine LoRA

Der einfachste Weg, deine LoRA jetzt zu nutzen, ist wieder über ein Model bei Replicate.

Schritt 1: Hole deinen LoRA Pfad von Hugging Face

Dazu ganz einfach unter deinem Account auf das Model klicken, welches du vorher angelegt hast, und den Pfad kopieren.

Schritt 2: Klicke hier und öffne den LoRA Explorer auf Replicate

Erstelle jetzt einen Prompt und verwende dabei den Namen, den du bei deiner LoRA definiert hast. In unserem Beispiel wollen wir ein Bild von AIlexa:

Die restlichen Werte kannst du im Standard belassen. Du musst nur noch deine LoRA mit dem Hugging Face Pfad aus Schritt 1 bei hf_lora hinterlegen

Und das Ergebnis des Prompts von oben?

Unsere Influencerin AIlexa wieder einmal als Speaker auf einer Innovation-Konferenz:

Nach getaner Arbeit ist AIlexa dann erst einmal in Paris unterwegs gewesen:

So, das war für einmal ein sehr langer Deep Dive zum Thema LoRAs. Wir hoffen, das war verständlich und macht Lust zum Nachmachen.

Es ist wirklich unglaublich, was wir mittlerweile ganz ohne technische Fähigkeiten und für unter 5 Euro alles mit AI anstellen können!

Wie immer melde dich bitte bei Fragen oder Unklarheiten.

P.S. für alle in unserer AI-Automation Community: Dank Replicate kannst du deine LoRA in allen deinen Automatisierungen direkt einsetzen! Ideal für konsistente Social Media Posts usw.

🤯 Nutze mehrere trainierte Bild AIs (LoRAs) gleichzeitig

Und für alle, die noch mehr wollen: Du hast sogar die Möglichkeit, mehrere eigens trainierte (oder auch von anderen bereitgestellt) LoRAs auf einmal zu nutzen.

Nutze dazu folgendes Replicate Model.

Damit kannst dann bis zu 20 verschiedene LoRAs z. B. von Hugging Face und Co. hinzufügen.

Einfach jede einzelne adden, so wie wir oben auch schon die eigene geadded haben. Was hier das coole ist: du kannst dann z. B. deine Personen LoRA mit einer Style LoRA verbinden.

Hier einmal eine “gestrickte” Person:

Geschafft! Heute einmal etwas anders als sonst - bitte gib uns Feedback, ob das für dich relevant und interessant war, oder ob du lieber mehr News und Co. willst.

Vielen Dank, dass du dabei bist.

Reto & Fabian von den AInauten