Dieses Repositoriy enthält die Google Colab Notebooks für folgende, drei Schritte:
- Notebook zur Erzeugen eines eigenen Datasets bestehend aus 9 Fotos einer He-Man Spielzeugfigur, welcher für das Feinetuning genutzt werden kann.
- Notebook um aus dem eigenen Dataset mit Hilfe des Diffuser-Frameworks von Hugging Face ein eigenes LoRA zu trainieren.
- Notebook um das eigene LoRA-Modell zu nutzen, um mit Stable Diffusion XL eigenen Bilder zu erzeugen.
Für das SDXL 1.0 Web UI von Tony Lian habe ich einen Fork erstellt und das LoRA integriert um auch mit einer einfachen Oberfläche He-Man Bilder generieren zu können.
Das Notebook kann auf einer GPU-Instanz von Google Colab ausgeführt werden. Die Gradio-App lässt sich dann über den Proxy-Link aufrufen.
