Stable Diffusion 3-Konstruktions-Tutorial und offizielle Beispieldemonstration, GALAXY GeForce RTX 4070 Ti SUPER Xingyao OC läuft im Handumdrehen auf Hochtouren

Als neueste Version des KI-Bilderzeugungsmodells ist Stable Diffusion 3 hier mit großen Erwartungen. Ich glaube, dass viele Freunde das Bilderzeugungsmodell mehr oder weniger in ihrer Arbeit und ihrem Leben verwendet haben, daher werden wir es weiter unten teilen. Werfen wir einen Blick auf den lokalen Konstruktionsprozess von Stable Diffusion 3. Kommen wir ohne weitere Umschweife zu den praktischen Dingen.

Die in diesem Build verwendete Plattformkonfiguration ist wie folgt: Angesichts des hohen Bedarfs an Rechenleistung beim lokalen Ausführen von Stable Diffusion 3 haben wir uns dieses Mal für die Grafikkarte GALAXY GeForce RTX 4070 Ti SUPER OC entschieden. Die GEFORCE RTX 4070 Ti SUPER basiert auf dem AD103-Kern, was auch die größte Änderung dieser Grafikkarte darstellt. Es enthält intern 8448 CUDA-Kerne, was einer Steigerung von mehr als 10 % im Vergleich zu den 7680 Kernen der RTX 4070 Ti entspricht. Die Speicherbitbreite wurde im Vergleich zur RTX 4070 Ti auf 256 Bit erhöht, und auch die Speicherspezifikationen wurden erhöht 16 GB GDDR6X, egal ob für Spiele oder KI-Erstellung. Wählen Sie diese Grafikkarte, um ein Gleichgewicht zwischen Preis und Leistung zu finden. Diese Grafikkarte ist mit 16 GB GDDR6x-Videospeicher ausgestattet, mit einer Speicherbreite von 192 Bit und einer Länge von 35,4 cm. Um sicherzustellen, dass diese Grafikkarte für die Konstruktion von Stable Diffusion 3 geeignet ist, wurden vorab auch einige Tests der Rechenleistung dieser Grafikkarte durchgeführt. Die 8448 CUDA-Kerne der GeForce RTX 4070 Ti SUPER können Hardware bereitstellen Beschleunigung, wodurch die Arbeit effizienter wird. Fast jede Modellierungssoftware ist für NVIDIA-GPUs optimiert, sodass Effizienz, Stabilität und Kompatibilität berücksichtigt werden können. Wir haben die Leistung von V-Ray Benchmark getestet. Die Punktzahl des GPU-CUDA-Testprojekts beträgt 2746 Punkte. Im Test von Stable Diffusion 1.7 wurden durch Auswahl des Modells v2-1_768-ema-pruned.ckpt 21 Bilder von Kabinen in Form von Vincentian-Diagrammen gezeichnet. Die Bildauflösung betrug 768 * 768 und es dauerte schließlich 54 Sekunden. Fertig. Nach dem Einschalten der TensorRT Engines-Funktion wird die Geschwindigkeit wieder um die Hälfte reduziert und kann in 27 Sekunden abgeschlossen werden. Nach einer Reihe von Tests haben wir festgestellt, dass diese Grafikkarte voll und ganz in der Lage ist, Stable Diffusion 3 aufzubauen. Krempeln wir die Ärmel hoch und legen wir los!

1. Ressourcenvorbereitung

Nachdem die Hardwareplattform erstellt wurde, besteht der nächste Schritt darin, die UI-Schnittstelle auszuwählen und das Modell herunterzuladen. Ich möchte hier hinzufügen, dass der gesamte Konstruktionsprozess das Herunterladen der Modelldatei umfasst, was relativ hohe Anforderungen stellt Für die Netzwerkumgebung ist dies jedoch der Fall. Die für die Erstellung erforderlichen Dateien werden am Ende des Artikels platziert, damit jeder sie lernen und kommunizieren kann. Da Stable Diffusion 3 gerade erst veröffentlicht wurde, wurde die Web-Benutzeroberfläche noch nicht angepasst, sodass dieses Mal ComfyUI verwendet wird. Die Github-URL lautet wie folgt: https://github.com/comfyanonymous/ComfyUIScrollen Sie nach unten, um den Download-Link zu finden, und klicken Sie zum Herunterladen. UI wird zuerst heruntergeladen. Laden wir die umfangreiche Stable Diffusion 3-Modelldatei herunter. Die URL lautet wie folgt: https://huggingface.co/stabilityai/stable-diffusion-3-medium/tree/main (Diese URL wird vom offiziellen Link weitergeleitet, es besteht keine Notwendigkeit, die Autorität in Frage zu stellen.) Erforderlich, um die Modelldatei herunterzuladen. Melden Sie sich zuerst auf der Website an. Freunde, die kein Konto haben, können sich registrieren. Nach der Registrierung können Sie die folgende Modelldatei einsehen. Laden Sie einfach zuerst die drei im Bild markierten Modelldateien herunter. Darüber hinaus müssen einige Dateien in diesen beiden Ordnern heruntergeladen werden. Diese drei Dateien müssen im Ordner text_encoders heruntergeladen werden. Die drei Dateien im Ordner „comfort_example_workflows“ sind relativ klein und stellen offiziell bereitgestellte Beispiel-Workflows dar. Sie müssen sie nicht herunterladen, wenn Sie sie nicht benötigen. Wenn alles gut geht, können unsere Bauarbeiten nach dem Herunterladen der folgenden Dateien offiziell beginnen.

2. Plattformaufbau

Entpacken Sie zunächst new_ComfyUI_windows_portable_nvidia_cu121_or_cpu.7z und erhalten Sie die folgende Datei. Navigieren Sie als Nächstes zum Ordner „ComfyUI_windows_portable/ComfyUI/models/checkpoints“ und verschieben Sie die drei Dateien, die mit „sd3“ beginnen, aus den Dateien, die wir zuvor hier heruntergeladen haben. Navigieren Sie dann zum Ordner...ComfyUI_windows_portable/ComfyUI/models/clip und verschieben Sie die drei Dateien, die mit „clip“ und „t5xxl“ beginnen, hierher. Gehen Sie zurück zum Ordner…/ComfyUI_windows_portable/ Da wir hauptsächlich auf die Rechenleistung der GALAXY GeForce RTX 4070 Ti SUPER OC-Grafikkarte angewiesen sind, doppelklicken wir, um run_nvidia_gpu.bat auszuführen. Wenn es keine Unfälle gibt, sehen Sie nach dem Öffnen die folgende Oberfläche. Herzlichen Glückwunsch, der Konstruktionsprozess von Stable Diffusion 3 auf Basis von ComlfyUI wurde zunächst abgeschlossen.

3. Offizielle Workflow-Beispiele

Erinnern Sie sich als nächstes noch an die drei offiziellen Workflows, die wir zuvor heruntergeladen haben? Das erste dieser drei offiziellen Workflow-Beispiele ist das grundlegende, das ein einzelnes Eingabeaufforderungswort generiert ein Bild, der zweite generiert ein Bild für mehrere Eingabeaufforderungswörter und der dritte fügt einen Schritt zur Verbesserung der Bildauflösung basierend auf dem ersten hinzu. Hier zeigen wir, wie die drei offiziellen Arbeitsabläufe nacheinander ausgeführt werden. Ziehen Sie die erste heruntergeladene .json-Datei direkt in die ComfyUI-Oberfläche und Sie können sehen, dass sich der Workflow geändert hat. Wenn Sie es zu diesem Zeitpunkt direkt ausführen, wird ein Fehler gemeldet. Sie müssen den Dateispeicherort des Modells erneut angeben. Wählen Sie hier im Modell entsprechend dem ursprünglichen Modellnamen die Modelldatei aus, die wir zuvor eingefügt haben. Nachdem alle ausgewählt wurden, können Sie mit dem Laufen beginnen. Die offizielle Aufforderung lautet

eine weibliche Figur mit langen, wallenden Haaren, die aus ätherischen, wirbelnden Mustern zu bestehen scheinen, die an Nordlichter oder Aurora Borealis erinnern. Der Hintergrund wird von tiefen Blau- und Lilatönen dominiert, was eine geheimnisvolle und dramatische Atmosphäre schafft. mit blasser Haut und auffälligen Gesichtszügen. Der Gesamtstil des Kunstwerks erinnert an Fantasy- oder übernatürliche Genres Hergestellt mit einem wirbelnden Muster ähnlich der Aurora Borealis oder Aurora Borealis. Der Hintergrund wird von dunklen Blau- und Lilatönen dominiert, die eine geheimnisvolle und dramatische Atmosphäre schaffen. Das Gesicht der Figur ist ruhig, mit blasser Haut und zarten Gesichtszügen. Sie trägt dunkle Kleidung mit dezenten Mustern. Der allgemeine Stil des Gemäldes erinnert an das Fantasy- oder übernatürliche Genre.

Im obigen Workflow ist das grüne Textfeld der Eingabebereich für Vorwärtsaufforderungswörter und das rote Textfeld der Eingabebereich für Rückwärtsaufforderungswörter. Das nach dem Ausführen generierte Bild sieht wie folgt aus 4070 Ti SUPER star hat dieses 1024*1024 Pixel große Bild in nur 21,23 Sekunden erstellt und das Erlebnis ist sehr flüssig. Es ist ersichtlich, dass beim Ausführen des Modells die GPU-Last sofort voll ist, was zeigt, dass der Bedarf des Modells an GPU-Rechenleistung ziemlich erschreckend ist.

Zu diesem Zeitpunkt wurde der offizielle Grundablauf durchlaufen. Der Redakteur hat erneut versucht, „Ein SpongeBob Schwammkopf, der Eis isst“ als positives Aufforderungswort zu generieren, und das resultierende Bild sieht wie folgt aus ((oben)). Das Ganze ist relativ harmonisch. Zum Vergleich können Sie sich das Bild (unten) ansehen, das der Redakteur mit Stable Diffusion 1.7 mit denselben Eingabeaufforderungswörtern erstellt hat. Der erste Workflow lief reibungslos, also versuchen wir es noch einmal mit dem zweiten Workflow. Ziehen Sie ähnlich wie beim ersten die offizielle .json-Datei in die Benutzeroberfläche, um einen ähnlichen Workflow wie gerade zu erhalten. Der Speicherort der Modelldatei muss noch konfiguriert werden. Nach der Konfiguration können Sie den Workflow normal ausführen. Die GALAXY GeForce RTX 4070 Ti SUPER Xingyao OC benötigte für den Betrieb dieses Modells 14,92 Sekunden, was viel kürzer ist als das Vorgängermodell. Beim Betrieb des Modells ist die GPU-Auslastung jedoch immer noch sofort voll. Die allgemeinen Einsatzideen der ersten beiden Arbeitsabläufe sind ähnlich. Die Auswahl hängt hauptsächlich von Ihren täglichen Nutzungsanforderungen ab. Nach dem Durchlaufen können die Parameter je nach persönlichen Bedürfnissen weiter angepasst und optimiert werden, worauf hier nicht eingegangen wird. Lass uns als nächstes über diesen dritten Workflow sprechen. Dem gleichen Beispiel folgend, habe ich die .json-Datei hineingezogen und einen Fehler gesehen, der wahrscheinlich bedeutete, dass die relevanten Modelldateien fehlten. Schließen Sie den Fehlerbericht und Sie können sehen, dass ein Prozessfeld rot ist. Dies liegt daran, dass das zur Verbesserung der Bildauflösung erforderliche Modell fehlt. Die Idee, ähnliche Probleme ein für alle Mal zu lösen, besteht darin, ein ComfyUI-Plug-in zu installieren – den ComfyUI Manager, der die fehlenden Modelle und Plug-ins im aktuellen Workflow erkennen, herunterladen und ergänzen kann. Die Plug-in-URL lautet wie folgt: https://github.com/ltdrdata/ComfyUI-ManagerDer Beamte stellt eine Vielzahl von Installationsmethoden zur Verfügung. Interessierte Freunde können diese selbst studieren. Wir wählen hier die erste Methode für die Installation. Schließen Sie die ComfyUI-Schnittstelle vor der Installation. Obwohl es nicht offiziell erwähnt wird, müssen Sie bei der ersten Installationsmethode zuerst git herunterladen und installieren. Hier laden wir den 64-Bit-Standalone-Installer herunter und installieren ihn. Öffnen Sie nach Abschluss der Installation das Terminal und führen Sie die folgenden drei Befehle nacheinander aus. cdCUsersithomeDocumentscomfyui_sd3ComfyUI_windows_portableComfyUIcdcustom_nodesgitclonehttps://github.com/ltdrdata/ComfyUI-Manager.gitDie Ordneradresse im ersten Befehl muss entsprechend dem Speicherort geändert werden, an dem ComfyUI installiert ist. Die Netzwerkanforderungen sind hier relativ hoch. Wenn das Netzwerk nicht gut ist, wird möglicherweise ein Fehler gemeldet. Nach dem Erfolg wird der Befehl zum Abschluss des Downloads angezeigt. Öffnen Sie nun ComfyUI. In der unteren rechten Ecke sehen Sie zwei weitere Schaltflächen. Klicken Sie auf Manager und Sie sehen eine Fülle von Einstellungselementen. Wir verwenden hier hauptsächlich die beiden Elemente im roten Feld. Klicken Sie zunächst auf „Fehlende benutzerdefinierte Knoten installieren“. Sie können sehen, dass die fehlenden Plug-Ins erkannt wurden. Nach der Installation können Sie sehen, dass sich das rote Quadrat im Workflow wieder normalisiert hat. Wenn Sie das Modell jedoch zu diesem Zeitpunkt erneut ausführen, werden Sie feststellen, dass es nur mit denselben Schritten wie das erste offizielle Modell ausgeführt werden kann und die nachfolgende Auflösungsverbesserung nicht mehr ausgeführt wird. Dies liegt daran, dass wir das 4x-UltraSharp.pth-Modell noch nicht installiert haben. Öffnen Sie „Modelle installieren“ im Manager, suchen Sie nach 4x-UltraSharp, Sie können die relevanten Modelle sehen, klicken Sie hinten auf „Installieren“. Nachdem die Installation abgeschlossen ist, können Sie sehen, dass nach dem Ausführen des Vincent-Diagrammmodells 51,09 Sekunden benötigt werden Die Leistung der RTX 4070 Ti SUPER Xingyao OC ist recht gut. Sie können das Bild sehen, nachdem die Auflösung erhöht wurdeDie Größe des Bildes hat sich ebenfalls um etwa das Vierfache erhöht. Hier muss jeder den Konstruktionsprozess von Stable Diffusion 3 basierend auf ComfyUI verstanden haben. Es ist zu beachten, dass es aufgrund von Unterschieden in der Netzwerkumgebung, aus Hardwaregründen usw. zu verschiedenen Problemen kommen kann Sie müssen sich keine Sorgen über Unfälle machen. Sie können sie im Kommentarbereich teilen und gemeinsam diskutieren und lösen.

Zusammenfassung

Die Veröffentlichung von Stable Diffusion 3 hat es uns erneut ermöglicht, den schnellen Fortschritt und die Entwicklung großer KI-Modelle zu sehen. Als Werkzeug, das die Effizienz im täglichen Leben erheblich verbessern kann, ist es immer von Vorteil, es nach der Arbeit zu studieren. Mit zunehmender Komplexität des Modells ist jedoch absehbar, dass auch die für den lokalen Betrieb erforderliche Rechenleistung steigt. Aus Sicht des gesamten Bauprozesses wird in diesem Test die Grafikkarte GALAXY GeForce RTX 4070 Ti SUPER Xingyao OC verwendet Dennoch kann es die Effizienz des Modellbetriebs erheblich verbessern und viel Zeit sparen. Schließlich möchte niemand eine Stunde warten, um ein Bild zu erstellen. Da Stable Diffusion 3 vor nicht allzu langer Zeit veröffentlicht wurde, wird der Herausgeber es so schnell wie möglich nach der Überquerung des Flusses mit Ihnen teilen, indem er nach den Steinen sucht. Wenn der Artikel etwas ungenau oder falsch ist, kritisieren und korrigieren Sie ihn bitte Ich werde es so schnell wie möglich ändern. Letzte Wünsche Freunde, die versuchen, es zu erstellen, können beim ersten Mal erfolgreich sein und während des gesamten Prozesses werden keine Fehler gemeldet! 【Anhang】Für den Bau erforderliche Ressourcen_Extraktionscode: 6666

Das obige ist der detaillierte Inhalt vonStable Diffusion 3-Konstruktions-Tutorial und offizielle Beispieldemonstration, GALAXY GeForce RTX 4070 Ti SUPER Xingyao OC läuft im Handumdrehen auf Hochtouren. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!