Black Forest Labs – das bahnbrechende KI-Forschungslabor, das visuelle generative KI-Modelle entwickelt – hat heute die FLUX.2-Familie modernster Modelle zur Bilderzeugung veröffentlicht.
FLUX.2 ist vollgepackt mit neuen Tools und Funktionen, einschließlich einer Multi-Referenz-Funktion, mit der Dutzende ähnlicher Bildvariationen in fotorealistischem Detail und mit saubereren Schriftarten generiert werden können – selbst in großem Maßstab.
NVIDIA hat mit Black Forest Labs und ComfyUI zusammengearbeitet, um die Modelle mit FP8-Quantisierungen und RTX GPU-Leistungsoptimierungen bei der Einführung verfügbar zu machen, wodurch der für den Betrieb erforderliche VRAM um 40 % gesenkt und die Leistung um 40 % verbessert wurde.
Es sind zur Ausführung kein spezielles Softwarepaket erforderlich , da die Modelle direkt in ComfyUI verfügbar sind.
Modernste visuelle Intelligenz
Bilder, die von FLUX.2 generiert werden, sind selbst im großen Maßstab fotorealistisch und bieten eine Auflösung von bis zu 4 Megapixel mit realer Beleuchtung und Physik, um den „KI-Look“ zu beseitigen, der die visuelle Treue untergräbt.
Die Modelle fügen eine direkte Posensteuerung hinzu, um die Pose eines Subjekts oder einer Figur in einem Bild explizit anzugeben und um sauberen, lesbaren Text über Infografiken, Bildschirme der Benutzeroberfläche und sogar mehrsprachige Inhalte hinweg zu liefern. Darüber hinaus ermöglicht die neue Multi-Referenz-Funktion Künstlern, bis zu sechs Referenzbilder auszuwählen, bei denen Stil oder Thema konsistent bleiben. Eine umfangreiche Feinabstimmung des Modells wird überflüssig.
Einen vollständigen Überblick über die neuen Funktionen von FLUX.2 erhalten Sie im Blog von Black Forest Labs.
Optimiert für RTX
Die neuen FLUX.2-Modelle sind beeindruckend, aber auch sehr anspruchsvoll. Sie führen ein atemberaubendes Modell mit 32 Milliarden Parametern durch, das 90 GB VRAM erfordert, um vollständig geladen zu werden. Selbst bei Verwendung des lowVRAM-Modus – einer beliebten Einstellung, die es Künstlern ermöglicht, nur das aktive Modell laden können – beträgt die Anforderung für VRAM immer noch 64 GB, wodurch das Modell für die Nutzung auf handelsüblichen Grafikkarten praktisch ungeeignet ist.
Um die Zugänglichkeit des FLUX.2-Modells zu erweitern, haben NVIDIA und Black Forest Labs gemeinsam das Modell auf FP8 quantisiert. Dadurch wurden die VRAM-Anforderungen bei vergleichbarer Qualität um 40 % gesenkt.
Um dieses Modell auf GeForce RTX GPUs zugänglich zu machen, hat NVIDIA mit ComfyUI zusammengearbeitet – einer beliebten Anwendung zur Ausführung visueller generativer KI-Modelle auf dem PC –, um die RAM-Offload-Funktion der App, die als Weight Streaming bekannt ist, zu verbessern.
Mit der aktualisierten Funktion können Benutzer Teile des Modells in den Systemspeicher auslagern und so den verfügbaren Speicher auf ihren GPUs erweitern – wenn auch mit gewissen Leistungsverlusten, da der Systemspeicher langsamer ist als der GPU-Speicher.
NVIDIA hat außerdem mit ComfyUI zusammengearbeitet, um die Modellleistung auf NVIDIA und GeForce RTX GPUs zu optimieren, einschließlich Optimierungen für FP8-Checkpoints.
Starten Sie noch heute mit FLUX.2. Aktualisieren Sie ComfyUI und sehen Sie sich die FLUX.2-Vorlagen an, oder besuchen Sie die Seite Hugging Face von Black Forest Labs, um die Modellgewichte herunterzuladen.
Verbinden Sie sich mit NVIDIA AI PC auf Facebook, Instagram, TikTok und X – und bleiben Sie auf dem Laufenden, indem Sie den RTX AI PC Newsletter abonnieren.