NVIDIA Media2 transformiert die Content-Gestaltung, das Streaming und das Publikumserlebnis mit KI

NVIDIA Technologien, einschließlich NIM Microservices und AI Blueprints, optimieren KI-Video-Pipelines und verbessern die Zuschauerbindung, was alles Teil einer Initiative zur Transformation der 3 Billionen USD schweren Medienbranche ist.
by Richard Kerris

Von der Entwicklung der GPU, des RTX Echtzeit-Raytracings und neuronalen Renderings bis zur heutigen Neuerfindung des Computings für die KI – NVIDIA steht seit Jahrzehnten an der Spitze der Computergrafik und erweitert die Grenzen des Machbaren in den Bereichen Medien und Unterhaltung.

NVIDIA Media2 ist die neueste KI-gestützte Initiative, die die Content-Gestaltung, das Streaming und Live-Medienerlebnisse transformiert.

Media2 basiert auf Technik wie NVIDIA NIM Microservices und AI Blueprints sowie bahnbrechenden KI-Anwendungen von Startups und Softwarepartnern und nutzt KI, um die Erstellung intelligenterer, noch besser angepasster und wirkungsvollerer Inhalte voranzutreiben, die sich an die individuellen Präferenzen der Zuschauer anpassen lassen.

Inmitten dieser rasanten kreativen Transformation können Unternehmen, die NVIDIA Media2 nutzen, an der Spitze der 3 Billionen USD schweren Medien- und Unterhaltungsbranche bleiben und die Art und Weise verändern, wie das Publikum Inhalte konsumiert und mit ihnen interagiert.

NVIDIA Media2 Technologie-Stack NVIDIA Technik im Herzen von Media2

Die Medien- und Unterhaltungsbranche stützt sich auf generative KI sowie beschleunigtes Computing und die NVIDIA Technik transformiert die Art und Weise, wie Inhalte erstellt, bereitgestellt und erlebt werden.

NVIDIA Holoscan für Medien ist eine softwaredefinierte, KI-fähige Plattform, die es Unternehmen in den Bereichen Rundfunk, Streaming und Live-Sport ermöglicht, Live-Video-Pipelines auf derselben Infrastruktur wie der der KI auszuführen. Die Plattform stellt Anwendungen von Anbietern aus der ganzen Branche auf einer von NVIDIA beschleunigten Infrastruktur bereit.

NVIDIA Holoscan für Medien

Die NVIDIA Blackwell Architektur bietet die Leistung, die für die nächste Welle der datengestützten intelligenten Content-Gestaltung und hyper-personalisierten Medien erforderlich ist, und wurde entwickelt, um generative KI-Workflows der Rechenzentrumsklasse mit bis zu 25-mal höherer Energieeffizienz als die NVIDIA Hopper Generation zu bewältigen. Blackwell integriert sechs Chiptypen: GPUs, CPUs, DPUs, NVIDIA NVLink Switch-Chips, NVIDIA InfiniBand Switches und Ethernet-Switches.

NVIDIA Blackwell Architektur

Blackwell wird von NVIDIA AI Enterprise unterstützt, einer End-to-End-Softwareplattform für produktionstaugliche KI. NVIDIA AI Enterprise umfasst NVIDIA NIM Microservices, KI-Frameworks, Bibliotheken und Tools, die Medienunternehmen in mit NVIDIA Technik beschleunigten Clouds, Rechenzentren und Workstations bereitstellen können. Zu den immer zahlreicher werdenden Microservices, KI-Frameworks, Bibliotheken und Tools gehören u. a.:

  • Der NIM Microservice Mistral-NeMo-12B-Instruct, der das mehrsprachige Abrufen von Informationen ermöglicht, d. h. die Fähigkeit, Wissen in verschiedenen Sprachen zu suchen, zu verarbeiten und abzurufen. Dies ist der Schlüssel zur Verbesserung der Ausgaben eines KI-Modells mit größerer Genauigkeit und globaler Relevanz.
  • Der NVIDIA Omniverse Blueprint für die 3D-Konditionierung präziser visueller generativer KI, der Werbetreibenden dabei helfen kann, personalisierte, markenbasierte und produktgenaue Marketinginhalte in großem Umfang mithilfe von Echtzeit-Rendering und generativer KI zu erstellen, ohne dabei das zentrale Produkt-Asset zu beeinträchtigen.
  • Der NVIDIA Cosmos Nemotron NIM Microservice für Vision-Sprachmodelle ist ein multimodales VLM, das die Bedeutung und den Kontext von Text, Bildern und Videos verstehen kann. Mit dem Microservice können Medienunternehmen Bilder und Videos mit natürlicher Sprache abfragen und informative Antworten erhalten.
  • Die multimodale NVIDIA Edify generative KI-Architektur, die visuelle Assets wie Bilder, 3D-Modelle und HDRi-Umgebungen aus Text- oder Bildaufforderungen generieren kann. Sie bietet fortschrittliche Bearbeitungstools und effizientes Training für Entwickler. Mit NVIDIA AI Foundry können Dienstleister Edify-Modelle für kommerzielle visuelle Dienste mit NVIDIA NIM Microservices anpassen.

Partner des Media2-Technologieumfelds

Partner in der gesamten Branche setzen auf NVIDIA Technik, um das nächste Kapitel der Erzählkunst neu zu gestalten.

Getty Images und Shutterstock basieren auf NVIDIA Edify und sind intelligente Services für die Erstellung von Inhalten. Die KI-Modelle wurden zudem mit NVIDIA NIM Microservices optimiert und für maximale Leistung bereitgestellt.

Bria ist eine kommerzielle visuelle generative KI-Plattform für Entwickler. Sie wurde zu 100 % mit lizenzierten Daten trainiert und basiert auf verantwortungsvollen KI-Prinzipien. Die Plattform bietet Tools für benutzerdefinierte Pipelines, nahtlose Integrationen und flexible Bereitstellungen, die Compliance auf Unternehmensebene und eine skalierbare, vorhersehbare Generierung von Inhalten sicherstellen. Bria wurde mit NVIDIA NIM Microservices optimiert und bietet schnellere, sicherere und skalierbare produktionsbereite Lösungen.

Runway ist eine KI-Plattform, die Künstlern und Filmemachern fortschrittliche kreative Tools bietet. Das Turbo-Modell Gen-3 Alpha des Unternehmens ist hervorragend für die Video-Generierung und enthält eine neue Kamerasteuerungsfunktion, die präzise Kamerabewegungen wie Schwenken, Neigen und Zoomen ermöglicht. Durch die Integration der NVIDIA CV-CUDA Open-Source-Bibliothek in Kombination mit NVIDIA GPUs beschleunigt Runway die Vorverarbeitung für hochauflösende Videos in seinem Segmentierungsmodell.

Wonder Dynamics, ein Autodesk-Unternehmen, hat kürzlich die Beta-Version von Wonder Animation veröffentlicht, die eine leistungsstarke neue Video-zu-3D-Szenentechnik bietet, mit der jede Videosequenz in eine 3D-animierte Szene für die Produktion von Animationsfilmen umgewandelt werden kann. Wonder Animation wird von der NVIDIA GPU Technik beschleunigt und bietet Künstlern und Animatoren für visuelle Effekte ein benutzerfreundliches, flexibles Tool, das die Zeit, die Komplexität und den Aufwand, die traditionell mit 3D-Animationen und visuellen Effekten verbunden sind, erheblich reduziert und dem Künstler gleichzeitig die volle kreative Kontrolle überlässt.

Das Sky-Innovationsteam von Comcast arbeitet mit NVIDIA zusammen, um NVIDIA NIM Microservices und Partnermodelle für seine globalen Plattformen zu testen. Die Integration könnte zu einer größeren Interaktivität und Barrierefreiheit für Kunden auf der ganzen Welt führen, z. B. durch die Verwendung von Sprachbefehlen zur Anforderung von Zusammenfassungen während Live-Sportveranstaltungen und zum Zugriff auf andere kontextbezogene Informationen.

, ein kreatives Technologieunternehmen mit dem größten Netzwerk virtueller Studios, erweitert den Zugang zur Erstellung virtueller Umgebungen und immersiver Inhalte mit durch NVIDIA Technik beschleunigten generativen KI-Techniken.

Twelve Labs ist Mitglied des NVIDIA Inception-Programms für Startups und entwickelt fortschrittliche multimodale Foundation-Modelle, die Videos wie Menschen verstehen können und eine präzise semantische Suche, Inhaltsanalyse und Video-zu-Text-Generierung ermöglichen. Twelve Labs nutzt NVIDIA H100 GPUs, um die Inferenzleistung der Modelle erheblich zu verbessern und die bearbeiteten Anfragen pro Sekunde um das bis zu 7-fache zu erhöhen.

Monks von S4Capital nutzt modernste KI-Technik, um Live-Übertragungen mit Inhaltssegmentierungen in Echtzeit und personalisierten Fan-Erlebnissen zu verbessern. Die Lösung des Unternehmens basiert auf NVIDIA Holoscan für Medien und ist in Tools wie NVIDIA VILA integriert, um kontextbezogene Metadaten für die Einbettung in ein zeitlich adressierbares Media-Store-Framework zu generieren und so eine präzise, aktionsbasierte Suche innerhalb von Videoinhalten zu ermöglichen.

Darüber hinaus nutzt Monks NVIDIA NeMo Curator, um Daten besser zu verarbeiten und maßgeschneiderte KI-Modelle für Sportligen und Inhaber von geistigem Eigentum zu erstellen. Zudem bieten sich dadurch Monetarisierungsmöglichkeiten durch die Lizenzierung. Durch die Kombination dieser Techniken können Sender den Fans während der Veranstaltungen nahtlos hyper-relevante Inhalte liefern und sich gleichzeitig an die sich ständig ändernden Anforderungen des modernen Publikums anpassen.

Medienunternehmen verwalten riesige Mengen an Videoinhalten, deren Lokalisierung, Katalogisierung und Kompilierung zu fertigen Assets herausfordernd und zeitaufwändig sein kann. Qvest, ein führender medienorientierter Berater und Systemintegrator, hat eine KI-Video-Discovery-Engine entwickelt, die auf NIM Microservices basiert und diesen Prozess beschleunigt, indem die Datenerfassung von Videodateien automatisiert wird. Dies optimiert die Fähigkeit der Benutzer, sowohl zu entdecken als auch zu kontextualisieren, wie Videos in ihre beabsichtigte Geschichte passen.

Verizon transformiert die Betriebsart von Unternehmen weltweit sowie Live-Medien- und Sportinhalte, indem es sein zuverlässiges, sicheres privates 5G-Netzwerk mit der Full-Stack-KI-Plattform von NVIDIA integriert, einschließlich NVIDIA AI Enterprise und NIM Microservices zur Bereitstellung der neuesten KI-Lösungen am Edge.

Mit dieser Lösung können Streamer, Sportligen und Rechteinhaber das Fan-Erlebnis mit größerer Interaktivität und Immersion verbessern, indem sie leistungsstarke 5G-Konnektivität zusammen mit generativer KI, agentenbasierter KI, erweiterte Realität und Streaming-Anwendungen bieten, die eine personalisierte Bereitstellung von Inhalten ermöglichen. Diese Techniken tragen außerdem dazu bei, die Sportlerleistung und das Zuschauer-Engagement zu steigern, indem sie Trainern, Spielern, Schiedsrichtern und Fans Datenanalysen in Echtzeit anbieten. Die Lösung kann zudem private 5G-gestützte KI-Anwendungsfälle für Unternehmen ermöglichen, um die Automatisierung und Produktivität zu steigern.

Willkommen bei NVIDIA Media2

Die NVIDIA Media2-Initiative ermöglicht es Unternehmen, die Zukunft der Medien und Unterhaltung durch intelligente, datengesteuerte und immersive Techniken neu zu definieren. Dies verschafft ihnen einen Wettbewerbsvorteil und rüstet sie, um Innovationen in der gesamten Branche voranzutreiben.

NIM Microservices von NVIDIA und Modellentwicklern stehen jetzt zum Testen zur Verfügung. Weitere Modelle werden regelmäßig hinzugefügt.

Siehe Hinweis zu Software-Produktinformationen.