Blog

Oct 01, 2023

Neue NVIDIA Maxine Cloud

Die neueste Version von NVIDIA Maxine ebnet den Weg für Audio- und Videokommunikation in Echtzeit. Ob für eine Videokonferenz, einen Anruf bei einem Kundendienstzentrum oder einen Live-Stream, Maxine

Die neueste Version von NVIDIA Maxine ebnet den Weg für Audio- und Videokommunikation in Echtzeit. Ob für eine Videokonferenz, einen Anruf bei einem Kundendienstzentrum oder einen Live-Stream – Maxine ermöglicht eine klare Kommunikation, um virtuelle Interaktionen zu verbessern.

NVIDIA Maxine ist eine Suite aus GPU-beschleunigten KI-Softwareentwicklungskits (SDKs) und cloudnativen Mikrodiensten für die Bereitstellung optimierter und beschleunigter KI-Funktionen, die Audio-, Video- und Augmented-Reality-Effekte (AR) in Echtzeit verbessern.

Und mit den hochmodernen Modellen von Maxine benötigen Endbenutzer keine teure Ausrüstung, um Audio und Video zu verbessern. Mithilfe der KI-basierten Technologie von NVIDIA können diese hochwertigen Effekte mit Standardmikrofonen und Kameraausrüstung erzielt werden.

Auf der GTC kündigte NVIDIA die Neuarchitektur von Maxine für Cloud-native Microservices mit der Early-Access-Veröffentlichung des Audioeffekt-Microservices von Maxine an. Darüber hinaus wurden neue Maxine SDK-Funktionen vorgestellt, darunter Sprecherfokus und Gesichtsausdrucksschätzung sowie die allgemeine Verfügbarkeit von Augenkontakt. NVIDIA Maxine enthält jetzt auch erweiterte Versionen bestehender SDK-Funktionen.

Mit den cloudnativen Microservices von Maxine können Entwickler Echtzeit-KI-Anwendungen erstellen. Microservices können unabhängig voneinander verwaltet und nahtlos in der Cloud bereitgestellt werden, wodurch die Entwicklungszeitpläne verkürzt werden.

Der Microservice „Audio Effects“, der im Early Access verfügbar ist, enthält vier hochmoderne Audiofunktionen:

Pexip, ein führender Anbieter von Videokonferenz- und Kollaborationslösungen für Unternehmen, nutzt NVIDIA-KI-Technologien, um virtuelle Besprechungen mit erweiterten Funktionen für die moderne Belegschaft auf die nächste Stufe zu heben.

„Mit Maxines Umstellung auf Cloud-native Microservices wird es noch einfacher, die fortschrittlichen KI-Technologien von NVIDIA mit unserer eigenen einzigartigen serverseitigen Architektur zu kombinieren“, sagte Eddie Clifton, Senior Vice President of Strategic Alliances bei Pexip. „Dadurch können unsere Teams bei Pexip ein verbessertes Erlebnis für virtuelle Meetings bieten.“

Melden Sie sich für den frühen Zugang an.

Maxine bietet drei GPU-beschleunigte SDKs, die die Echtzeitkommunikation mit KI neu erfinden: Audio, Video und AR-Effekte.

Das Audioeffekt-SDK bietet KI-basierte Algorithmen zur Verbesserung der Audioqualität mit mehreren Effekten und geringer Latenz. Speaker Focus, verfügbar im Early Access, ist eine neue Funktion, die die Audiospuren von Vorder- und Hintergrundlautsprechern trennt und so jede Stimme verständlicher macht. Darüber hinaus wurde die Audio Super Resolution SDK-Funktion mit verbesserter Qualität aktualisiert.

Das Videoeffekt-SDK erstellt KI-basierte Videoeffekte mit Standard-Webcam-Eingabe. Die Funktion „Virtueller Hintergrund“, die das Profil einer Person segmentiert und eine KI-gestützte Hintergrundentfernung, -ersetzung oder -unschärfe anwendet, wurde mit verbesserter zeitlicher Stabilität aktualisiert.

Und das AR SDK bietet KI-gestützte Echtzeit-3D-Gesichtsverfolgung und Körperhaltungsschätzung basierend auf einem Standard-Webkamera-Feed. Zu den neuesten Funktionen gehören:

Die folgenden AR-Funktionen wurden aktualisiert:

Probieren Sie die Maxine SDKs aus. Um Maxines Effekte direkt zu erleben, laden Sie die NVIDIA Broadcast App herunter.

Maxine SDKs und Microservices bieten eine Reihe von KI-Effekten mit geringer Latenz, die in bestehende Kundeninfrastrukturen integriert werden können. Entwickler können mit Maxine auf modernste KI-Funktionen zugreifen, da die Technologie auf der NVIDIA-KI-Plattform basiert und über erstklassige vortrainierte Modelle verfügt, mit denen Benutzer erstklassige Audio- und Videoqualitätsfunktionen erstellen, anpassen und bereitstellen können.

Maxine ist außerdem Teil der NVIDIA Omniverse Avatar Cloud Engine, einer Sammlung cloudbasierter KI-Modelle und -Dienste für Entwickler zum Erstellen, Anpassen und Bereitstellen interaktiver Avatare. Die anpassbaren Cloud-nativen Mikroservices von Maxine ermöglichen die unabhängige Bereitstellung in KI-Effekt-Pipelines. Maxine kann vor Ort, in der Cloud oder am Edge bereitgestellt werden.

Erfahren Sie mehr über NVIDIA Maxine und andere technologische Durchbrüche, indem Sie sich die GTC-Keynote von NVIDIA-Gründer und CEO Jensen Huang ansehen:

Treffen Sie fünf Innovatoren der generativen KI in Afrika und im Nahen Osten

Morphobots für den Mars: Caltech entwickelt Geländeroboter als Kandidat für NASA-Mission

GeForce NOW wird wild: „Party Animals“ führt im September 24 neue Spiele an

Barrieren überwinden: Katja Sirazitdinova programmiert ihren Weg zum Erfolg

KI landet am Flughafen Bengaluru mit der intelligenten Videoanalyseplattform des IoT-Unternehmens