Modelle Cosmos3-Edge, Cosmos3-Nano und Cosmos3-Super jetzt auf Amazon SageMaker JumpStart verfügbar
Die Modelle Cosmos3-Edge, Cosmos3-Nano und Cosmos3-Super von NVIDIA sind jetzt auf Amazon SageMaker JumpStart verfügbar und erweitern damit das Portfolio an Foundation-Modellen, das AWS-Kunden zur Verfügung steht. Diese drei Modelle bilden die Cosmos 3-Familie offener, omnimodaler Weltmodelle für physische KI, die es Kunden ermöglichen, Roboter, autonome Fahrzeuge und visuelle KI zu bauen, die in der physischen Welt wahrnehmen, argumentieren, planen und handeln.
Diese Modelle adressieren verschiedene physische KI-Herausforderungen mit speziellen Funktionen:
Cosmos3-Edge wurde für die Steuerung von Robotern auf Geräten und visuelles Denken in Echtzeit auf Edge-Hardware entwickelt. Dieses 4B-Parameter-Omni-Modell (mit einem 2B-Nemotron-basierten Reasoner) arbeitet mit einer robotergesteuerten Auflösung (640×360), liefert Reasoning in Echtzeit und generiert 32 Aktionen pro Inferenz bei 15 Hz auf NVIDIA Jetson Thor. Es unterstützt 256p- und 480p-Videos mit 12–30 FPS und bringt damit bahnbrechende physische KI-Funktionen direkt in eingebettete Systeme.
Cosmos3-Nano zeichnet sich als kompaktes omnimodales Modell mit 16 B-Parametern durch physikbewusste Welterzeugung und physikalisches Reasoning aus. Es verarbeitet Kombinationen von Text-, Bild-, Video-, Audio- und Aktionstrajektorien, um entsprechende Ergebnisse zu erzeugen, sodass Roboter und Bildverarbeitungs-KI-Agenten anhand von Vorwissen, physikalischem Verständnis und gesundem Menschenverstand argumentieren können. Es unterstützt Gedankenketten-Reasoning für Text, Bilder und Videos mit Auflösungen von bis zu 720p.
Cosmos3-Super bietet die detailgetreueste Weltgenerierung und Simulation in der Cosmos 3-Familie bei 64B-Parametern. Es verarbeitet und generiert gemeinsam Sprache, Bilder, Video-, Audio- und Actionsequenzen innerhalb einer einheitlichen Mixture-of-Transformers-Architektur und unterstützt Auflösungen von bis zu 720p über mehrere Seitenverhältnisse. Ideal für groß angelegte Simulationen, synthetische Datengenerierung und Richtlinien-Workflows.
Mit SageMaker JumpStart können Kunden jedes dieser Modelle mit nur wenigen Klicks für ihre spezifischen KI-Anwendungsfälle bereitstellen.
Um mit diesen Modellen zu beginnen, navigieren Sie in der SageMaker-Konsole zum SageMaker JumpStart-Modellkatalog oder nutzen Sie das SageMaker-Python-SDK, um die Modelle in Ihrem AWS-Konto bereitzustellen. Weitere Informationen zur Bereitstellung und Verwendung von Foundation-Modellen in SageMaker JumpStart finden Sie in der Dokumentation zu Amazon SageMaker JumpStart.