تتوفر نماذج Cosmos3-Edge وCosmos3-Nano وCosmos3-Super الآن على Amazon SageMaker JumpStart
تتوفر الآن نماذج Cosmos3-Edge وCosmos3-Nano وCosmos3-Super من NVIDIA على Amazon SageMaker JumpStart، مما يوسع مجموعة النماذج التأسيسية المتاحة لعملاء AWS. تشكل هذه النماذج الثلاثة عائلة Cosmos 3 من نماذج العالم المفتوحة والرائدة متعددة الوسائط المخصصة للذكاء الاصطناعي المادي، مما يمكّن العملاء من بناء الروبوتات والمركبات ذاتية القيادة وأنظمة الذكاء الاصطناعي البصرية التي تستشعر وتستنتج وتخطط وتتصرف في العالم المادي.
وتتناول هذه النماذج تحديات الذكاء الاصطناعي المادية المختلفة بإمكانات متخصصة:
تم تصميم Cosmos3-Edge من أجل التحكم في الروبوت على الجهاز والاستدلال البصري في الوقت الفعلي على أجهزة إطار حوسبة الحافة. يعمل هذا النموذج المتعدد بمعلمات 4B (مع أداة استدلال 2B قائمة على Nemotron) بدقة التحكم الآلي (640 × 360)، مما يوفر الاستدلال في الوقت الفعلي ويولد 32 إجراءً لكل استنتاج عند 15 هرتز على NVIDIA Jetson Thor. وهو يدعم الفيديو بدقة 256p و480p بمعدل 12-30 إطارًا في الثانية، مما يوفر إمكانات الذكاء الاصطناعي المادية المتطورة مباشرةً إلى الأنظمة المضمنة.
يتفوق Cosmos3-Nano في توليد العالم الواعي بالفيزياء والاستدلال المادي كنموذج متعدد الوسائط مدمج بمعلمة 16B. إنه يعالج مجموعات من مسارات النص والصورة والفيديو والصوت والحركة لإنتاج مخرجات مقابلة، مما يمكّن الروبوتات ووكلاء الذكاء الاصطناعي في الرؤية من التفكير باستخدام المعرفة السابقة والفهم الفيزيائي والحس السليم. وهو يدعم الاستدلال المتسلسل في النصوص والصور والفيديو بدقة تصل إلى 720 بكسل.
يوفر Cosmos3-Super توليد ومحاكاة العالم بأعلى دقة في عائلة Cosmos 3 بمعلمات 64B. وهو يقوم بشكل مشترك بمعالجة وإنشاء تسلسلات اللغة والصور والفيديو والصوت والحركة ضمن بنية Mixture-of-Transformers الموحدة، مما يدعم دقة تصل إلى 720 بكسل عبر نسب أبعاد متعددة. ويعد مثاليًا للمحاكاة واسعة النطاق وتوليد البيانات الاصطناعية وسير عمل تعلم السياسات.
من خلال SageMaker JumpStart، يمكن للعملاء نشر أي من هذه النماذج ببضع نقرات فقط لمعالجة حالات استخدام الذكاء الاصطناعي المحددة لديهم.
للبدء في استخدام هذه النماذج، انتقل إلى كتالوج نموذج SageMaker JumpStart في وحدة تحكم SageMaker أو استخدم SageMaker Python SDK لنشر النماذج في حساب AWS الخاص بك. لمزيد من المعلومات حول نشر نماذج التأسيس واستخدامها في SageMaker JumpStart، راجع وثائق Amazon SageMaker JumpStart.