يدعم موصل Amazon S3 لـ PyTorch الآن نقطة التحقق الموزعة
يدعم موصل Amazon S3 لـ PyTorch في الوقت الحالي نقطة التحقق الموزعة (DCP)، مما يقلل الوقت المطلوب لكتابة نقاط التحقق إلى Amazon S3. نقطة التحقق الموزعة هي ميزة في PyTorch لحفظ وتحميل نماذج تعلّم الآلة (ML) من عمليات تدريب متعددة بالتوازي. PyTorch هو إطار عمل لتعلّم الآلة مفتوح المصدر يتم استخدامه لبناء وتدريب نماذج تعلّم الآلة.
غالبًا ما يتم تشغيل مهام التدريب الموزعة لعدة ساعات أو حتى لعدة أيام، وتتم كتابة نقاط التحقق بشكل متكرر من أجل تحسين القدرة على التعامل مع الأعطال. على سبيل المثال، غالبًا ما يتم تشغيل مهام تدريب نماذج التأسيس الكبيرة لعدة أيام وينتج عنها نقاط تحقق يبلغ حجمها مئات الجيجا بايتات. يساعدك استخدام نقطة التحقق الموزعة مع موصل Amazon S3 لـ PyTorch على تقليل الوقت اللازم لكتابة نقاط التحقق الكبيرة المشار إليها إلى Amazon S3، مع الحفاظ على استخدام موارد الحوسبة المتاحة لك، مما يؤدي في نهاية الأمر إلى تقليل تكلفة الحوسبة.
موصل Amazon S3 لـ PyTorch هو مشروع مفتوح المصدر. لبدء الاستخدام، تفضل بزيارة صفحة GitHub.