انتقل إلى المحتوى
وقت القراءة: دقيقة واحدة

NVIDIA تطرح «NVIDIA Recovery» لأتمتة استعادة تدريب الذكاء الاصطناعي

أتاحت NVIDIA خدمة «NVIDIA Recovery» مفتوحة المصدر لأتمتة استعادة أحمال التدريب الموزع على مستوى العناقيد. وترصد الأعطال عبر السجلات ومقاييس GPU وإشارات المجدول، ثم تعزل العقد المتضررة وتعيد تشغيل الأحمال أو توقفها وفق السياسات.
رسم توضيحي مولّد بالذكاء الاصطناعي: NVIDIA تطرح «NVIDIA Recovery» لأتمتة استعادة تدريب الذكاء الاصطناعي
رسم توضيحي مولّد بالذكاء الاصطناعي

أتاحت NVIDIA خدمة «NVIDIA Recovery» مفتوحة المصدر لأتمتة استعادة أحمال التدريب الموزع على مستوى العناقيد. وترصد الأعطال عبر السجلات ومقاييس GPU وإشارات المجدول، ثم تعزل العقد المتضررة وتعيد تشغيل الأحمال أو توقفها وفق السياسات.

تدعم الخدمة Slurm عبر Advisor Controller قابل للنشر بـHelm، وتبدأ افتراضياً بوضع المراقبة قبل تفعيل الإجراءات الذاتية. وبين 9 يوليو و9 أكتوبر، غطت مراقبتها في عنقود واحد قرابة 200 مهمة يومياً وسجلت نحو 8,550 كشفاً للشذوذ؛ وبلغ متوسط زمن الكشف 69 ثانية وزمن إجراء الاستعادة 94 ثانية. وهي ضمن DSX OS ومرخّصة Apache 2.0.

Keep Distributed Training Running with Automated Workload Recovery · تاريخ النشر في المصدر: