← العودة للمقالات التقنية

ترقية تعريف GPU Operator دون إيقاف كل العقد


عقدة رسوم مسحوبة على سكك وبقية الحامل ما زال مضاء

أغير driver.version في ClusterPolicy. بعد دقيقة تصبح كل عقد الرسوم NotReady. مجموعة البودات أعادت تشغيل التعريف عليها كلها معا. الاستدلال يتوقف مع أنني أردت رفع التعريف فقط.

المشكلة

بود التعريف ليس نسخة بلا حالة. أثناء إعادة تشغيله تسحب إضافة الجهاز البطاقة من allocatable. إذا حدث ذلك على كل العقد في الدقيقة نفسها لا يجد الطابور مكانا يعمل فيه.

طريقة الترقية

  1. أضبط الاستراتيجية ليكون بود تعريف واحد فقط غير متاح.
  2. أعزل عقدة رسوم واحدة وأفرغها.
  3. أنتظر أن يصبح بود التعريف الجديد Running. أشغل nvidia-smi. أتحقق أن allocatable عاد.
  4. أعيد العقدة، أراقب طلبا حقيقيا ينزل، ثم آخذ العقدة التالية.

لا أغير نسخة التعريف ونسخة المشغل في التغيير نفسه. التثبيت الأول في ملاحظة الإعداد.

استشارات وشراكة هندسة البنية التحتية والمنصات

هل تحتاج مهندس أول لحماية واستقرار وتوسيع منصتك السحابية؟

من خوادم كوبرنيتيس وتالوس لينكس المستقلة وتخفيض فواتير السحابة بشكل جذري، إلى ضبط أداء وقفل بوستجريس وبناء مسارات الذكاء الاصطناعي السيادي، أعمل مباشرة مع الفرق الهندسية لبناء أنظمة مرنة ومملوكة بالكامل.