تعطل بود تعريف GPU Operator بعد تحديث النواة

أرى هذه الحالة في الصباح الذي يلي تحديثا تلقائيا. بود التعريف في GPU Operator يدخل CrashLoopBackOff. أمر nvidia-smi لا يعمل. بودات الاستدلال تبقى Pending. السجل يقول إن بناء وحدة النواة فشل. في أغلب المرات الحزمة linux-headers لا تطابق النواة التي يظهرها uname -r الآن.
المشكلة
المشغل يبني وحدة NVIDIA داخل حاوية. البناء يحتاج رؤوس النواة العاملة، لا رؤوس النواة السابقة. التحديث يبدل النواة ويترك الرؤوس القديمة. البود يعيد المحاولة ويفشل بالطريقة نفسها، والعقدة تبلغ أن nvidia.com/gpu يساوي صفرا.
ما أفحصه
uname -r
kubectl -n gpu-operator logs daemonset/nvidia-driver-daemonset --tail=80
إذا لم تكن رؤوس هذه النواة مثبتة أتوقف. إعادة تثبيت المشغل لا تنشئ الرؤوس.
ما أثبته على العقدة
- أثبت الرؤوس المطابقة بأمر apt لحزمة linux-headers الخاصة بالنواة الحالية.
- أحذف بود التعريف على هذه العقدة ليبدأ البناء من جديد. لا أثبت حزمة nvidia-driver من apt. التعريف ملك المشغل.
- أوقف تحديثات النواة التلقائية على عقد الرسوم.
- قبل تغيير نواة مخطط: أعزل العقدة، أثبت الرؤوس، أنتظر البناء، ثم أعيد العقدة.
الملاحظة الأولى هي إعداد GPU Operator.
استشارات وشراكة هندسة البنية التحتية والمنصات
هل تحتاج مهندس أول لحماية واستقرار وتوسيع منصتك السحابية؟
من خوادم كوبرنيتيس وتالوس لينكس المستقلة وتخفيض فواتير السحابة بشكل جذري، إلى ضبط أداء وقفل بوستجريس وبناء مسارات الذكاء الاصطناعي السيادي، أعمل مباشرة مع الفرق الهندسية لبناء أنظمة مرنة ومملوكة بالكامل.