من گزارش نهایی را اینجا برای شما قرار دادم: جالب است زیرا توضیح می دهد (تقریبا) نحوه مدیریت انرژی اتاق شبکه و مشکلات برق که می توانند در صورت بروز حادثه بوجود آیند. همچنین نشان می دهد که یک حادثه غالباً جانشینی یک حادثه جزئی است و یک چک ساده گمشده (در این مورد انتشار جهانی اتوماتیک) می تواند منجر به "فاجعه" شود.
مشتری عزیز،
پس از گذشت بیش از 20 ساعت در محل جنگ ، سرانجام می توانیم در مورد حادثه فنی مهمی که بین 10 مه ، 17 بعد از ظهر تا 11 مه ، 15:30 بعد از ظهر (زمانی که همه خدمات 100٪ عملیاتی هستند) با آن روبرو شدیم ، توضیحاتی ارائه دهیم. .
این یک حادثه استثنایی از نظر ماهیت و پیامدهای آن است ...
خلاصه :
دیروز حدود ساعت 16:15 بعد از ظهر منبع تغذیه EDF (GEG) ساختمان در سطح سلول واقع در خارج از ساختمان قطع شد. ما نمی دانیم (و GEG دلیل دقیق قطع برق را نمی داند).
در چنین شرایطی نباید برق سرورها قطع شود زیرا ساختمان توسط 3 اینورتر بزرگ و همچنین یک دیزل ژنراتور 400 کیلو وات ایمن است. این سیستم به طور معمول خوب کار می کند ، زیرا ما قبلاً یک برش EDF را تجربه کرده ایم و هیچ تاثیری نداشته است.
همانطور که دیدید دیروز چنین اتفاقی نیفتاد.
کارمندان مختصر (یک گروه بین المللی که این مرکز داده را اداره می کند) در ابتدای هفته برای انجام تعمیر و نگهداری و آزمایشات روی مجموعه ژنراتورهای دیزل مداخله کردند. افرادی که مداخله کردند بدیهی است گروه را به حالت شروع خودکار بازنگرداندند تا به محض تشخیص اینکه دیگر هیچ جریان EDF وجود ندارد ، گروه شروع به کار کند.
نتیجه مشخص بود: گروه شروع به کار نکرد ، اینورترها کاملاً خالی بودند و سرورها دیگر تأمین نمی شدند.
علاوه بر این ، سایت به طور معمول از چندین مرکز واقع در پاریس ، نیویورک و اسپانیا کنترل می شود تا این نوع مشکلات خیلی سریع توسط Cogent تشخیص داده شود و آنها بتوانند مداخله کنند. این بار کار نکرد زیرا چند روزی بود که در سیستم نظارت مشکلی پیش آمده بود. (که باید امروز یا فردا حل و فصل شود).
کمتر از 10 دقیقه پس از قطع شدن سرورها ، PHPNET در این سایت حضور داشت تا از یک طرف ژنراتور را به صورت دستی برای بازیابی برق شروع کرده و از طرف دیگر همه سرورها را دوباره راه اندازی کند.
از آنجا که مشکلی هرگز به خودی خود اتفاق نمی افتد ... وقتی GEG برق را بازگرداند ، سیستم سوئیچینگ خودکار سعی کرد دوباره به آن بازگردد و اینجاست که ما تجربه کردیم
قطع برق دوم ...
در حقیقت ، روش عادی سوئیچینگ عبارت است از: edf => inverters => group eletrogenic. برعکس ، برای بازگشت به edf ، مدار goupe الکتروژن => inverters => edf است.
از آنجا که اینورترها وقت کافی برای شارژ مجدد کافی نداشتند ، دوباره منبع تغذیه سرورها قطع شد.
برای تکمیل آن ، منبع تغذیه EDF چند دقیقه پس از تغییر مجدد قطع شد زیرا مصرف برق سایت بسیار زیاد بود. واحدهای تهویه مطبوع و همچنین سرورهایی که در هنگام راه اندازی دو تا سه برابر بیشتر برق مصرف می کنند ، مصرف بیش از تنظیمات موجود در خارج از ساختمان است و باعث قطع شدن جدید سرورها می شود.
بنابراین مجبور شدیم سیستم های تهویه مطبوع را برش دهیم و هر قسمت از ساختمان را در یک زمان خاص دوباره راه اندازی کنیم ، تا دوباره راه اندازی نشود.
این قطع برق بی شمار باعث از بین رفتن بسیاری از هارددیسک های سرورها و (به ویژه) از بین رفتن چندین سیستم فایل شده است. با این حال ، شب گذشته برای چند ساعت با موفقیت به سیستم پشتیبان خود راه یافتیم.
سرور نامه 1 (cluster1) باید در آخرین نسخه پشتیبان تهیه شود زیرا داده های آن قابل بازیابی نبودند. اکنون اوضاع ثابت شده است.
امروز مسئولیت این حادثه باید به Cogent منتقل شود که باید اطمینان حاصل می کرد که گروه در حالت شروع خودکار قرار دارد و به ویژه نظارت صحیح را انجام می دهد
مرکز داده قبل از خالی شدن اینورترها مداخله کند.
ما مذاکرات لازم را برای بدست آوردن غرامت مالی آغاز خواهیم کرد که تا میزان برآورد شده شما به اشتراک PHPNET شما منتقل خواهد شد.
راه حل های مختلفی در مورد توسعه یک مرکز داده در بخش PHPNET تحت مطالعه است زیرا ما دیگر نمی خواهیم به حسن نیت ارائه دهندگان خدمات مانند Cogent یا Redbus وابسته باشیم.
ما شما را در مورد این پروژه که باید در 12 ماه آینده تکمیل شود مطلع می کنیم.
کل تیم PHPNET به من پیوسته اند تا از درک شما متشکرم و از هرگونه مشکلی که ممکن است برای شما ایجاد کند ، عذرخواهی کنند.
آخر هفته عالی برای شما ،
----
PHPNET
123 تر مسیر رهایی
38100 گرنوبل
) که سرور اشباع شده است.