Google Cloud tərəfindən verilən məlumata görə, insident 1 sentyabr tarixində, yerli vaxtla saat 07:41-dən 11:52-yə qədər davam edib. Texniki xidmət göstərən mühəndis cəmi 13 dəqiqə ərzində bütün optik bağlantıları kəsərək, şəbəkə trafikinin 100% azalmasına və resursların izolyasiyasına səbəb olub. Bu səhv hərəkət nəticəsində bir sıra virtual maşınlar istifadəçilər üçün əlçatmaz vəziyyətə düşüb.
Bu qədər ciddi nasazlıq necə baş verə bildi?
Şirkət öz məlumat mərkəzlərində marşrutlaşdırıcıların ehtiyat nüsxələnməsi, enerji təchizatının ayrılması və çoxsaylı optik lifli rabitə xətləri (VOK) kimi yüksək səviyyəli mühafizə sistemlərindən istifadə edir. Lakin bu texniki təhlükəsizlik tədbirləri insan amili qarşısında aciz qalıb. Mühəndisin təlimatlara əməl etmədən kabelləri fiziki olaraq çıxarması, sistemin bütün avtomatik müdafiə mexanizmlərini baypas edib.
Sistem necə bərpa olundu?
Problemin aşkarlanmasından dərhal sonra Google mühəndisləri trafiki zərər görməmiş digər güclərə yönləndirməyə başlayıblar. Daha sonra fiziki olaraq ayrılmış kabellər yerinə qoşularaq şəbəkənin ilkin konfiqurasiyası bərpa edilib. Uptime Institute-un qeydlərinə görə, müasir dövrdə məlumat mərkəzlərindəki qəzaların sayı azalsa da, onların miqyası və yaratdığı fəsadlar əvvəlkindən daha böyükdür.
