1.000 yataklı, içinde açık kalp ameliyathaneleri, travma acil servisi, organ nakli ünitesi ve 50 yataklı yeni doğan yoğun bakımı olan devasa bir şehir hastanesini gözünüzün önüne getirin. Gündüzleri yüzlerce profesör, uzman hekim ve hemşire koridorlarda arı gibi çalışır. Ancak hastane yönetimi maliyetleri kısmak adına bir gece vardiyası tasarrufu yapar: Gece saat 23:00 ile sabah 07:00 arasındaki o 8 saatlik kritik zaman diliminde koca hastanede tek bir stajyer pratisyen hekimi yalnız başına nöbetçi bırakır! Gece saat 03:15'te felaketler peş peşe patlar: Acil servise 4 araçlık zincirleme trafik kazasından 12 ağır yaralı getirilir; aynı anda kadın doğumda ikiz bebek acil sezaryene girmek zorundadır ve 4. kattaki yoğun bakımda iki hastanın kalbi aynı anda durur! O tek stajyer hekim ne yapar? Koridorlarda panik içinde koşar, sedyelerin arasında dizlerinin üzerine çöker, cinnet noktasına gelir ve hiçbir hastaya yetişemez. İnsanlar göz göre göre can verir. Hastane yönetimi ise "Hastanemizde 7/24 nöbetçi hekimimiz vardı" diyerek vicdanını temize çekmeye çalışır.

Türkiye'deki ve dünyadaki birçok "Tier III / 7/24 Kesintisiz İzleme" sertifikalı veri merkezinde gece vardiyasında yaşanan gerçeklik, tam olarak bu şehir hastanesinin çaresiz stajyer hekiminin trajedisidir.

Broşürdeki 7/24 NOC vs. Gece Saat 03:30 Gerçekliği

Veri merkezinin satış broşürünü açtığınızda şu kurumsal vaatleri okursunuz:
"Tesisimiz 7/24/365 kesintisiz olarak Network Operations Center (NOC) uzmanları, sistem mühendisleri ve güvenlik personeli tarafından proaktif olarak izlenmektedir."

Gündüzleri tesisi gezmeye gittiğinizde her şey harikadır: Lobide güvenlik görevlileri, ofiste onlarca güler yüzlü mühendis, NOC odasında büyük ekranlarda akan grafikler...

Ancak saatler gece 23:00'ü gösterdiğinde ve gündüz ekibi servis araçlarına binip gittiğinde, tesisin kaderi asgari ücretle çalışan 21 yaşındaki tek bir nöbetçi teknisyene emanet edilir.

Teknisyenin o geceki görev tanımı insan kapasitesinin sınırlarını zorlar:

  • 500 kabinin ve 5.000 fiziksel sunucunun alarm monitörlerini izlemek,
  • Gece gelen kargo ve sunucu teslimatlarını kapıda karşılamak,
  • Gece bakıma gelen üçüncü taraf teknisyenlere kimlik kontrolü yapıp eşlik etmek,
  • Telefon santralinden gelen acil destek çağrılarına yanıt vermek,
  • cPanel/VDS destek biletlerini cevaplamak,
  • Ve 2 saatte bir beyaz alanda devriye atıp klima su sızıntılarını kontrol etmek!

Zincirleme Kaza: Gece 03:42 Kriz Çarpışması

Sistem mühendisliğinde "Murphy Kanunları" geceleri iki kat daha hızlı çalışır. Felaketler asla tek tek gelmez; bir kurt sürüsü gibi hep birlikte saldırır.

O gece saat 03:42'de yaşanan tipik bir nöbetçi teknisyen cinneti:

[03:40] KAPIDA KARGO:
Yurtdışından acil gelen yedek parça tırı kapıya yanaşır.
Teknisyen kapıya iner, irsaliye imzalamaya başlar.

[03:42] TELEFON KİLİTLENİR:
Büyük bir e-ticaret müşterisinin sunucusunda SAS disk patlamıştır.
Müşteri santrali arar: "Acil sunucumun diskini değiştirin, sitem kapalı!"
Teknisyen kapıdaki kargoyu bırakıp santrale koşar.

[03:44] ANA ROUTER ÇÖKER (BGP KRİZİ):
Veri merkezinin ana Juniper/Cisco sınır yönlendiricisi (Border Router)
yurtdışı fiber hattındaki bir kesinti yüzünden BGP flapping moduna girer.
NOC odasındaki 5 ekran birden kıpkırmızı olur!
Sirenler çalmaya başlar: 500 kabinin interneti dalgalanmaktadır!

[03:46] TEKNİSYENİN ÇÖKÜŞÜ:
Kapıda kargo şoförü kornaya basar...
Telefonda müşteri avazı çıktığı kadar bağırır...
NOC ekranlarında 50 alarm aynı anda yanıp söner...
Ve nöbetçi teknisyen TEK BAŞINADIR!

Kime koşacaktır?

  • BGP konfigürasyonunu düzeltecek ağ mühendisliği bilgisi yoktur (çünkü sadece L1 donanım teknisyenidir).
  • Kabine gidip diski değiştirse kapıdaki tır içeri giremez.
  • Telefona baksa yönlendiriciyi inceleyemez.

Teknisyen panik içinde evinde uyuyan kıdemli ağ mühendisini (L3 Senior Network Engineer) arar:

  • Telefon çalar... açılmaz.
  • İkinci kez arar... meşgule atılır.
  • Üçüncü aramada mühendis uykulu bir sesle açar: "Ne var gece gece?"

O uykulu mühendisin VPN ile bağlanması, durumu anlaması ve müdahale etmesi tam 45 dakika sürer. O 45 dakika boyunca Türkiye'nin yüzlerce şirketinin interneti karadelikte asılı kalır.

Uykusuzluk ve Bilişsel Hatalar: Yorgun Neşter Faciası

İnsan biyolojisi gecenin dördünde uyanık kalmak üzere evrimleşmemiştir. Sirkadiyen ritmin en dip yaptığı saat 03:00 ile 05:00 arasıdır.

Uykusuz, yorgun ve tek başına bırakılmış bir teknisyenin bilişsel fonksiyonları, 1 promil alkol almış bir insanınkine eşittir:

  • Yanlış kabinin kapağını açar.
  • Yanan disk yerine sağlam diski yuvasından çeker (Disk Pull Error) ve çalışan RAID dizisini tamamen çökertebilir.
  • Konsolda shutdown -r now yerine poweroff yazıp sunucuyu uzaktan bir daha açılamayacak şekilde kapatabilir.

Bu hataların faturası teknisyene kesilir; oysa asıl suçlu, maliyeti kısmak için o devasa tesise gece tek bir insan koyan yönetim kuruludur.

Gerçek 7/24 Vardiya Mimarisi Nasıl Olmalıdır?

Gerçek bir Tier III veya Tier IV veri merkezinde "tek kişilik nöbet" diye bir kavram kabul edilemez.

Uluslararası standartlara uygun bir gece vardiyası en az üçlü saç ayağına dayanmak zorundadır:

[KURUMSAL GECE VARDİYASI MİMARİSİ]

1. Fiziksel Güvenlik ve Lojistik Personeli:
   - Yalnızca kapıyı, kargoyu, bina girişini ve devriyeyi yönetir.
   - Teknik işlere asla karışmaz.

2. L1/L2 Donanım ve Saha Teknisyeni:
   - Beyaz alandaki kabinlere, kablolara, arızalı disklere ve klimalara bakar.

3. Aktif Nöbetçi Ağ ve Sistem Mühendisi (L2/L3 Network & SysAdmin):
   - Evde uyuyan değil; NOC odasında terminal başında oturan,
     BGP ve sunucu krizlerine anında müdahale edebilecek yetkide bir mühendis!

4. İkincil Nöbetçi Çağrı Protokolü (Escalation Matrix):
   - Eğer birinci mühendis 3 dakika içinde telefona yanıt vermezse,
     otomasyon sistemi direktörün ve şirket genel müdürünün telefonunu çaldırır!

Sonuç

1.000 yataklı hastaneyi gece tek bir stajyere emanet eden zihniyet hasta ölümlerinin sorumlusudur; 500 kabinlik veri merkezini gece tek bir teknisyenle döndürmeye çalışan yönetim de müşterilerinin iflasının sorumlusudur.

Otomasyon harika bir yardımcıdır; ancak kriz anında kararları makineler değil, etten ve kemikten mühendisler verir. Gece vardiyasında insandan tasarruf etmek, saatli bir bombanın pimini çekip uyumaya benzer. Bir veri merkezini seçerken gündüz parlayan ışıklarına değil; gece saat 03:30'da içeride kaç mühendisin nöbet tuttuğuna ve bir felaket anında kriz masasının kaç saniyede kurulduğuna bakın.