Veritabanı Log Tablosunu Unutup Sunucuyu Tıkayan Var mı

Son güncelleme:
  • Selam arkadaşlar, geçen hafta başıma gelen komik ama bir o kadar da sinir bozucu bir olayı paylaşmak istedim.

    Eski bir müşterim sabahın köründe aradı. "Sitemiz çöktü, veritabanı bağlantı hatası veriyor" diye kan ter içinde anlatıyor. Dedim herhalde sunucuya saldırdılar ya da hosting süresi bitti. CPanel'e bir girdim, disk doluluk oranı %100 olarak kırmızı alarm veriyor.

    Şüpheliyi Bulmak Çok Zaman Almadı



    Ufak bir inceleme yaptıktan sonra olayı çözdüm. 4 yıl önce siteye eklediğimiz basit bir iletişim formu için log tablosu oluşturmuştuk. Her istek geldiğinde veritabanına ip, tarih vesaire yazıyordu. Gel zaman git zaman site trafiği büyümüş, o küçücük tablo tam 18 GB boyuta ulaşmış! Ne bir otomatik temizleme fonksiyonu yazmışız zamanında ne de cron job ayarlamışız.

    Tabloyu `TRUNCATE` yapıp sıfırlayınca site saniyesinde kendine geldi tabii. Ama insan gerçekten düşünmeden edemiyor, bazen projenin en ufak detayı yıllar sonra başımıza böyle çorap örüyor.

    Otomatik Temizlik Şart Oldu



    O günden sonra girdiğim bütün projelerde log tutan ne kadar script varsa hepsine otomatik 30 günlük silme mekanizması koymaya başladım. Sütten ağzı yanan yoğurdu üfleyerek yermiş derler ya, tam olarak o hesap.

    Sizin de böyle unuttuğunuz, yıllar sonra devasa boyuta ulaşıp sunucuyu kilitleyen veritabanı tablolarınız oldu mu hiç? Aranızda benzer bir çile yaşayan var mı, ne diyorsunuz?
0 0 0
  • Geçmiş olsun, klasik silent killer vakası yaşamışsın. Disk dolunca MySQL'in temp table oluşturamaması yüzünden sistemin çökmesi saatler alır ama bulması eğlencelidir. 18 GB yine iyiymiş, ben zamanında sırf `query_log` ve hata tablosu şiştiği için 250 GB'lık InnoDB ibdata file yüzünden gece yarısı ofise koştuğumu bilirim.

    Log Yönetimi İçin Altın Kurallar



    Bu işin fıtratında var, ilk başta "alt tarafı kaç satır yazacak ki" deniyor ama o loglar büyüdükçe index'ler şişiyor, sorgular yavaşlıyor ve disk dolmasa bile CPU'yu boğmaya başlıyor.

    Sadece silme mekanizması da yetmiyor bazen. Eğer o loglar hukuki veya denetim amaçlı lazımsa, silmek yerine log rotation yapmak ya da aylık tablolara bölmek (`partitioning`) gerekiyor. Ama günlük ufak projelerde en kral çözüm, veritabanına yazdırmak yerine syslog veya rotate eden text dosyaları kullanmak. Hem DB'yi şişirmiyor hem de `logrotate` servisi arkada kendi temizliyor.

    Bir de `slow query log` ve `error log` takibini unutmamak lazım. Onları da rotasyona sokmazsan, sunucu kendi kendini yiyor. Neyse, ucuz atlatmışsın, betona basmadan tecrübe edinmiş oldun.
0 0 0