IAli
Tüm Yazılar
ext4 JBD2 Günlükleme: data=ordered ve data=journal Kıyaslaması

ext4 JBD2 Günlükleme: data=ordered ve data=journal Kıyaslaması

ext4 JBD2 günlükleme katmanı, data=ordered ve data=journal kipleri, fsync çağrısı ve disk bariyerleri eşliğinde elektrik kesintisinde veri bütünlüğü analizi.

Bir sunucunun fişi aniden çekildiğinde veya veri merkezinde jeneratör devreye girmeden önce elektrik kesildiğinde, depolama katmanında kayıtlı verilerin sağlam kalmasını ne belirler? Çoğu mühendis fsync() çağrısının başarıyla dönmesini bir veri kurtarma sigortası olarak kabul eder.

Ancak dosya sisteminin günlükleme (journaling) katmanı ile fiziksel diskin uçucu yazma önbelleği (volatile write cache) arasındaki hassas denge anlaşılmadığında, elektrik geri geldiğinde veritabanı tablolarının sıfır baytlarla (null bytes) dolduğu ya da dosya işaretçilerinin bozulduğu acı gerçekle karşılaşılır.

ext4 dosya sisteminin veri bütünlüğü kalkanı olan Journaling Block Device (JBD2) alt sistemi, data=ordered ve data=journal kipleri üzerinden bu çökme kurtarma mekanizmasını yönetir. Bu incelemede JBD2 hareket döngüsünü, disk bariyerlerini ve PostgreSQL MVCC ve Vacuum ile LSM-Tree ve B-Tree motorları için pratik dayanıklılık garantilerini ele alıyoruz.

TEXT
ext4 data=ordered Günlükleme ve İşlem Onay (Commit) Döngüsü:

1. Veri Blokları Diske Yazılır (Page Cache ──► Veri Blokları)
                     │
                     ▼
2. Yazma Tamamlandı mı? (Order Barrier)
                     │
                     ▼
3. Metadata Günlüğe Yazılır (JBD2 Günlük Bloğu)
                     │
                     ▼
4. Disk Bariyeri Gönderilir (SYNCHRONIZE CACHE / Flush)
                     │
                     ▼
5. Günlük Onay Bloğu Yazılır (Commit Block)
                     │
                     ▼
6. Kontrol Noktası (Checkpoint): Metadata Asıl Konumuna Yazılır

1. JBD2 Mimarisi: Neden Günlük Tutulur?

Klasik ext2 dosya sisteminde bir dosya yazılırken sunucu çökerse üç felaket senaryosu yaşanırdı:

  • Inode boyutu güncellenmiş ancak veri blokları diske ulaşılamamış olabilirdi.
  • Serbest blok haritası (block bitmap) ile gerçek bloklar uyuşmazdı.
  • Sunucu açılırken saatler süren fsck (dosya sistemi tutarlılık kontrolü) taraması gerekirdi.

ext3 ve ext4 ile gelen JBD2, dosya sisteminde yapılacak tüm yapısal değişiklikleri önce dairesel bir günlük (circular journal) alanına işlem (transaction) olarak kaydeder. Sistem çökerse tüm diski taramak yerine sadece bu küçük günlüğü baştan sona oynatır (journal replay). Sistem saniyeler içinde tutarlı olarak açılır.

JBD2 bir işlemi üç temel aşamada işler:

  1. Running (Çalışıyor): Değişiklikler bellekteki açık işleme eklenir (varsayılan olarak 5 saniye boyunca).
  2. Committing (İşleniyor): İşlem dondurulur, diskteki günlük alanına atomik olarak yazılır ve onay bloğu (commit record) basılır.
  3. Checkpointing (Temizleniyor): Günlükteki metadata asıl dosya sistemi tablolarına taşınır ve günlük alanı boşaltılır.

2. Günlükleme Kipleri Kıyaslaması: data=ordered vs data=journal

ext4 bağlama (mount) parametrelerinde üç farklı veri modu sunar:

Kip 1: data=ordered (Varsayılan ve Endüstri Standardı)

Bu kipte yalnızca metadata (dosya boyutu, erişim izinleri, inode blok işaretçileri) günlüğe yazılır. Gerçek dosya verisi (data payload) günlüğe girmez.

Ancak çekirdek katı bir sıralama kuralı uygular:

  • Dosyanın veri blokları fiziksel diske yazılmadan önce, o dosyaya ait metadata değişiklikleri GÜNLÜĞE YAZILAMAZ.
  • Sıralama garantisi sayesinde, bir elektrik kesintisi anında dosyanın metadatası güncellenmişse, o metadatanın işaret ettiği veri bloklarının da diskte fiziksel olarak var olduğu kesinleşir.
  • Eski veri kalıntılarının veya çöplük baytların (stale data leak) yeni bir dosyaya bağlanması önlenir.

Kip 2: data=journal (En Katı Bütünlük, En Düşük Verim)

Hem metadata hem de gerçek dosya içeriği önce JBD2 günlüğüne yazılır. Ardından asıl konumuna kopyalanır.

  • Avantajı: Elektrik kesintisinde dosya içeriği dahil tam bir çökme direnci sağlar.
  • Dezavantajı: Her bayt diske İKİ KEZ yazılır (çifte yazma maliyeti). Disk yazma verimi yarı yarıya düşer. Veritabanlarının kendi Önceden Yazmalı Günlükleri (Write-Ahead Logging - WAL) varken dosya sistemi seviyesinde de çift yazma yapmak diski felç eder.

Kip 3: data=writeback (En Yüksek Hız, Düşük Dayanıklılık)

Sıralama kuralı uygulanmaz. Metadata günlüğe yazılırken veri bloklarının diske yazılması beklenmez. Elektrik kesintisinde dosya metadatası güncellenmiş görünebilir ancak içeriği henüz diske ulaşmamış eski disk artıklarından oluşabilir. Veritabanlarında tercih edilmemelidir.

3. fsync() ve Disk Yazma Bariyerleri (Barriers)

Bir uygulama write() çağrısı yaptığında veri yalnızca işletim sisteminin sayfa önbelleğine (page cache) yazılır. Verinin kalıcı depolamaya aktarılmasını zorlamak için fsync(fd) veya fdatasync(fd) çağrılır.

Donanım seviyesinde önemli bir mimari ayrıntı bulunur: Modern SATA, NVMe ve kurumsal SAS disklerin üzerinde yerleşik, uçucu (volatile) DRAM yazma önbellekleri bulunur. Disk denetleyicisi, veriyi henüz manyetik plakaya veya NAND hücrelerine basmadan, salt kendi tamponuna aldığı anda işletim sistemine "yazma tamamlandı" yanıtı döner.

Elektrik aniden kesilirse disk tamponundaki bu veri buharlaşır. JBD2 bu felaketi engellemek için Disk Yazma Bariyerleri (Write Barriers) kullanır.

JBD2 bir commit bloğu yazmadan önce depolama aygıtına özel bir SCSI/ATA komutu gönderir:

  • ATA için: FLUSH CACHE EXT
  • NVMe için: Flush Command

Bu komut diski bekletir. Disk önbelleğindeki tüm kirli sayfaların kalıcı ortama basıldığını onaylamadan devam etmez. Bu bekleme fsync() gecikmesini birkaç mikrosaniyeden onlarca milisaniyeye çıkarabilir, ancak elektrik kesintisinde verinin yok olmasını önleyen tek mekanizmadır.

4. Gerçek Bir Çökme Vakası: fsync() Hatasının Yutulması

Linux çekirdeğinde 4.13 sürümüne kadar var olan ve PostgreSQL topluluğunun LKML'de ortaya çıkardığı tarihi bir hata vardı: "PostgreSQL fsyncgate".

Problem: Bir arka plan iş parçacığı kirli sayfaları diske yazarken disk G/Ç hatası (EIO) verirse, çekirdek sayfa önbelleğindeki hatayı temizliyordu. Daha sonra veritabanı süreci fsync() çağırdığında çekirdek başarılı dönüyordu. Veritabanı verinin diskte güvende olduğunu varsayarken, gerçekte bloklar diske hiç yazılamamıştı.

Linux 4.16 ile çekirdek hataları dosya tanımlayıcısı seviyesinde saklayacak şekilde düzeltildi. Ancak bu olay, donanım hatalarının dosya sistemi katmanında nasıl sessizce felakete dönüşebileceğini gösterdi.

5. Üretim Ortamı Bağlama (Mount) Tavsiyeleri

Veritabanı sunucularında ext4 performans ve veri güvenliğini dengelemek için /etc/fstab içinde şu yapılandırma kullanılmalıdır:

TEXT
/dev/nvme0n1p1  /var/lib/postgresql  ext4  noatime,data=ordered,barrier=1,commit=5  0  2

Parametrelerin teknik gerekçeleri:

  1. noatime: Her okuma işleminde inode erişim zamanı güncellemesini kapatarak gereksiz metadata yazmalarını ve JBD2 hareketlerini engeller.
  2. data=ordered: Çifte yazma yükü olmadan çökme anında dosya tutarlılığını korur.
  3. barrier=1: Disk uçucu önbelleklerinin elektrik kesintisinde boşaltılmasını zorunlu kılar. (Yalnızca pil destekli RAID denetleyicisi - BBU olan sunucularda barrier=0 yapılabilir).
  4. commit=5: JBD2'nin en fazla 5 saniyelik metadata hareketini bellekte tutmasına izin verir.

Bu mimari prensipler, ani güç kayıplarında dahi dosya sisteminizin çökme kurtarma hattında sağlam kalmasını temin eder.

Yazıyı Değerlendir

0 tepki

Fikirlerinizi tek tıkla paylaşarak geri bildirim bırakın.

Bu teknik notu çevrenizle paylaşın

Ali Purtaş

@alipurtas • Hey, This is Ali!

İletişime Geç

Kendi halinde yazılım geliştiren bir öğrenci. Sistemler kuruyor, deniyor, bozuyor ve öğrendiği gerçek çözümleri burada belgeliyor.

Konu Kümesi & Önerilen Yazılar

İç Bağlantılı Mimari
Yorumlar yükleniyor...