IAli
Tüm Yazılar
XFS Tahsis Grupları, Dinamik İnode ve Yüksek Eşzamanlı G/Ç Verimi

XFS Tahsis Grupları, Dinamik İnode ve Yüksek Eşzamanlı G/Ç Verimi

XFS Allocation Groups mimarisi, bağımsız kilit bölgeleri, dinamik inode tahsisi ve büyük veritabanı iş yüklerinde ext4 yerine XFS tercih edilme sebepleri.

Reddit r/sysadmin ve r/databases topluluklarında PostgreSQL, Apache Kafka veya ScyllaDB gibi yüksek eşzamanlı yazma üreten sistemler tartışıldığında tecrübeli mühendislerin ortak bir tavsiyesi öne çıkar: "Büyük veri disklerinde ext4 yerine XFS kullanın."

Geleneksel ext4 dosya sistemi masaüstü ve genel sunucularda mükemmel bir denge sunarken, onlarca CPU çekirdeğinin aynı anda diske gigabaytlarca veri yazmaya çalıştığı kurumsal ortamlarda küresel kilit çekişmelerine takılır. XFS bu sorunu dosya sistemini bağımsız bölgelere bölen Tahsis Grupları (Allocation Groups - AG) mimarisiyle çözer. Bu incelemede XFS tahsis gruplarını, dinamik inode yönetimini ve ext4 JBD2 Günlükleme mimarisine kıyasla eşzamanlı G/Ç avantajlarını inceliyoruz.

TEXT
XFS Tahsis Grupları (Allocation Groups) Paralel Mimarisi:

+───────────────────────────────────────────────────────────────+
|                 XFS DOSYA SİSTEMİ BÖLÜMÜ (TB)                 |
+───────────────────────────────────────────────────────────────+
|      AG 0      |      AG 1      |      AG 2      |    AG (N-1)    |
| (Kendi Kilidi) | (Kendi Kilidi) | (Kendi Kilidi) | (Kendi Kilidi) |
+────────────────+────────────────+────────────────+────────────────+
| Superblock     | Superblock     | Superblock     | Superblock     |
| AG Free B+tree | AG Free B+tree | AG Free B+tree | AG Free B+tree |
| Inode B+tree   | Inode B+tree   | Inode B+tree   | Inode B+tree   |
| Veri Blokları  | Veri Blokları  | Veri Blokları  | Veri Blokları  |
+────────────────+────────────────+────────────────+────────────────+
        ▲                ▲                ▲                ▲
        │                │                │                │
     Core 0           Core 1           Core 2           Core 3
   Yazma İsteği     Yazma İsteği     Yazma İsteği     Yazma İsteği
  (KİLİT ÇEKİŞMESİ YOK - TAM PARALEL BLOK TAHSİSİ VE YAZMA)

1. XFS Allocation Groups (AG) Nedir?

XFS bir dosya sistemini biçimlendirirken disk alanını doğrusal tek bir blok havuzu olarak bırakmaz. Diski eşit boyutlu birden fazla bağımsız alt bölüme ayırır. Bu alt bölümlere Tahsis Grubu (Allocation Group - AG) adı verilir.

Her bir tahsis grubu kendi içinde küçük, bağımsız bir dosya sistemi gibi davranır:

  • Kendi süper bloğunun kopyasını (superblock) barındırır.
  • Kendi serbest blok B+ağaçlarını (cntbt ve bnobt) tutar.
  • Kendi bağımsız inode tahsis haritasını yönetir.
  • En önemlisi: Her tahsis grubu kendi bağımsız kilit mekanizmasına (locking domain) sahiptir.

ext4 dosya sisteminde yeni bir blok veya inode ayrılırken blok grubu kilitleri üzerinde çekişme yaşanabilir. XFS'te ise 32 çekirdekli bir sunucuda 32 farklı iş parçacığı diske yazma yaptığında, çekirdek her süreci farklı bir tahsis grubuna yönlendirir. Hiçbir iş parçacığı diğerinin kilit açmasını beklemez. Eşzamanlı yazma verimi doğrusal olarak ölçeklenir.

2. Sabit vs Dinamik İnode Mimarisi

ext4 ile XFS arasındaki en belirgin mimari farklardan biri inode yönetiminde ortaya çıkar:

ext4 Sabit İnode Tablosu (Static Inode Allocation)

ext4 diski biçimlendirirken (mkfs.ext4) toplam inode sayısını baştan belirler. Örneğin disk boyutuna göre 10 milyon inode ayrılır ve bu tablolar diskte sabit sektörlere yazılır.

  • Sorun: Disk üzerinde 100 GB boş alanınız kalsa dahi, eğer 10 milyon küçük dosya oluşturup inode'ları tükettiyseniz dosya sistemi "No space left on device" (ENOSPC) hatası verir.

XFS Dinamik İnode Tahsisi (Dynamic Inode Allocation)

XFS diski biçimlendirirken sabit bir inode tablosu oluşturmaz. Inode yapıları normal veri blokları gibi ihtiyaç duyuldukça 64'lük kümeler (chunk) halinde dinamik olarak oluşturulur.

  • Inode'lar tahsis gruplarının herhangi bir serbest bloğuna yerleşebilir.
  • Dosya sistemi dolana kadar yeni inode üretilebilir.
  • Dosyalar silindiğinde inode blokları tekrar serbest veri bloğuna dönüştürülür.

Bu esneklik, milyonlarca küçük dosya veya e-posta tutan sistemlerde disk alanı israfını ve beklenmedik inode tükenmelerini önler.

3. B+Tree Tabanlı Serbest Alan Yönetimi (Extents)

XFS serbest alanları tek tek bit haritalarında (bitmaps) tutmak yerine B+ağaçları ve uzantılar (extents) üzerinden takip eder.

Her tahsis grubunda iki ayrı B+ağacı çalışır:

  1. bnobt (Block Number B+tree): Blok numarasına göre indekslenmiş serbest uzantı listesi. Bitişik blokların birleştirilmesini hızlandırır.
  2. cntbt (Block Count B+tree): Boyutuna göre indekslenmiş serbest blok listesi. Çekirdek büyük bir dosya yazmak istediğinde (örneğin 1 GB'lık veritabanı veri bloğu), bu ağaçtan tam boyuta uyan kesintisiz bloğu tek bir aramada bulur.

Bu çift ağaçlı yapı sayesinde XFS, dosya sistemi yüzde 90 doluluğa ulaşsa bile parçalanmaya (fragmentation) karşı ext4'e kıyasla çok daha dirençli kalır.

4. Benchmark ve Üretim Deneyimleri: Neden Kafka ve Postgres?

Apache Kafka resmi dokümantasyonunda XFS'i açıkça varsayılan dosya sistemi olarak önerir.

Bunun üç temel nedeni vardır:

  1. Paralel Segment Yazımı: Kafka her konu bölümü (partition) için ayrı bir log dosyası tutar. 100 farklı bölüm aynı anda diskte büyürken XFS bu dosyaları farklı tahsis gruplarına dağıtarak disk kontrolcüsünün paralel NCQ/NVMe komut kuyruklarını tam verimle doldurur.
  2. Spekülatif Ön Tahsis (Speculative Preallocation): XFS büyüyen dosyalara arkadan otomatik olarak fazladan boş blok ayırarak dosya parçalanmasını sıfıra yaklaştırır.
  3. Reflink Desteği: XFS CoW (Copy-on-Write) klonlama yeteneğiyle veritabanı anlık görüntülerini anında kopyalar. Bu özellik copy_file_range ile Blok Katmanında Reflink Tabanlı Dosya Klonlama mekanizmasıyla doğrudan uyumludur.

5. Üretim Ortamı Biçimlendirme ve Bağlama Parametreleri

Veritabanı veya kuyruk sunucularında XFS diskleri biçimlendirirken tahsis grubu sayısını donanıma göre optimize edin.

Modern bir NVMe disk için biçimlendirme komutu:

Bash
# 32 Tahsis Grubu ve 4096 bayt blok boyutu ile biçimlendir
sudo mkfs.xfs -f -d agcount=32 -b size=4096 /dev/nvme0n1p1

/etc/fstab dosyasına eklenecek optimum mount parametreleri:

TEXT
/dev/nvme0n1p1  /data  xfs  noatime,nodiratime,logbufs=8,logbsize=256k,allocsize=64M  0  2

Seçeneklerin fonksiyonları:

  • noatime,nodiratime: Okuma işlemlerinde metadata yazımını engeller.
  • logbufs=8,logbsize=256k: Günlük tampon boyutunu artırarak ağır yazma trafiğinde JBD/XFS log kuyruğu tıkanmalarını önler.
  • allocsize=64M: Tamponlu yazmalarda agresif ön tahsis yaparak dosya parçalanmasını engeller.

Bu yapılandırma, çok çekirdekli modern sunucularda yüksek eşzamanlı G/Ç işlemlerinin kilit çekişmesine takılmadan doğrudan depolama donanımının sınırlarına ulaşmasını sağlar.

Yazıyı Değerlendir

0 tepki

Fikirlerinizi tek tıkla paylaşarak geri bildirim bırakın.

Bu teknik notu çevrenizle paylaşın

Ali Purtaş

@alipurtas • Hey, This is Ali!

İletişime Geç

Kendi halinde yazılım geliştiren bir öğrenci. Sistemler kuruyor, deniyor, bozuyor ve öğrendiği gerçek çözümleri burada belgeliyor.

Konu Kümesi & Önerilen Yazılar

İç Bağlantılı Mimari
Yorumlar yükleniyor...