IAli
Tüm Yazılar
eBPF ve XDP Mimarisi: Çekirdek Seviyesinde Hızlı Paket İzleme

eBPF ve XDP Mimarisi: Çekirdek Seviyesinde Hızlı Paket İzleme

Linux ağ yığınını atlayarak ağ kartı sürücüsünde çalışan XDP, eBPF haritaları, paket filtreleme mekanizmaları ve yüksek verimli DDoS savunması.

eBPF ve XDP Mimarisi: Çekirdek Seviyesinde Hızlı Paket İzleme

Geleneksel Linux ağ yığını (network stack), genel amaçlı işletim sistemi gereksinimleri gözetilerek tasarlanmıştır. Bu yapı soket soyutlamaları, bağlantı takibi (connection tracking), yönlendirme kuralları ve güvenlik duvarı filtreleri için esnek bir zemin sunar. Ancak saniyede onlarca milyon paketin ulaştığı 10 Gbps, 40 Gbps veya 100 Gbps hat hızlarında ya da büyük ölçekli DDoS saldırıları altında bu esneklik yüksek bir işlemci maliyetine dönüşür.

Darboğazın kökeninde Linux çekirdeğinin ağ kartından (NIC) gelen her çerçeve için bellek ayırması yatar. eXpress Data Path (XDP) ve genişletilmiş Berkeley Paket Filtresi (eBPF), paketleri henüz çekirdek veri yapılarına dönüştürülmeden önce doğrudan ağ kartı sürücüsü katmanında yakalayarak bu darboğazı ortadan kaldırır.

1. Geleneksel Ağ Yığınının Maliyeti: struct sk_buff Problemi

Standart bir Linux sisteminde bir ağ paketi fiziksel arayüze ulaştığında şu adımlardan geçer:

  1. Ağ kartı donanımı gelen paketi Doğrudan Bellek Erişimi (DMA) ile ana bellekteki RX halka tamponuna (ring buffer) yazar.
  2. Ağ kartı işlemciye bir donanım kesmesi (hardware interrupt) yollar.
  3. Çekirdek bu kesmeyi karşılayarak NAPI (New API) anket döngüsünü (napi_schedule) tetikler.
  4. Ağ kartı sürücüsü, gelen ham bayt dizisini yönetebilmek için çekirdek bellek yöneticisinden struct sk_buff (SKB) veri yapısı tahsis eder (alloc_skb veya __netdev_alloc_skb).
  5. SKB veri yapısı yaklaşık 240 baytlık üstveri (metadata) başlığı taşır ve paket verisi için ayrı bir bellek bloğu gerektirir.
  6. Çekirdek ağ yığını paketi sırayla netif_receive_skb, Netfilter (iptables / nftables), bağlantı takip tablosu (nf_conntrack) ve TCP/IP protokol ayrıştırıcılarına iletir.
TEXT
GELENEKSEL YOL:
[ NIC DMA ] ---> [ RX Ring ] ---> [ alloc_skb() ] ---> [ netfilter/iptables ] ---> [ Socket ]
                                  (~240B Üstveri)       (nf_conntrack tablosu)

Asgari Ethernet paket boyutu 64 bayttır. 10 Gbps hat hızında 64 baytlık paketler saniyede yaklaşık 14.88 milyon paket (Mpps) oluşturur. 100 Gbps hat hızında bu değer 148 Mpps seviyesine fırlar.

Saniyede 14 milyon kez sk_buff tahsis etmek (memory allocation), CPU önbellek satırlarını doldurmak ve ardından paketi iptables DROP ile çöpe atmak, işlemci çekirdeklerinin henüz paket içeriğini okuyamadan kilitlenmesine yol açar. Bir SYN Flood saldırısında sunucunun çökmesinin asıl sebebi uygulamanın yanıt verememesi değil, çekirdeğin sk_buff tahsisatı ve conntrack tablosu aramaları altında tükenmesidir.

2. XDP (eXpress Data Path) Giriş Noktası ve Modları

XDP, Linux ağ yığınının yerine geçmeyi amaçlamaz. XDP, paket daha struct sk_buff haline getirilmeden önce ağ sürücüsünün RX halkasında güvenli bir eBPF programı çalıştırma imkanı sunan bir kancadır (hook).

XDP programı çalıştığında paketi temsil eden yapı devasa sk_buff değil, yalın bir struct xdp_buff (eBPF kodunda struct xdp_md) işaretçisidir:

  • data: Paketin ham başlangıç bellek adresi
  • data_end: Paketin son bellek adresi
  • data_meta: eBPF programları arasında üstveri aktarımı için kullanılan alan
  • data_hard_start: Sayfa tamponunun başlangıç adresi

XDP mimarisi çalıştığı katmana göre üç farklı mod sunar:

  1. Offloaded XDP: eBPF bytecode'u doğrudan akıllı ağ kartının (SmartNIC) yerleşik işlemcisine yüklenir. Paketler ana sunucu CPU'suna ve RAM'ine hiç ulaşmadan ağ kartı üzerinde işlenir veya düşürülür.
  2. Native (Driver) XDP: En yaygın üretim modudur. eBPF programı ağ kartı sürücüsünün (örneğin mlx5, i40e, ixgbe) NAPI anket döngüsünde, DMA tamponundaki ham paket üzerinde doğrudan çalışır. sk_buff henüz oluşturulmamıştır.
  3. Generic XDP: Donanım sürücüsü XDP desteklemeyen sistemlerde geriye dönük uyumluluk ve test amaçlı kullanılır. Paket sk_buff haline getirildikten hemen sonra çalışır. Hız avantajı sınırlıdır ancak kodun mantıksal doğruluğunu sınamak için elverişlidir.

3. Mimari ve Veri Akış Şeması

Aşağıdaki şemada ağ kartı donanımından başlayan paket akışı, XDP eBPF karar noktası ve olası çıkış yolları gösterilmektedir:

TEXT
+-----------------------------------------------------------------------------------+
|                              FİZİKSEL AĞ KARTI (NIC)                              |
|   Gelen Paketler (10G/40G/100G) ---> [ RX Ring Tamponu (DMA) ]                    |
+--------------------------------------------------|--------------------------------+
                                                   |
                                                   v
+-----------------------------------------------------------------------------------+
|                        XDP EBPF SÜRÜCÜ KANCASI (DRIVER LEVEL)                     |
|                                                                                   |
|   Ham Paket İşaretçisi: struct xdp_md (data, data_end)                            |
|                                                                                   |
|   +---------------------------------------------------------------------------+   |
|   |                      eBPF FİLTRELEME & ANALİZ KODU                        |   |
|   |  - BPF Haritası Sorgusu (Kara Liste / Hız Limiti / İstatistik)            |   |
|   |  - TCP Başlığı / SYN Cookie Analizi                                       |   |
|   +---------------------------------------------------------------------------+   |
|                                  |                                                |
|            +---------------------+---------------------+                          |
|            |                     |                     |                          |
|            v                     v                     v                          |
|       [ XDP_DROP ]          [ XDP_TX ]          [ XDP_REDIRECT ]                  |
|       Anında Çöpe At        Geri Yansıt                |                          |
|       (Sıfır SKB Maliyeti)  (Aynı Port)         +------+------+                   |
|                                                 |             |                   |
+-------------------------------------------------|-------------|-------------------+
                                                  |             |
                        +-------------------------+             |
                        |                                       |
                        v                                       v
+---------------------------------------+     +-------------------------------------+
|      AF_XDP (UMEM HALKA BELLEĞİ)      |     |     GELENEKSEL LINUX AĞ YIĞINI      |
|                                       |     |                                     |
|   Kullanıcı Alanına Ek Kopyalama      |     |   [ alloc_skb() Tahsisi ]           |
|   Gerektirmeyen Sıfır-Kopya Aktarım   |     |   [ netfilter / iptables Kuralları] |
|   (DPDK Benzeri Yüksek Hızlı Giriş)   |     |   [ nf_conntrack Bağlantı Takibi ]  |
|                                       |     |   [ Standart TCP/IP Soketleri ]     |
|   [ Yüksek Hızlı Uygulama / Sniffer ] |     |   [ Nginx / Node.js / Go Sunucu ]   |
+---------------------------------------+     +-------------------------------------+

4. XDP Eylem Kodları (Action Codes)

Bir XDP programı her paket için enum xdp_action türünde 5 farklı karardan birini döndürür:

  • XDP_DROP: Paketi sürücü halkasında anında yok sayar. Çekirdek hiçbir bellek tahsisi yapmaz, DMA tanımlayıcısı yeni gelen bir paket için hemen yeniden kullanılır. Saniyede onlarca milyon saldırı paketini düşürmenin en verimli yöntemidir.
  • XDP_PASS: Paketi standart Linux ağ yığınına devreder. Çekirdek bu andan itibaren sk_buff tahsisatını başlatır ve paket iptables, yönlendirme ve soket katmanlarına olağan şekilde iletilir.
  • XDP_TX: Paketi geldiği ağ arayüzünden doğrudan kabloya geri yansıtır. Paket üzerinde MAC veya IP adres değişiklikleri yapılmış olabilir. Düşük gecikmeli L4 yük dengeleme ve yansıtma senaryolarında tercih edilir.
  • XDP_REDIRECT: Paketi normal ağ yığınını atlayarak başka bir ağ kartına, sanal bir arayüze (veth) ya da kullanıcı alanında dinleyen bir AF_XDP soketine aktarır.
  • XDP_ABORTED: Programda beklenmeyen bir hata (örneğin tanımsız bellek erişimi veya sıfıra bölme) oluştuğunda tetiklenir. Paketi düşürür ve hata takibi için çekirdeğin tracepoint/xdp/xdp_exception izleme noktasını uyarır.

5. BPF Doğrulayıcısı (Verifier) ve Güvenlik Denetimleri

Linux çekirdeğine dinamik bytecode yüklemek geçmişte çekirdek çökmesi (kernel panic) riskleri barındırıyordu. eBPF altyapısı bu riski ortadan kaldırmak için katı bir BPF Doğrulayıcısı (Verifier) mekanizması uygular.

Bir XDP programı çekirdeğe yüklenirken Verifier şu kontrolleri zorunlu kılar:

  • Döngü Sınırları: Programın kilitlenmeden tamamlanmasını sağlamak amacıyla sonsuz döngülere izin verilmez. Linux 5.3 öncesinde tüm döngülerin açılması (unroll) gerekirken, modern çekirdeklerde sınırlı döngülere (bounded loops) izin verilir.
  • Komut Sayısı Sınırı: Program karmaşıklığı en fazla 1 milyon komut ile sınırlandırılmıştır.
  • Sınır Kontrolleri (Bounds Checking): Paket verisine erişirken her işaretçi işlemi sınır denetiminden geçmelidir.

Örneğin gelen bir paketin Ethernet ve IPv4 başlığını okumak isteyen bir program şu kontrolleri yapmadan veriye dokunursa Verifier yüklemeyi anında reddeder:

C
// XDP paket başlık sınır kontrolü
SEC("xdp")
int filtre_programi(struct xdp_md *ctx) {
    void *data = (void *)(long)ctx->data;
    void *data_end = (void *)(long)ctx->data_end;

    // Ethernet başlığı sınır kontrolü
    struct ethhdr *eth = data;
    if ((void *)(eth + 1) > data_end)
        return XDP_DROP;

    // Yalnızca IPv4 paketlerini incele
    if (eth->h_proto != __constant_htons(ETH_P_IP))
        return XDP_PASS;

    // IP başlığı sınır kontrolü
    struct iphdr *ip = (void *)(eth + 1);
    if ((void *)(ip + 1) > data_end)
        return XDP_DROP;

    // Hedef veya kaynak IP kontrolü güvenle yapılabilir
    return XDP_PASS;
}

Eğer (void *)(ip + 1) > data_end satırı yazılmazsa, Verifier invalid access to packet, off=34 size=20, R1(id=0,off=0,r=14) benzeri bir hata üreterek programın çekirdeğe girmesine izin vermez.

6. BPF Haritaları (Maps) ile Durum ve Sayaç Yönetimi

eBPF programları kural olarak durumsuzdur. Paketler arasında durum saklamak, istatistik toplamak veya kullanıcı alanındaki bir kontrol programıyla haberleşmek için BPF Haritaları (BPF Maps) kullanılır.

En yaygın kullanılan BPF harita türleri şunlardır:

  • BPF_MAP_TYPE_HASH: Anahtar-değer tabanlı dinamik arama tablosudur. Dinamik IP engelleme ve hız sınırlama için kullanılır.
  • BPF_MAP_TYPE_ARRAY: Sabit boyutlu, indeks tabanlı dizidir. Önceden tanımlı konfigürasyon parametreleri ve hızlı O(1) okumalar için elverişlidir.
  • BPF_MAP_TYPE_PERCPU_ARRAY ve BPF_MAP_TYPE_PERCPU_HASH: Her CPU çekirdeği için bağımsız bir bellek kopyası barındırır. Çekirdekler arası kilitlenmeleri (spinlock contention) ve önbellek satırı çakışmalarını (cache line bouncing) engelleyerek yüksek paket hızlarında sayaç tutmayı sağlar.
  • BPF_MAP_TYPE_RINGBUF: Linux 5.8 ile gelen, çekirdekten kullanıcı alanına kilitlenmesiz olay aktarımı sağlayan halka tamponudur. Eski perf_event_array yapısına kıyasla daha düşük bellek tüketimi ve yüksek verim sunar.

Aşağıdaki tanım her CPU için izole bir paket sayacı tablosu oluşturur:

C
struct {
    __uint(type, BPF_MAP_TYPE_PERCPU_ARRAY);
    __type(key, __u32);
    __type(value, __u64);
    __uint(max_entries, 256);
} paket_sayaclari SEC(".maps");

7. AF_XDP ile Kullanıcı Alanına Doğrudan Bellek Erişimi

Geleneksel ağ mimarilerinde yüksek verimli paket yakalama için DPDK (Data Plane Development Kit) kullanılırdı. Ancak DPDK ağ kartını çekirdek sürücüsünden tamamen koparır, özel donanım gerektirir ve standart Linux ağ araçlarını (ethtool, ip route, tcpdump) işlevsiz kılar.

Linux 4.18 ile tanıtılan AF_XDP (XDP soketleri), DPDK'nın hızını Linux ekosisteminin yönetilebilirliğiyle birleştirir.

AF_XDP mekanizmasının temeli kullanıcı alanı tarafından tahsis edilen UMEM adı verilen bellek havuzuna dayanır. UMEM, çekirdek ve kullanıcı alanı arasında paylaşılan 4 halka kuyruğuyla yönetilir:

  1. Fill Ring: Kullanıcı alanı, ağ kartının gelen paketleri yazabilmesi için boş bellek tanımlayıcılarını bu kuyruğa koyar.
  2. Rx Ring: Ağ kartı paketi aldığında, dolu paketin adresini bu kuyruk üzerinden kullanıcı alanına bildirir.
  3. Tx Ring: Kullanıcı alanı paket göndermek istediğinde veriyi bu kuyruğa yerleştirir.
  4. Completion Ring: Çekirdek paket iletimini tamamladığında tanımlayıcıyı bu kuyruk üzerinden serbest bırakır.

Sürücü doğrudan kopyalamasız (zero-copy) modda çalıştığında paket doğrudan kullanıcı alanının ayırdığı UMEM belleğine DMA ile yazılır. Çekirdek ağ yığını tamamen atlanır, soket kopyalaması gerçekleşmez ve kullanıcı alanındaki uygulama saniyede onlarca milyon paketi doğrudan işleyebilir.

8. DDoS Savunmasında Pratik Kullanım: SYN Flood Engelleme

Büyük ölçekli web platformlarında (Cloudflare ve Meta gibi altyapılarda) XDP'nin en kritik kullanım alanı L4 DDoS savunmasıdır.

Klasik bir SYN Flood saldırısında saldırgan sahte IP adresleriyle milyonlarca TCP SYN paketi gönderir. Standart Linux sunucusunda her SYN paketi nf_conntrack tablosunda ve TCP dinleme kuyruğunda bir yarım açık (half-open) bağlantı girdisi oluşturur. Birkaç saniye içinde bellek tükenir ve sunucu meşru kullanıcıların bağlantılarını reddetmeye başlar.

XDP seviyesinde uygulanan savunma mimarisi bu tabloyu tamamen devre dışı bırakır:

  1. Gelen TCP paketi XDP kancasına ulaştığında SYN bayrağı kontrol edilir.
  2. XDP programı bağlantıyı belleğe kaydetmez. Kaynak IP, hedef IP, portlar ve gizli bir anahtar üzerinden kriptografik bir SYN Cookie (sıra numarası) hesaplar.
  3. Hesaplanan bu bilgiyle anında bir SYN-ACK paketi üretir ve XDP_TX ile geldiği arayüzden istemciye geri yansıtır.
  4. Karşı taraf gerçek bir istemci ise el sıkışmayı tamamlamak için doğru sıra numarasını içeren bir ACK paketi gönderir.
  5. XDP programı gelen ACK paketindeki çerezi matematiksel olarak doğrular. Çerez geçerliyse pakete XDP_PASS vererek standart Linux yığınına ve web sunucusuna iletir. Sahte paketler ise doğrudan XDP_DROP ile imha edilir.

Bu yöntem sayesinde sunucu belleğinde tek bir bayt dahi durum bilgisi tutulmadan saniyede onlarca milyon sahte bağlantı isteği sürücü katmanında eritilir.

9. Üretim Ortamı İçin Sınırlamalar ve Tanılama

XDP güçlü bir veri yolu sağlamakla birlikte operasyonel kısıtlamalar barındırır:

  • Sürücü Desteği: Yerel (Native) XDP performansından yararlanabilmek için ağ kartı sürücüsünün XDP arabirimini uygulamış olması gerekir. Çoğu modern Intel (ixgbe, i40e, ice) ve Mellanox (mlx4, mlx5) sürücüsü bu desteğe sahiptir.
  • MTU Kısıtları: XDP sürücü modunda paketlerin tek bir bellek sayfasına (genellikle 4 KB) sığması beklenir. Jumbo frame (örneğin 9000 bayt MTU) kullanılan ağlarda sürücü uyumluluğu kontrol edilmelidir.
  • İnceleme Karmaşıklığı: Geleneksel tcpdump araçları paketleri ağ yığını katmanında yakalar. XDP_DROP ile düşürülen bir paket tcpdump çıktısında görünmez.

Sistemde yüklü XDP programlarını ve haritalarını incelemek için bpftool ve ip araçları kullanılır:

Ağ arayüzündeki XDP durumunu kontrol etmek için:

Bash
ip link show dev eth0

Çıktıda xdp veya xdpmode native ibaresi görülmelidir.

Çekirdekte çalışan BPF programlarını ve haritalarını listelemek için:

Bash
bpftool prog show
bpftool map show

Ağ mühendisleri için XDP, geleneksel Linux yığınının güvenilirliğini feda etmeden yüksek paket hızlarında ölçeklenebilir savunma ve yük dengeleme altyapıları kurmanın en sağlam çekirdek aracıdır.

Yazıyı Değerlendir

0 tepki

Fikirlerinizi tek tıkla paylaşarak geri bildirim bırakın.

Bu teknik notu çevrenizle paylaşın

Ali Purtaş

@alipurtas • Hey, This is Ali!

İletişime Geç

Kendi halinde yazılım geliştiren bir öğrenci. Sistemler kuruyor, deniyor, bozuyor ve öğrendiği gerçek çözümleri burada belgeliyor.

Konu Kümesi & Önerilen Yazılar

İç Bağlantılı Mimari
Yorumlar yükleniyor...