Kafka'nın Temel Kavramları: Aracılar ve Konular

Kafka's temel iki yapı taşıyla tanışalım: broker'lar ve topic'ler. Bunlar, Kafka'nın veri akışlarınızı nasıl depoladığı ve organize ettiğidir.

Bir Kafka broker, Kafka çalıştıran tek bir sunucudur. Üreticilerden mesaj alır, bunları diske kaydeder ve tüketicilere sunar; her şeyin motorudur.

Gerçek kurulumlar, daha fazla veri için yüksek kullanılabilirlik (bir aracı çökerse diğerleri devralır) ve ölçeklenebilirlik sağlamak üzere birden fazla aracı bir Kafka kümesi olarak birlikte çalıştırır.

Bir konu (topic), kayıtların yayınlandığı isimlendirilmiş bir kategori veya akıştır. Düzenli kalmak için farklı veriler ("kullanıcı etkinliği", "ödemeler") farklı konulara gider.

Bir konuyu adlandırılmış bir klasör veya VT tablosu gibi düşünün: oturum açma bilgileri user_logins'e, siparişler product_orders'a gider. Uygulamalar ihtiyaç duydukları akışı hızlıca bulur.

Her mesaj (veya kayıt) belirli bir konuya (topic) yayınlanır ve uygulamalar bunu okumak için abone olur. Bu bir yayınla-abone ol (publish-subscribe) modelidir — bir konu, tek bir veri akışı için boru hattıdır.

Konular broker'lar üzerinde barındırılır. Bir konunun verisi kümedeki bir veya daha fazla broker'a dağıtılır ve bu dağılım, Kafka'nın ölçeklenebilirliği ve hata toleransı için anahtardır.

Birlikte, aracılar (brokers) ve konular (topics) size ölçeklenebilirlik, disk üzerinde kalıcı depolama, temiz bir organizasyon ve ayrıştırma (decoupling) sağlar; üreticiler ve tüketiciler yalnızca konuyu paylaşır.

Bir sensör verisi akışı oluşturmak için sensor_readings gibi bir konu (topic) oluşturursunuz ve Kafka, bu mesajları depolamak ve yönetmek için broker'larını hazır hale getirir.

Kafka's iki temel taşına sahipsiniz: broker'lar (verileri depolayan ve sunan sunucular) ve topic'ler (bunlar arasında barındırılan mantıksal akışlar). Sağlam temel.