Kafka'yı Yerel Olarak Kurma

Kendi makinenizde bir Kafka çalıştıralım; öğrenmek, test etmek ve geliştirmek için mükemmeldir. Yerel bir kurulum, bulut gerekmeden kişisel oyun alanınızdır.

İlk olarak, ön koşullar: JDK 8+ (Kafka JVM üzerinde çalışır) ve herhangi bir ana işletim sistemi — Linux, macOS veya WSL üzerinden Windows. java -version komutu ile kontrol edin.

Şimdi resmi Apache sitesinden Kafka ikili dosyasını (binary) indirin — en son kararlı sürümü alın. Gösterilen curl komutu onu doğrudan makinenize çeker.

Ardından, indirilen .tgz arşivini tar -xzf ile çıkarın, ardından yeni klasöre cd yapın. Artık Kafka kurulum dizini içerisindesiniz.

ZooKeeper, Kafka'nın broker'ları takip etmek ve meta verileri depolamak için uzun süredir kullandığı dağıtık bir koordinatördür. Daha yeni Kafka sürümleri bunun yerine KRaft kullanır, ancak ZooKeeper öğrenme amaçlı hâlâ yaygındır.

Gösterilen komutu kullanarak (Kafka ile birlikte gelen) ZooKeeper'ı başlatın. Günlükler (log) üretecektir — ZooKeeper'ın çalışmaya devam etmesi gerektiğinden bu terminali açık tutun.

Bir Kafka broker, Kafka sürecini çalıştıran sunucudur ve kümenin kalbidir. Mesajları konularda (topics) depolar ve üreticilere (producers) ile tüketicilere (consumers) hizmet eder. Yerelde bir tane çalıştıracağız.

ZooKeeper çalışır durumdayken yeni bir terminal açın ve gösterilen komutla broker'ı başlatın. Çalışır durumda tutun; artık tek düğümlü bir Kafka kümeniz canlı.

Çalıştığını doğrulayın: yeni bir terminalde, gösterilen kafka-topics.sh komutuyla bir test topic'i oluşturun. Hata olmaması, yerel Kafka'nızın çalıştığı anlamına gelir.

Başardınız — yerel bir Kafka kümesi çalışıyor. Java'yı yüklediniz, ikili dosyaları çıkardınız, ZooKeeper ve broker'ı başlattınız ve bir test topiği ile doğruladınız. Sırada: veri üretimi ve tüketimi.