Mikä Apache Kafka on?

Apache Kafka on avoimen lähdekoodin alusta tietovirtojen käsittelyyn reaaliajassa — ajatelkaa sitä nopeana ja luotettavana tietojenne postitoimistona.

Dataa syntyy jatkuvasti — napsautuksia, anturilukemia ja vaikka mitä. Perinteiset järjestelmät hyytyvät tällaisen datamäärän ja nopeuden edessä. Kafka on suunniteltu siirtämään kaikki tämä luotettavasti.

Kafka käsittelee kaiken datan jatkuvana tapahtumavirtana. Jokainen tapahtuma tallentaa jotakin tapahtunutta, on muuttumaton ja järjestetty, ja virta jatkuu loputtomasti.

Kafkan vahvuuksia ovat valtavien datamäärien käsittelyyn tarvittava skaalautuvuus, datan säilyvyyden takaava pysyvyys, vikasietoisuus häiriötilanteissa ja suuri läpimeno — miljoonia viestejä sekunnissa.

Kuvitelkaa verkkokauppa: jokainen napsautus ja ostos on tapahtuma, jonka Kafka sieppaa välittömästi. Tämä mahdollistaa reaaliaikaisen analytiikan, personoinnin ja petosten havaitsemisen.

Kafka toimii keskitettynä keskuksena, joten mikropalvelut voivat lähettää viestejä toisilleen ilman suoraa kytkentää. Tämä irtikytkentä pitää järjestelmät joustavina ja helposti kehitettävinä.

Kafka sopii erinomaisesti event sourcing -malliin: jokainen tilan muutos tallennetaan muuttumattomana tapahtumana, ei vain nykyisenä arvona. Saatte täydellisen auditointijäljen ja voitte muodostaa aiemmat tilat uudelleen.

Kafkalla on kaksi pääroolia: tuottajat kirjoittavat tapahtumia ja kuluttajat lukevat niitä. Tapahtumat sijaitsevat kategorioissa, joita kutsutaan aiheiksi.

Nyt kokonaisuus on hallussanne: Kafka on hajautettu suoratoistoalusta, joka on suunniteltu skaalautuvuutta, pysyvyyttä ja vikasietoisuutta varten — analytiikkaan, viestinvälitykseen ja event sourcing -malliin. Seuraavaksi tutustumme sen keskeisiin komponentteihin.