Безопасность: аутентификация и авторизация
Реализуйте базовые меры безопасности в Kafka, включая аутентификацию клиентов и авторизацию доступа к данным.
«Безопасность: аутентификация и авторизация» — бесплатный урок Apache Kafka & Stream Processing Fundamentals на CoddyKit. Это урок 3 из 4. Ты можешь прочитать весь урок бесплатно ниже — а потом практиковать его прямо в браузере с встроенным редактором кода и ИИ-репетитором 24/7. Это часть пути обучения Apache Kafka & Stream Processing Fundamentals, и твой прогресс синхронизируется между веб-версией и приложением CoddyKit. Курс Apache Kafka & Stream Processing Fundamentals содержит 4 уроков всего.
Части этого урока еще не переведены и отображаются на английском.
Why Secure Kafka?
In today's data-driven world, securing your data is paramount. Kafka, often the backbone for critical data streams, needs robust security measures.
Without security, sensitive information could be exposed, data integrity compromised, and compliance regulations violated. This lesson covers the fundamental ways to protect your Kafka cluster.
Authentication: Who Are You?
Authentication is the process of verifying the identity of a client (like a producer or consumer) trying to connect to a Kafka broker.
Think of it like showing your ID at an airport. Kafka needs to confirm that you are who you claim to be before allowing any interaction. This prevents unauthorized users from even connecting.
Authorization: What Can You Do?
Once a client is authenticated (their identity is confirmed), authorization determines what actions they are permitted to perform.
This is like having a boarding pass after showing your ID. The pass dictates which gate you can access and which flight you can board. Kafka uses authorization to control access to specific topics, consumer groups, and other resources.
Kafka's Security Toolkit
Kafka offers several mechanisms to implement both authentication and authorization:
- Authentication: Primarily handled by SASL (Simple Authentication and Security Layer) or SSL/TLS.
- Authorization: Managed through Access Control Lists (ACLs), which define permissions for authenticated users on specific resources.
These layers work together to create a secure data streaming environment.
SASL/PLAIN Broker Setup
SASL (Simple Authentication and Security Layer) provides a framework for authentication. One common mechanism is SASL/PLAIN, which uses a simple username and password.
To enable SASL/PLAIN on a Kafka broker, you need to add security configurations to its server.properties file. Here's a basic example:
# server.properties
listeners=PLAINTEXT://:9092,SASL_PLAINTEXT://:9093
sasl.enabled.mechanisms=PLAIN
sasl.mechanism.inter.broker.protocol=PLAIN
authorizer.class.name=kafka.security.auth.SimpleAclAuthorizer
supers.users=User:admin
listener.name.sasl_plaintext.plain.sasl.jaas.config=
org.apache.kafka.common.security.plain.PlainLoginModule required
username="admin" password="admin-secret";
Client Authentication with SASL/PLAIN
Once the broker is configured for SASL/PLAIN, clients (producers or consumers) must provide valid credentials to connect. You specify these details in the client's configuration.
Try running this simple Java producer example, configured to use SASL/PLAIN:
import org.apache.kafka.clients.producer.*;
import java.util.Properties;
public class SecureProducer {
public static void main(String[] args) {
Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9093");
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");
// SASL_PLAINTEXT configuration
props.put("security.protocol", "SASL_PLAINTEXT");
props.put("sasl.mechanism", "PLAIN");
props.put("sasl.jaas.config",
"org.apache.kafka.common.security.plain.PlainLoginModule required " +
"username=\"admin\" password=\"admin-secret\";");
Producer<String, String> producer = new KafkaProducer<>(props);
try {
for (int i = 0; i < 5; i++) {
String message = "Hello Secure Kafka " + i;
producer.send(new ProducerRecord<>("my-secure-topic", "key" + i, message));
System.out.println("Sent: " + message);
}
} catch (Exception e) {
e.printStackTrace();
} finally {
producer.close();
}
}
}Authorization with Access Control Lists
After a client authenticates, Kafka uses Access Control Lists (ACLs) to decide if they are authorized to perform a specific action on a resource.
An ACL is a rule that specifies who (a user principal), from where (host), can do what (operation like READ, WRITE), on which resource (topic, group, broker).
Managing ACLs with the CLI
Kafka provides a command-line tool, kafka-acls.sh, to manage ACLs. You can grant or revoke permissions for users on various Kafka resources.
Here are some common commands:
- Grant write access to a topic:
kafka-acls.sh --authorizer-properties authorizer.properties --add --allow-principal User:admin --producer --topic my-secure-topic - Grant read access to a consumer group:
kafka-acls.sh --authorizer-properties authorizer.properties --add --allow-principal User:consumerUser --consumer --group my-group - List all ACLs:
kafka-acls.sh --authorizer-properties authorizer.properties --list --topic my-secure-topic
Security Checkpoint
You've learned about the fundamental security concepts in Kafka. Let's test your understanding!
Which of the following best describes the purpose of Authorization in Kafka?
Secure Streams: A Summary
Great job! You've covered the essentials of Kafka security.
- Authentication verifies who a client is (e.g., via SASL/PLAIN).
- Authorization determines what an authenticated client can do (e.g., via ACLs).
- Implementing these measures protects your data streams from unauthorized access and ensures data integrity.
Securing your Kafka cluster is a critical step for any production deployment!
Часто задаваемые вопросы
Урок «Безопасность: аутентификация и авторизация» бесплатный?
Да — полный текст урока «Безопасность: аутентификация и авторизация» бесплатно доступен здесь в веб-версии. Чтобы практиковать его интерактивно (встроенный редактор кода и ИИ-репетитор 24/7) и разблокировать остальной курс Apache Kafka & Stream Processing Fundamentals, подпишись на CoddyKit PRO. Курс Apache Kafka & Stream Processing Fundamentals содержит 4 уроков всего.
Чему я научусь в уроке «Безопасность: аутентификация и авторизация»?
Реализуйте базовые меры безопасности в Kafka, включая аутентификацию клиентов и авторизацию доступа к данным. Ты практикуешь Apache Kafka & Stream Processing Fundamentals с помощью реального кода, который запускаешь прямо в браузере, и ИИ-репетитор 24/7 отвечает на твои вопросы во время урока.
Нужен ли мне опыт, чтобы начать Apache Kafka & Stream Processing Fundamentals?
Предыдущий опыт не требуется. Apache Kafka & Stream Processing Fundamentals на CoddyKit структурирован для всех уровней — от новичков до продвинутых, поэтому ты можешь начать отсюда или с самого начала и учиться в своем темпе. Это урок 3 из 4.
Сколько времени занимает урок «Безопасность: аутентификация и авторизация»?
Большинство уроков CoddyKit занимают около 5–10 минут. Каждый из них компактный и интерактивный, поэтому ты постоянно делаешь прогресс и продолжаешь с того же места в веб-версии и приложении.
Можно ли писать и запускать код в этом уроке Apache Kafka & Stream Processing Fundamentals?
Да. Каждый урок Apache Kafka & Stream Processing Fundamentals включает встроенный редактор кода, поэтому ты пишешь и запускаешь реальный код прямо в браузере и получаешь моментальную обратную связь от AI — локальная установка не требуется.
Все уроки этого курса
- Инструменты командной строки для Kafka
- Мониторинг Kafka с JMX и инструментами
- Безопасность: аутентификация и авторизация
- Отслеживание и оповещение об отставании потребителей