Implémenter des producteurs transactionnels
Configurez et utilisez des producteurs transactionnels dans Spring Boot pour garantir qu’un lot de messages est envoyé entièrement ou ne l’est pas du tout.
Implémenter des producteurs transactionnels est une leçon Advanced Spring Boot 4: Event-Driven Architecture (Kafka) gratuite sur CoddyKit. Ceci est la leçon 2 sur 4. Tu peux lire la leçon complète ci-dessous gratuitement — puis la pratiquer en direct dans le navigateur avec un éditeur de code intégré et un tuteur IA 24/7. Elle fait partie du parcours d'apprentissage Advanced Spring Boot 4: Event-Driven Architecture (Kafka), et ta progression se synchronise sur le web et l'application CoddyKit. Le cours Advanced Spring Boot 4: Event-Driven Architecture (Kafka) comprend 4 leçons au total.
Certaines parties de cette leçon n'ont pas encore été traduites et s'affichent en anglais.
Atomic Operations with Kafka
In distributed systems, ensuring that a series of operations either all succeed or all fail (atomicity) is crucial. This is where transactional producers in Kafka come in.
They allow you to send multiple messages to different topics and partitions as a single atomic unit. If any part of the transaction fails, all messages sent within that transaction are rolled back.
Identifying Your Transaction
To use transactional producers, you must configure a unique transactional.id for your producer. This ID is essential for Kafka to guarantee exactly-once semantics and recover transactions across producer restarts.
Think of it as a unique name for your producer's transactional session. Kafka uses it to identify the producer and its ongoing transactions.
Spring Boot Configuration
First, ensure you have the spring-kafka dependency. Then, configure your Kafka broker address and the transactional-id-prefix in application.yml. This prefix will be used to generate unique IDs for each producer instance.
# application.yml
spring:
kafka:
bootstrap-servers: localhost:9092
producer:
# A unique ID prefix for the transactional producer
transactional-id-prefix: my-app-tx-Configuring Transactional Producer
Spring Kafka simplifies transactional producer setup. You need to configure your ProducerFactory to be transactional and then create a KafkaTemplate using it.
Notice acks: all is crucial for transactions, ensuring all in-sync replicas acknowledge the message before it's considered committed.
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.kafka.core.DefaultKafkaProducerFactory;
import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.kafka.core.ProducerFactory;
import java.util.HashMap;
import java.util.Map;
import org.apache.kafka.clients.producer.ProducerConfig;
import org.springframework.beans.factory.annotation.Value;
@Configuration
public class KafkaProducerConfig {
@Value("${spring.kafka.bootstrap-servers}")
private String bootstrapServers;
@Value("${spring.kafka.producer.transactional-id-prefix}")
private String transactionalIdPrefix;
@Bean
public ProducerFactory<String, String> producerFactory() {
Map<String, Object> configProps = new HashMap<>();
configProps.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, bootstrapServers);
configProps.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, org.apache.kafka.common.serialization.StringSerializer.class);
configProps.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, org.apache.kafka.common.serialization.StringSerializer.class);
configProps.put(ProducerConfig.ACKS_CONFIG, "all"); // Essential for transactions
configProps.put(ProducerConfig.RETRIES_CONFIG, 0); // Kafka handles retries internally for transactions
DefaultKafkaProducerFactory<String, String> factory = new DefaultKafkaProducerFactory<>(configProps);
factory.setTransactionIdPrefix(transactionalIdPrefix); // Set the transactional ID prefix
return factory;
}
@Bean
public KafkaTemplate<String, String> kafkaTemplate() {
return new KafkaTemplate<>(producerFactory());
}
}Integrating with Spring Transactions
To integrate Kafka transactions with Spring's declarative transaction management (@Transactional), you need to define a KafkaTransactionManager bean.
This manager coordinates the Kafka producer transactions with other Spring-managed transactions (e.g., database operations), allowing you to achieve atomicity across different resource types.
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.kafka.transaction.KafkaTransactionManager;
import org.springframework.kafka.core.ProducerFactory;
@Configuration
public class KafkaTransactionManagerConfig {
@Bean
public KafkaTransactionManager kafkaTransactionManager(ProducerFactory<String, String> producerFactory) {
return new KafkaTransactionManager(producerFactory);
}
}Sending a Single Transactional Message
Now you can use @Transactional on a service method. Any Kafka messages sent within this method using the configured KafkaTemplate will be part of a single transaction.
If the method completes successfully, the transaction is committed. If an exception occurs, it's rolled back and no messages are sent.
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
@Service
public class TransactionalProducerService {
private final KafkaTemplate<String, String> kafkaTemplate;
@Autowired
public TransactionalProducerService(KafkaTemplate<String, String> kafkaTemplate) {
this.kafkaTemplate = kafkaTemplate;
}
@Transactional
public void sendGreeting(String user) {
String message = "Hello, " + user + "!";
kafkaTemplate.send("greetings-topic", user, message);
System.out.println("Attempted to send: " + message);
}
// Main method for a runnable Spring Boot application
@SpringBootApplication
public static class DemoApplication {
public static void main(String[] args) {
// This would typically be run as a Spring Boot application
// and the service called via a controller or runner.
// For demonstration, we just show the structure.
System.out.println("Run this as a Spring Boot app to use the service.");
// SpringApplication.run(DemoApplication.class, args);
}
}
}Multiple Messages, One Transaction
The real power of transactional producers shines when sending multiple messages. All messages within the @Transactional method are grouped.
If one send fails, all previously sent messages within that transaction are aborted. This ensures data consistency across different topics or partitions.
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;
@Service
public class OrderProcessingService {
private final KafkaTemplate<String, String> kafkaTemplate;
@Autowired
public OrderProcessingService(KafkaTemplate<String, String> kafkaTemplate) {
this.kafkaTemplate = kafkaTemplate;
}
@Transactional
public void processOrder(String orderId, String item) {
// Send order creation event
kafkaTemplate.send("order-created-topic", orderId, "Order " + orderId + " created for " + item);
System.out.println("Sent order creation for: " + orderId);
// Simulate a failure for demonstration
if (orderId.equals("FAIL_ORDER")) {
throw new RuntimeException("Simulated order processing failure!");
}
// Send inventory update event
kafkaTemplate.send("inventory-update-topic", item, "Item " + item + " quantity reduced for order " + orderId);
System.out.println("Sent inventory update for: " + item);
System.out.println("Order " + orderId + " processed transactionally.");
}
// Main method for a runnable Spring Boot application
public static void main(String[] args) {
// This would typically be run as a Spring Boot application
// and the service called via a controller or runner.
System.out.println("Run this as a Spring Boot app to use the service.");
}
}Transaction Rollback Behavior
If an exception is thrown within a @Transactional method, the KafkaTransactionManager will initiate a transaction rollback.
This means any messages sent to Kafka within that transaction will not be visible to consumers. Kafka's transactional capabilities ensure that partial data is never committed, maintaining data integrity.
Why Atomicity Matters
Transactional producers are crucial for maintaining data integrity in complex event-driven workflows. They prevent scenarios where, for example, an order creation event is sent but the corresponding inventory update fails.
This guarantees that your system's state remains consistent, even in the face of transient errors or application crashes during processing.
Transactional Producer Check
Consider a Spring Boot application sending messages to Kafka using KafkaTemplate within a @Transactional method.
If an unchecked exception occurs after sending the first of two messages, what happens?
Recap: Atomic Messaging
We've learned how to implement transactional producers in Spring Boot Kafka. This involves configuring a transactional.id, enabling transactions in ProducerFactory, using KafkaTransactionManager, and marking service methods with @Transactional.
Transactional producers ensure atomicity, meaning a batch of messages either all commit or all roll back, vital for data consistency. Next, we'll explore achieving exactly-once processing semantics by combining transactional producers with idempotent consumers.
Apprends Advanced Spring Boot 4: Event-Driven Architecture (Kafka) avec un tuteur IA — gratuit
Écris et exécute du vrai code dans ton navigateur, obtiens de l'aide instantanée d'un tuteur IA disponible 24h/24, et reprends là où tu t'es arrêté sur le web ou dans l'app.
- Cours
- 12
- Leçons
- 48
Questions Fréquemment Posées
La leçon « Implémenter des producteurs transactionnels » est-elle gratuite ?
Oui — le texte complet de « Implémenter des producteurs transactionnels » est gratuit à lire ici sur le web. Pour la pratiquer de manière interactive (un éditeur de code intégré et un tuteur IA 24/7) et déverrouiller le reste du cours Advanced Spring Boot 4: Event-Driven Architecture (Kafka), passe à CoddyKit PRO. Le cours Advanced Spring Boot 4: Event-Driven Architecture (Kafka) comprend 4 leçons au total.
Qu'est-ce que j'apprendrai dans « Implémenter des producteurs transactionnels » ?
Configurez et utilisez des producteurs transactionnels dans Spring Boot pour garantir qu’un lot de messages est envoyé entièrement ou ne l’est pas du tout. Tu pratiques Advanced Spring Boot 4: Event-Driven Architecture (Kafka) avec du code pratique que tu exécutes directement dans le navigateur, et un tuteur IA 24/7 répond à tes questions au fur et à mesure que tu avances dans la leçon.
Dois-je avoir de l'expérience pour commencer Advanced Spring Boot 4: Event-Driven Architecture (Kafka) ?
Aucune expérience préalable n'est requise. Advanced Spring Boot 4: Event-Driven Architecture (Kafka) sur CoddyKit est structuré pour les débutants jusqu'aux apprenants avancés, donc tu peux commencer ici ou depuis le début et avancer à ton rythme. Ceci est la leçon 2 sur 4.
Combien de temps prend la leçon « Implémenter des producteurs transactionnels » ?
La plupart des leçons CoddyKit prennent environ 5–10 minutes. Chacune est courte et interactive, tu progresses régulièrement et tu repiques exactement où tu t'es arrêté sur le web et l'app.
Peux-tu écrire et exécuter du code dans cette leçon Advanced Spring Boot 4: Event-Driven Architecture (Kafka) ?
Oui. Chaque leçon Advanced Spring Boot 4: Event-Driven Architecture (Kafka) inclut un éditeur de code intégré, tu écris et exécutes du vrai code directement dans ton navigateur et tu reçois des retours IA instantanés — aucune configuration locale requise.
Toutes les leçons de ce cours
- Comprendre les transactions Kafka
- Implémenter des producteurs transactionnels
- Sémantique du traitement exactement une fois
- Le modèle Outbox transactionnel