Training Apache Kafka voor Python
Verwerk real-time data met Apache Kafka en Python: producers, consumers, schema’s en betrouwbare streams.
Over de training Apache Kafka voor Python
Apache Kafka is een platform voor event streaming: systemen schrijven gebeurtenissen naar topics en andere systemen lezen ze, in hun eigen tempo. In deze training bouw je met Python producers en consumers, leer je hoe partities en consumer groups werken en verwerk je een stroom berichten betrouwbaar, ook als er iets uitvalt.
Wat je leert
- Uitleggen hoe topics, partities, offsets en consumer groups samenhangen
- Producers en consumers schrijven in Python met confluent-kafka
- Berichten serialiseren met JSON en Avro en een schema registry gebruiken
- Kiezen tussen at-least-once en exactly-once verwerking
- Een streamingtoepassing bewaken op lag en doorvoer
Programma
Kafka in de basis
- Events, topics en partities
- Brokers, replicatie en retentie
- Een lokaal cluster starten met Docker
- Topics beheren vanaf de command line
Producers en consumers in Python
- De client confluent-kafka
- Keys, partitionering en volgorde
- Consumer groups en rebalancing
- Offsets committen en opnieuw lezen
Schema’s en betrouwbaarheid
- JSON en Avro met een schema registry
- Acks, retries en idempotente producers
- At-least-once en exactly-once
- Foutafhandeling en dead letter topics
Streams verwerken en bewaken
- Stateful verwerken: vensters en aggregaties
- Kafka Connect voor bronnen en doelen
- Consumer lag en doorvoer meten
- Een pipeline van bron tot database bouwen
Voorkennis
- Je schrijft zelfstandig Python: functies, klassen en packages
- Basiskennis van de command line en Docker is handig
Voor wie
Voor data engineers en backend-ontwikkelaars die real-time data willen verwerken of systemen via events willen koppelen.
Vragen over de training Kafka voor Python
Staat je vraag er niet bij? Bel of mail ons.
Wat is Apache Kafka?
Apache Kafka is een open-source platform voor event streaming. Systemen schrijven gebeurtenissen naar topics, Kafka bewaart ze in volgorde en verdeeld over partities, en andere systemen lezen ze wanneer het hun uitkomt. Daardoor kun je systemen loskoppelen en data in real time verwerken.
Moet ik Java kennen voor deze Kafka-training?
Nee. Alle oefeningen zijn in Python. Je moet wel zelfstandig Python kunnen schrijven; kennis van Java of Scala is niet nodig.
Wat kost de training Apache Kafka voor Python?
De training Apache Kafka voor Python duurt 2 dagen en kost € 1.750 klassikaal of € 1.400 live online, exclusief btw.
Kan ik de training Apache Kafka voor Python in-company volgen?
Ja. Elke training kan klassikaal, live online of in-company voor je eigen team, in het Nederlands of Engels. In-company passen we de casussen aan op jullie eigen data en omgeving.
Verwante trainingen in Data Engineering
Alle 7 trainingenDeze training voor je team?
Vertel kort waar je mee bezig bent. Een van onze engineers neemt contact met je op.
info@codemode.nl · 06 40 85 93 86