Kursplan
Introduksjon
Oversikt over Spark Streaming Funksjoner og arkitektur
- Støttede datakilder Kjerne-APIer
Forberede miljøet
- Avhengigheter Spark og strømmekontekst Koble til Kafka
Behandler meldinger
- Parsing av innkommende meldinger som JSON ETL-prosesser Starte strømmekonteksten
Utføre en Windowed Stream Processing
- Lysbildeintervall Konfigurasjon for levering av sjekkpunkt Lansering av miljøet
Prototyping av behandlingskoden
- Koble til et Kafka-emne Henter JSON fra datakilde ved hjelp av Paw Variations og tilleggsbehandling
Streaming av koden
- Jobbkontrollvariabler Definere verdier som samsvarer med funksjoner og betingelser
Innhenting av strømutgang
- Teller Kafka-utdata (matchet og ikke-matchet)
Feilsøking
Oppsummering og konklusjon
Krav
- Erfaring med Python og Apache Kafka
- Kjennskap til strømbehandlingsplattformer
Publikum
- Dataingeniører
- Dataforskere
- Programmerere
Testimonials (5)
Det faktum å ha mer praktiske øvelser som bruker mer lignende data til det vi bruker i våre prosjekter (satellittbilder i rasterformat)
Matthieu - CS Group
Kurs - Scaling Data Analysis with Python and Dask
Machine Translated
Very good preparation and expertise of a trainer, perfect communication in English. The course was practical (exercises + sharing examples of use cases)
Monika - Procter & Gamble Polska Sp. z o.o.
Kurs - Developing APIs with Python and FastAPI
It was a though course as we had to cover a lot in a short time frame. Our trainer knew a lot about the subject and delivered the content to address our requirements. It was lots of content to learn but our trainer was helpful and encouraging. He answered all our questions with good detail and we feel that we learned a lot. Exercises were well prepared and tasks were tailored accordingly to our needs. I enjoyed this course
Bozena Stansfield - New College Durham
Kurs - Build REST APIs with Python and Flask
Trainer develops training based on participant's pace
Farris Chua
Kurs - Data Analysis in Python using Pandas and Numpy
As I was the only participant the training could be adapted to my needs.