Apache Kafka Kurs i Norge

Confluent Apache Kafka er en bedriftsorientert distribuert platform for hendelsesstrøming bygget på Apache Kafka. Den støtter høykapasitets-, feiltolerante datapipelines og sanntidsstrøming av applikasjoner.Denne instruktørledede, live-treningen (online eller på stedet) er rettet mot mellomnivåingeniører og administratorer som ønsker å deploye, konfigurere og optimalisere Confluent Kafka-klustrer i produksjonsmiljøer.Ved slutten av denne treningen vil deltakerne kunne:- Installere, konfigurere og drifte Confluent Kafka-klustrer med flere brokere.- Designe høyt tilgjengelige oppsetninger ved hjelp av Zookeeper og replikeringsteknikker.- Optimalisere ytelse, overvåke metrikker og bruke gjenopprettingsstrategier.- Sikre, skale og integrere Kafka med bedriftsmiljøer.Kursets format- Interaktiv forelesning og diskusjon.- Mange øvelser og praksis.- Håndpålagt implementering i en live-lab-miljø.Muligheter for tilpasning av kurset- For å be om et tilpasset kurs for dette kurset, ta kontakt med oss for å ordne.Module 1: Introduksjon til Confluent Apache Kafka-arkitektur og klusterkonfigurasjon- Hva er Apache Kafka og Confluent-plattformen?- Kafka broker, produsent, konsument og tema grundig- Kafkas rolle i data-strømming og meldingspipelines- Confluent-utvidelser: REST Proxy, Schema Registry, Control Center- Kafka kluster arkitektur: brokere, partisjoner og replikeringModule 2: Konfigurasjon av Zookeeper Quorum- Hva er Zookeeper?- Zookeeper’s rolle i en Kafka-kluster- Størrelsen på Zookeeper quorum- Konfigurasjon av Zookeeper- Implementering av SSH på våre servere- Håndpålagt: Konfigurasjon av Zookeeper (som team og som tjeneste)- Bruk av Zookeeper Command Line Interface (CLI)- Håndpålagt: Oppsetning av Zookeeper quorum- Zookeepers indre filsystem- Ytelsesfaktorer som påvirker Zookeeper- Demo: Verktøy for Zookeeper-administrasjon og ZoonavigatorModule 3: Konfigurasjon av Kafka-kluster- Kafka grunnleggende- Konfigurasjon av Kafka- Håndpålagt: Konfigurasjon av Kafka på en enkelt broker- Håndpålagt: Kjøring av Kafka-kommandoer- Håndpålagt: Oppsetning av Kafka multi-broker (kluster)- Håndpålagt: Testing av Kafka-kluster- Kan jeg koble meg til min Kafka-kluster?- Konfigurasjon av advertised.listeners: nøkkelinnstilling- Konfigurasjon av tema- Oppsett av meldingsinngang og -levering i tema- Håndpålagt: Demonstrering av Kafka-resiliens- Kafka-ytelse: I/O, nettverk, RAM, CPU, OS- Kafka-ytelse: andre faktorer- Håndpålagt: Hvordan endre broker-konfigurasjonerModule 4: Avansert Kafka-konfigurasjon- Konfigurasjon av Landoop Kafka Topics UI, Confluent REST Proxy, Confluent Schema Registry- Sending og mottak av meldinger (CLI, Java, Spring Framework)- Metrikk- og overvåkningsverktøy (Confluent Control Center, Elasticsearch, etc.)- Loggfiler og offset-håndtering- Høyt tilgjengelighet og katastrofeberedskap- Sikring av høy tilgjengelighet med replikering- Ytelsesoptimalisering (produsent/konsument)- Strategier for katastrofeberedskap- Kontroll av feilovergang og gjenoppretting av data- Oppsett av tilkoblinger- Implementering av Kafka Connect- Kafkas sikkerhetsfunksjonerOppsummering og neste trinnConfluent Apache Kafka er en bedriftsorientert distribuert platform for hendelsesstrøming bygget på Apache Kafka. Den støtter høykapasitets-, feiltolerante datapipelines og sanntidsstrøming av applikasjoner.Denne instruktørledede, live-treningen (online eller på stedet) er rettet mot mellomnivåingeniører og administratorer som ønsker å deploye, konfigurere og optimalisere Confluent Kafka-klustrer i produksjonsmiljøer.Ved slutten av denne treningen vil deltakerne kunne:- Installere, konfigurere og drifte Confluent Kafka-klustrer med flere brokere.- Designe høyt tilgjengelige oppsetninger ved hjelp av Zookeeper og replikeringsteknikker.- Optimalisere ytelse, overvåke metrikker og bruke gjenopprettingsstrategier.- Sikre, skale og integrere Kafka med bedriftsmiljøer.Kursets format- Interaktiv forelesning og diskusjon.- Mange øvelser og praksis.- Håndpålagt implementering i en live-lab-miljø.Muligheter for tilpasning av kurset- For å be om et tilpasset kurs for dette kurset, ta kontakt med oss for å ordne.- Erfaring med Linux-baserte systemer og kommandoverktøy i terminalen- Kjennskap til konsepter for distribuert systemer- Forståelse av grunnleggende nettverk og systemkonfigurasjonMålgruppe- DevOps- og SRE-team som administrerer Kafka-deployeringer- Systemadministratorer som arbeider med Confluent og Zookeeper- Kafka-utviklere og arkitekter som er ansvarlige for skalerbare systemer

Confluent Apache Kafka er en fordelt plattform for strømmehendelser designet for datapipelines med høy gjennomstrømning, feiltoleranse og realtid-analytikk.

Denne instruktørledede, live-undervisningen (online eller på stedet) er rettet mot systemadministratorer på mellomnivå og DevOps-profesjonelle som ønsker å installere, konfigurere, overvåke og feilsøke Confluent Apache Kafka-klustrer.

Ved kursets slutt vil deltakerne kunne:

• Forstå komponentene og arkitekturen til Confluent Kafka.
• Installere og administrere Kafka-brokere, Zookeeper-quorums og nøkkel-tjenester.
• Konfigurere avanserte funksjoner inkludert sikkerhet, replikering og ytelsestilpasning.
• Bruk verktøy til å overvåke og vedlikeholde Kafka-klustrer.

Kursform

• Interaktiv forelesning og diskusjon.
• Mange øvelser og praksis.
• Håndholdt implementering i en live-lab-miljø.

Tilpasningsalternativer for kurs

• For å be om en tilpasset opplæring for dette kurset, ta kontakt med oss for å avtale.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot utviklere på middels nivå Java som ønsker å integrere Apache Kafka i applikasjonene deres for pålitelig, skalerbar og høyhastighetsmeldinger.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Forstå arkitekturen og kjernekomponentene til Kafka.
• Sett opp og konfigurer en Kafka-klynge.
• Produser og konsumer meldinger ved å bruke Java.
• Implementer Kafka Streams for sanntids databehandling.
• Sørg for feiltoleranse og skalerbarhet i Kafka-applikasjoner.

Denne instruktørledede, direkteopplæringen i Norge (online eller på stedet) er rettet mot systemadministratorer på mellomnivå som ønsker å utnytte Kafkas meldingskøfunksjoner effektivt.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Forstå Kafkas meldingskø-funksjoner og arkitektur.
• Konfigurer Kafka-emner for scenarier for meldingskø.
• Produser og konsumer meldinger ved hjelp av Kafka.
• Overvåk og administrer Kafka som en meldingskø.

Denne instruktørledede, direkteopplæringen i Norge (online eller på stedet) er rettet mot systemadministratorer på nybegynnernivå til mellomnivå som ønsker å lære hvordan man effektivt administrerer Kafka-emner for effektiv datastrømming og prosessering.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Forstå Kafka-emnets grunnleggende og arkitektur.
• Opprett, konfigurer og administrer Kafka-emner.
• Overvåk Kafka-emner for helse, ytelse og tilgjengelighet.
• Implementer sikkerhetstiltak for Kafka-emner.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot utviklere på middels nivå som ønsker å lære det grunnleggende om Kafka og integrere det med Spring Boot.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Forstå Kafka og dens arkitektur.
• Lær hvordan du installerer, konfigurerer og setter opp et grunnleggende Kafka-miljø.
• Integrer Kafka med Spring Boot.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot utviklere på mellomnivå som ønsker å utvikle big data-applikasjoner med Apache Kafka.

Ved slutten av denne opplæringen vil deltakerne kunne:

Utvikle Kafka-produsenter og -forbrukere til å sende og lese data fra Kafka. Integrer Kafka med eksterne systemer ved hjelp av Kafka Connect. Skriv strømmeapplikasjoner med Kafka Streams & ksqlDB. Integrer en Kafka-klientapplikasjon med Confluent Cloud for skybaserte Kafka-distribusjoner. Få praktisk erfaring gjennom praktiske øvelser og brukssaker i den virkelige verden.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot utviklere som ønsker å integrere Apache Kafka med eksisterende databaser og applikasjoner for prosessering, analyse, etc.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Bruk Kafka Connect til å importere store mengder data fra en database til Kafka-temaer.
• Importere loggdata generert av applikasjonservere til Kafka-temaer.
• Make all samlet data tilgjengelig for strømbehandling.
• Eksportere data fra Kafka-temaer til sekundære systemer for lagring og analyse.

Denne instruktørledede, direkteopplæringen (online eller på stedet) er rettet mot ingeniører som ønsker å bruke Confluent (en distribusjon av Kafka) til å bygge og administrere en sanntidsdatabehandlingsplattform for applikasjonene deres.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Installere og konfigurere Confluent Platform.
• Bruke Confluents verktøy og tjenester for å administrere Kafka mer effektivt.
• Lagre og behandle innkommende strømmedata.
• Optimalisere og administrere Kafka-kluster.
• Sikre data-strømmer.

Kursets format

• Interaktive forelesninger og diskusjoner.
• Mange øvelser og praktiske oppgaver.
• Pratisk implementering i et live-lab-miljø.

Alternativer for kurstilpasning

• Dette kurset er basert på den åpne kildekodeversjonen av Confluent: Confluent Open Source.
• For å be om et tilpasset kurs, kontakt oss for å avtale.

Apache Kafka er en distribuert streamingplattform. Det er de facto en standard for å bygge datarørledninger, og det løser mange forskjellige brukssaker rundt databehandling: det kan brukes som en meldingskø, distribuert logg, strømprosessor, etc.

Vi starter med noen teori bak datapipelines generelt, og fortsetter med grunnleggende konsepter bak Kafka. Vi vil også oppdage viktige komponenter som Kafka Streams og Kafka Connect.

I denne instruktørledede, live-opplæringen i Norge (på stedet eller ekstern), vil deltakerne lære å sette opp og integrere forskjellige Stream Processing rammeverk med eksisterende lagringssystemer for store data og relaterte programvareapplikasjoner og mikrotjenester.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Installer og konfigurer forskjellige Stream Processing rammeverk, for eksempel Spark Streaming og Kafka Streaming.
• Forstå og velg det mest passende rammeverket for jobben.
• Prosess av data kontinuerlig, samtidig og på en rekord-for-post måte.
• Integrer Stream Processing løsninger med eksisterende databaser, datavarehus, datainnsjøer, etc.
• Integrer det mest passende strømbehandlingsbiblioteket med bedriftsapplikasjoner og mikrotjenester.

Dette kurset er for bedriftsarkitekter, utviklere, systemadministratorer og alle som ønsker å forstå og bruke et distribuert meldingssystem med høy gjennomstrømning. Hvis du har mer spesifikke krav (f.eks. Kun systemadministrasjonssiden), kan dette kurset skreddersys for å passe bedre til dine behov.

Denne instruktørledede, direkteopplæringen i Norge (online eller på stedet) er rettet mot systemadministratorer som ønsker å sette opp, distribuere, administrere og optimalisere en Kafka-klynge i bedriftsklasse.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Sett opp og administrer en Kafka-klynge.
• Vurder fordelene og ulempene ved å distribuere Kafka på stedet kontra i skyen.
• Distribuer og overvåk Kafka ved å bruke ulike lokale og skymiljøverktøy.

Denne instruktørledede, direkteopplæringen i Norge (online eller på stedet) er rettet mot dataingeniører, dataforskere og programmerere som ønsker å bruke Apache Kafka-funksjoner i datastrømming med Python.

Ved slutten av denne opplæringen vil deltakerne kunne bruke Apache Kafka til å overvåke og administrere forhold i kontinuerlige datastrømmer ved å bruke Python programmering.

Denne instruktørledede, liveopplæringen i Norge (online eller på sted) er rettet mot softwaretestere som ønsker å implementere nettverksikkerhetstiltak i en Apache Kafka applikasjon.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Installere Apache Kafka på en skybasert server.
• Implementere SSL-kryptering for å forhindre angrep.
• Legge til ACL-autentisering for å spore og kontrollere brukeradgang.
• Sikre at pålitelige klienter har tilgang til Kafka-klustre med SSL og SASL-autentisering.

Kafka Streams er et bibliotek på klientsiden for å bygge applikasjoner og mikroservices hvis data sendes til og fra et Kafka-meldingssystem. Tradisjonelt har Apache Kafka vært avhengig av Apache Spark eller Apache Storm å behandle data mellom meldingsprodusenter og forbrukere. Ved å kalle Kafka Streams API fra en applikasjon, kan data behandles direkte i Kafka, og omgå behovet for å sende dataene til en egen klynge for behandling.

I denne instruktørledede, liveopplæringen, vil deltakerne lære å integrere Kafka Streams i et sett med Java applikasjoner som sender data til og fra Apache Kafka for strømbehandling.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Forstå Kafka Streams funksjoner og fordeler over andre strømbehandlingsrammeverk
• Behandle strømdata direkte innenfor en Kafka-kluster
• Skrive en Java eller Scala applikasjon eller mikrotjeneste som integreres med Kafka og Kafka Streams
• Skrive kortfattet kode som omformer innkommende Kafka-emner til utgående Kafka-emner
• Bygge, pakke og deploye applikasjonen

Publikum

• Utviklere

Kursformat

• Delvis forelesning, delvis diskusjon, øvelser og mye praktisk øvelse

Merknader

• For å be om en tilpasset opplæring for dette kurset, ta kontakt med oss for å avtale

Denne instruktørledede, direkteopplæringen i Norge (online eller på stedet) er rettet mot utviklere som ønsker å implementere Apache Kafka strømbehandling uten å skrive kode.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Installer og konfigurer Confluent KSQL.
• Sett opp en strømbehandlingspipeline ved å bruke bare SQL kommandoer (ingen Java eller Python koding).
• Utfør datafiltrering, transformasjoner, aggregeringer, sammenføyninger, vinduer og økter i SQL.
• Design og distribuer interaktive, kontinuerlige spørringer for streaming av ETL og sanntidsanalyse.

Denne instruktørledede, liveopplæringen i Norge (online eller på stedet) er rettet mot dataforskere som ønsker å bruke SMACK-stakken til å bygge databehandlingsplattformer for big data-løsninger.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Implementer en datapipeline-arkitektur for behandling av big data.
• Utvikle en klyngeinfrastruktur med Apache Mesos og Docker.
• Analyser data med Spark og Scala.
• Administrer ustrukturerte data med Apache Cassandra.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot dataingeniører, dataforskere og programmerere som ønsker å bruke Spark Streaming-funksjoner til å behandle og analysere sanntidsdata.

Ved slutten av denne opplæringen vil deltakerne kunne bruke Spark Streaming til å behandle live datastrømmer for bruk i databaser, filsystemer og live dashboards.

Denne instruktørledede, live-opplæringen i Norge (online eller på stedet) er rettet mot utviklere som ønsker å transformere tradisjonell arkitektur til en svært samtidig mikrotjenestebasert arkitektur ved å bruke Spring Cloud, Kafka, Docker, Kubernetes og Redis.

Ved slutten av denne opplæringen vil deltakerne kunne:

• Sett opp det nødvendige utviklingsmiljøet for å bygge mikrotjenester.
• Design og implementer et svært samtidig mikrotjenesteøkosystem ved å bruke Spring Cloud, Kafka, Redis, Docker og Kubernetes.
• Transform monolittiske og SOA-tjenester til mikrotjenestebasert arkitektur.
• Bruk en DevOps-tilnærming til utvikling, testing og utgivelse av programvare.
• Sikre høy samtidighet blant mikrotjenester i produksjon.
• Overvåk mikrotjenester og implementer gjenopprettingsstrategier.
• Utfør ytelsesjustering.
• Lær om fremtidige trender innen mikrotjenestearkitektur.