Corso di formazione Distributed Messaging with Apache Kafka

Apache Samza è un framework computazionale asincrono quasi in tempo reale open source per l'elaborazione dei flussi. Utilizza Apache Kafka per la messaggistica e Apache Hadoop YARN per la tolleranza agli errori, l'isolamento del processore, la sicurezza e la gestione delle risorse.

Questa formazione dal vivo con istruttore introduce i principi alla base dei sistemi di messaggistica e dell'elaborazione del flusso distribuito, mentre accompagna i partecipanti attraverso la creazione di un progetto di esempio basato su Samza e l'esecuzione del lavoro.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Usa Samza per semplificare il codice necessario per produrre e consumare messaggi.
• Disaccoppiare la gestione dei messaggi da un'applicazione.
• Usa Samza per implementare il calcolo asincrono quasi in tempo reale.
• Utilizzare l'elaborazione del flusso per fornire un livello superiore di astrazione sui sistemi di messaggistica.

Pubblico

• Sviluppatori

Formato del corso

• Parte lezione, parte discussione, esercitazioni e esercitazioni pratiche

Kafka Streams è una libreria lato client per la creazione di applicazioni e microservizi i cui dati vengono trasmessi da e verso un sistema di messaggistica Kafka. Tradizionalmente, Apache Kafka ha fatto affidamento su Apache Spark o Apache Storm per elaborare i dati tra produttori di messaggi e consumatori. Chiamando l'API Kafka Streams dall'interno di un'applicazione, i dati possono essere elaborati direttamente all'interno di Kafka, evitando la necessità di inviare i dati a un cluster separato per l'elaborazione.

In questo corso di formazione dal vivo con istruttore, i partecipanti impareranno come integrare Kafka Streams in una serie di applicazioni Java di esempio che trasmettono dati da e verso Apache Kafka per l'elaborazione in streaming.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Comprendi le funzionalità e i vantaggi di Kafka Streams rispetto ad altri framework di elaborazione dei flussi
• Elaborare i dati del flusso direttamente all'interno di un cluster Kafka
• Scrivi un'applicazione o un microservizio Java o Scala che si integri con Kafka e Kafka Streams
• Scrivi un codice conciso che trasforma gli argomenti di Kafka di input in argomenti di Kafka di output
• Compilare, impacchettare e distribuire l'applicazione

Pubblico

• Sviluppatori

Formato del corso

• Parte lezione, parte discussione, esercitazioni e esercitazioni pratiche

Gli appunti

• Per richiedere una formazione personalizzata per questo corso, ti preghiamo di contattarci per organizzare

In questo corso di formazione dal vivo con istruttore in Italia (in loco o in remoto), i partecipanti impareranno come impostare e integrare diversi Stream Processing framework con i sistemi di archiviazione dei big data esistenti e le relative applicazioni software e microservizi.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Installare e configurare diversi framework Stream Processing, ad esempio Spark Streaming e Kafka Streaming.
• Comprendere e selezionare il framework più appropriato per il lavoro.
• Elaborazione dei dati in modo continuo, simultaneo e record per record.
• Integrare Stream Processing le soluzioni con database, data warehouse, data lake, ecc. esistenti.
• Integra la libreria di elaborazione dei flussi più appropriata con le applicazioni e i microservizi aziendali.

questo istruttore, Live Training (on-site o remote) è rivolto a ingegneri che desiderano utilizzare Confluent (una distribuzione di Kafka) per costruire e gestire una piattaforma di elaborazione dati in tempo reale per le loro applicazioni.

entro la fine di questa formazione, i partecipanti saranno in grado di:

• installare e configurare la piattaforma Confluent.
• utilizzare gli strumenti di gestione confluenti & #39; s e servizi per eseguire Kafka più facilmente.
• Archivia ed elabora i dati del flusso in ingresso.
• ottimizza e Gestisci i cluster Kafka.
• flussi di dati protetti.

formato del corso

• conferenza interattiva e discussione.
• un sacco di esercizi e di pratica.
implementazione hands-on
• in un ambiente Live-Lab.

corso opzioni di personalizzazione

• questo corso si basa sulla versione open source di Confluent: Confluent open source.
• per richiedere un addestramento su misura per questo corso, seli metta in contatto con prego per organizzare.

Apache Kafka è una piattaforma di streaming distribuita. È di fatto uno standard per la costruzione di pipeline di dati e risolve molti casi d'uso diversi relativi all'elaborazione dei dati: può essere utilizzato come coda di messaggi, registro distribuito, processore di flusso, ecc.

Inizieremo con una teoria alla base delle pipeline di dati in generale, quindi proseguiremo con concetti fondamentali alla base di Kafka. Scopriremo anche componenti importanti come Kafka Streams e Kafka Connect.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto agli sviluppatori che desiderano trasformare l'architettura tradizionale in un'architettura basata su microservizi altamente simultanei utilizzando Spring Cloud, Kafka, Docker, Kubernetes e Redis.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Configurare l'ambiente di sviluppo necessario per la creazione di microservizi.
• Progetta e implementa un ecosistema di microservizi altamente simultanei utilizzando Spring Cloud, Kafka, Redis, Docker e Kubernetes.
• Trasforma i servizi monolitici e SOA in un'architettura basata su microservizi.
• Adotta un approccio DevOps per lo sviluppo, il test e il rilascio del software.
• Garantire un'elevata concorrenza tra i microservizi in produzione.
• Monitora i microservizi e implementa strategie di ripristino.
• Eseguire la regolazione delle prestazioni.
• Scopri le tendenze future nell'architettura dei microservizi.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto agli sviluppatori che desiderano integrarsi Apache Kafka con database e applicazioni esistenti per l'elaborazione, l'analisi, ecc.

Al termine di questa formazione, i partecipanti saranno in grado di:

Utilizzare Kafka
• Connect per inserire grandi quantità di dati da un database in argomenti Kafka.
• Inserire i dati di log generati da un server applicazioni negli argomenti Kafka.
• Rendere disponibili tutti i dati raccolti per l'elaborazione del flusso.
• Esporta i dati dagli argomenti di Kafka in sistemi secondari per l'archiviazione e l'analisi.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto agli sviluppatori che desiderano implementare l'elaborazione di flussi Apache Kafka senza scrivere codice.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Installare e configurare Confluent KSQL.
• Configurare una pipeline di elaborazione dei flussi usando solo comandi SQL (nessuna codifica Java o Python).
• Esegui il filtraggio dei dati, le trasformazioni, le aggregazioni, i join, il windowing e la sessionizzazione interamente in SQL.
• Progetta e distribuisci query interattive e continue per lo streaming ETL e l'analisi in tempo reale.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto agli amministratori di sistema che desiderano configurare, distribuire, gestire e ottimizzare un cluster Kafka di livello aziendale.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Configurare e amministrare un cluster Kafka.
• Valuta i vantaggi e gli svantaggi dell'implementazione di Kafka on-premise rispetto al cloud.
• Distribuisci e monitora Kafka utilizzando vari strumenti on-premise e in ambiente cloud.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto ai tester di software che desiderano implementare misure di sicurezza di rete in un'applicazione Apache Kafka.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Distribuisci Apache Kafka su un server basato su cloud.
• Implementa la crittografia SSL per prevenire gli attacchi.
• Aggiungere l'autenticazione ACL per tenere traccia e controllare l'accesso degli utenti.
• Assicurati che i client credibili abbiano accesso ai cluster Kafka con l'autenticazione SSL e SASL.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto ai data scientist che desiderano utilizzare lo stack SMACK per creare piattaforme di elaborazione dati per soluzioni di big data.

Al termine di questa formazione, i partecipanti saranno in grado di:

• Implementare un'architettura di pipeline di dati per l'elaborazione dei big data.
• Sviluppa un'infrastruttura cluster con Apache Mesos e Docker.
• Analizza i dati con Spark e Scala.
• Gestisci i dati non strutturati con Apache Cassandra.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto a ingegneri dei dati, data scientist e programmatori che desiderano utilizzare le funzionalità di Apache Kafka nello streaming dei dati con Python.

Alla fine di questa formazione, i partecipanti saranno in grado di utilizzare Apache Kafka per monitorare e gestire le condizioni in flussi di dati continui utilizzando la programmazione Python.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto a ingegneri dei dati, data scientist e programmatori che desiderano utilizzare Spark Streaming funzionalità nell'elaborazione e nell'analisi dei dati in tempo reale.

Al termine di questa formazione, i partecipanti saranno in grado di utilizzare Spark Streaming per elaborare flussi di dati in tempo reale da utilizzare in database, file system e dashboard in tempo reale.

Questa formazione dal vivo con istruttore in Italia (online o in loco) è rivolta a sviluppatori di livello intermedio che desiderano sviluppare applicazioni big data con Apache Kafka.

Al termine di questa formazione, i partecipanti saranno in grado di:

Sviluppare produttori e consumatori di Kafka per inviare e leggere i dati da Kafka. Integra Kafka con sistemi esterni utilizzando Kafka Connect. Scrivi applicazioni di streaming con Kafka Streams e ksqlDB. Integra un'applicazione client Kafka con Confluent Cloud per distribuzioni Kafka basate su cloud. Acquisisci esperienza pratica attraverso esercizi pratici e casi d'uso reali.

Questo corso di formazione dal vivo con istruttore in Italia (online o in loco) è rivolto a sviluppatori di livello intermedio che desiderano apprendere i fondamenti di Kafka e integrarlo con Spring Boot.

Al termine di questa formazione, i partecipanti saranno in grado di:

Comprendere Kafka e la sua architettura. Informazioni su come installare, configurare e configurare un ambiente Kafka di base. Integrare Kafka con Spring Boot.