+48 22 203 56 00 biuro@sages.pl
Szkolenie dostępne na zamówienie

Szkolenie: Przetwarzanie strumieni danych w środowiskach Big Data

Szkolenie z przetwarzania strumieni danych Big Data uczy analizy i implementacji rozwiązań w czasie rzeczywistym z wykorzystaniem narzędzi takich jak Kafka, Spark Structured Streaming i Flink, przygotowując do pracy z nowoczesnymi architekturami danych

  • Trenerzy praktycy
  • Kameralne grupy

Czas trwania szkolenia:3 dni (24h)

Poziom zaawansowania:

Kod kursu:BIGDATA/STREAM

big-datadata-streamingstream-processingprzetwarzanie-strumieniowe

Szkolenie na zamówienie

  • Dostosowany program
  • Indywidualna wycena
  • Dowolny termin
Zapytanie o szkolenie

Przetwarzanie strumieni danych w środowiskach Big Data

Cele szkolenia

  • Szkolenie przygotowuje do samodzielnego projektowania i wdrażania procesów przetwarzania strumieni danych w środowiskach Big Data

  • Szkolenie uczy wykorzystywania narzędzi takich jak Kafka, Spark Structured Streaming i Flink do analizy i przetwarzania danych w czasie rzeczywistym

  • Szkolenie omawia kluczowe mechanizmy, architektury oraz dobre praktyki związane z przetwarzaniem strumieniowym, umożliwiając efektywne rozwiązywanie problemów biznesowych

Dla kogo?

  • Programiści i inżynierowie danych rozpoczynający pracę z przetwarzaniem strumieniowym w środowiskach Big Data

  • Twórcy rozwiązań Big Data posiadający podstawową znajomość Javy, Pythona oraz narzędzi Hadoop i Spark

  • Specjaliści IT odpowiedzialni za wdrażanie i utrzymanie systemów analizy danych w czasie rzeczywistym

Efekty kształcenia

  • Uczestnik analizuje architektury przetwarzania strumieni danych w środowiskach Big Data

  • Uczestnik projektuje procesy przetwarzania danych w czasie rzeczywistym

  • Uczestnik wdraża rozwiązania z użyciem narzędzi Kafka, Spark i Flink

  • Uczestnik rozróżnia mechanizmy okien, wyzwalaczy i obsługi zdarzeń opóźnionych

  • Uczestnik monitoruje i diagnozuje procesy strumieniowe pod kątem awarii

  • Uczestnik ocenia wydajność i niezawodność systemów strumieniowych

Wymagania

W cenie otrzymasz:

  • Materiały szkoleniowe

  • Certyfikat ukończenia szkolenia

  • W przypadku szkolenia w trybie stacjonarnym zapewnimy Ci również lunch oraz sprzęt niezbędny do nauki

Program szkolenia

Pobierz program w PDF

Wprowadzenie do przetwarzania strumieni danych

  • Cele

  • Przetwarzanie wsadowe, mikrowsadowe i strumieniowe

  • Przetwarzanie stanowe i bezstanowe

  • Znacznik czasowe

  • Okna

  • Typy dostępnych operacji

  • Porządek danych, dane opóźnione, dane spóźnione

  • Obsługa awarii

  • Complex Event Processing

  • API wysokopoziomowe

Kafka jako broker wiadomości

  • Wprowadzenie do systemów wymiany wiadomości

  • Czym jest Kafka

  • Architektura

  • Temat (topic)

  • Konsumenci

  • Administracja

  • API producentów i konsumentów

Spark Structured Streaming

  • Wprowadzenie

  • Podstawy - struktura i logika programu

  • Typy obsługi tabel wynikowych

  • Obsługa znaczników czasowych

  • Szczegóły API (źródła, transformacje, ujścia, uruchamianie)

  • Obsługa zdarzeń opóźnionych

Kafka Streams

  • Wprowadzenie

  • Podstawowe pojęcia

  • Strumienie a tabele

  • Obsługa znaczników czasowych

  • Kluczowe operacje

  • Zapytania interaktywne

  • Przykładowa prosta aplikacja

  • Kafka Streams DSL - szczegóły API

  • Przykładowa złożona aplikacja

Wprowadzenie do Apache Flink

  • Wprowadzenie

  • Architektura

  • Uruchomienie klastra

  • Podstawy - struktura i logika programu

  • Podstawy DataStream API

  • Flink w akcji

  • Obsługa znaczników czasowych

  • Okna

  • Wyzwalacze

  • Konektory

  • Podsumowanie

Autorem szkolenia jest Krzysztof Jankiewicz

Konsultant IT i wykładowca akademicki. Specjalista w zakresie ogólnie rozumianego przetwarzania danych. Począwszy od relacyjnych systemów baz danych, poprzez architekturę, utrzymanie i wykorzystywanie hurtowni danych, bazy danych NoSQL, systemy danych przestrzennych, po narzędzia i platformy Big Data. Od samego początku pracy zawodowej stara się jako konsultant znajdować czas na kontakty przemysłem, gdzie swoją wiedzę może konfrontować i rozwijać w oparciu o rzeczywiste przypadki. Począwszy od…

Wybrane opinie

Przeczytaj pozytywne opinie pochodzące z ankiet satysfakcji z naszych szkoleń wypełnianych wyłącznie przez ich uczestników po realizacji usługi

4.8
Ikona podpowiedziŚrednia ocen Sages w serwisie Google Ocena pochodzi ze średniej ocen Sages w serwisie Google i nie jest weryfikowana

6.03.2026

Uczestnik szkolenia “Bezpieczny kod w oparciu o wytyczne MISRA C”

Rafał Brzozowski, CORAB S.A.

Bardzo dużo przydatnych informacji, poprowadzone z sprawnie i dobrze wytłumaczone. Maksymalnie dużo informacji w przeciągu tych 16 godzin szkolenia.

Więcej opinii

Podobne szkolenia

Zaawansowane przetwarzanie strumieni danych w Apache Flink

Liczba dni: 3
3100 PLN

Szkolenie z Apache Flink to praktyczny kurs Big Data, który uczy zaawansowanego przetwarzania strumieni danych, analizy w czasie rzeczywistym, projektowania rozwiązań streamingowych oraz wykorzystania Java, Python i SQL w środowiskach produkcyjnych

apache-flinkprzetwarzanie-strumieniowestream-processingbig-data

Big Data i platforma Hadoop - wprowadzenie

Liczba dni: 2
2150 PLN

Szkolenie Big Data i platforma Hadoop to praktyczny kurs, który wprowadza w analizę dużych zbiorów danych z wykorzystaniem Hadoop, HDFS, YARN, MapReduce i Hive, ucząc efektywnego przetwarzania, przechowywania i analizy danych w środowiskach rozproszonych

apache-hadoopekosystem-hadoopprzetwarzanie-danychbig-data

Przetwarzanie strumieni danych w Apache Spark

Liczba dni: 1
1300 PLN

Szkolenie z przetwarzania strumieni danych w Apache Spark uczy analizy i przetwarzania danych w czasie rzeczywistym, omawia architekturę Spark Structured Streaming, prezentuje praktyczne zastosowania, optymalizację oraz integrację z narzędziami Big Data

spark-streamingstream-processingapache-sparkbig-data