< Wróć do szkoleń IT

Apache Airflow

calendar

TERMIN

Ustalamy indywidualnie

clocl

CZAS

16h / 2 dni

money

CENA

Ustalamy indywidualnie

photo

Apache Airflow to zaawansowane narzędziem do planowania i zarządzania przepływem pracy w środowisku big data. Umożliwia tworzenie, monitorowanie i automatyzację procesów biznesowych opartych na cyklicznych i jednorazowych zadań. Airflow pozwala na definiowanie zależności między poszczególnymi zadaniami i automatyczne ich wykonywanie w odpowiedniej kolejności, co zwiększa efektywność i niezawodności procesów biznesowych.

Dla kogo jest to szkolenie?

Szkolenie przeznaczone jest dla:

  • Data Scientist i pracujących z dużą ilością danych

  • DevOpsów

  • programistów zajmujących się infrastrukturą programistyczną

  • programistów mających doświadczenie z językiem Python

pattern

pattern
pattern pattern

Czego nauczysz się na szkoleniu?

  • Instalacji i konfiguracji narzędzia Apache AirFlow.

  • Poznasz architekturę i komponenty wykorzystywane w AirFlow.

  • Nauczysz się tworzyć grafy (DAGi)

  • Zapoznasz się z przekazywaniem danych XCom, branchingiem i organizacją zadań

Program szkolenia

  • Dzień: 1

    Moduł 1  – Wprowadzenie

    • Rys historyczny (Airflow 1.0, Airflow 2.0)
    • Omówienie architektury (komponenty)
    • Podstawowe elementy: DAG, Instancja, Zadanie

    Moduł 2  – Tworzenie grafów (DAGów)

    • Operatory
    • Sensory
    • Hooki
    • Tworzenie połączeń
  • Dzień: 2

    Moduł 3  – Tworzenie grafów (DAGów)

    • XCom – przekazywanie danych
    • Gałęzie – branching
    • Organizacja zadań – subDAG oraz grupy
    • Tworzenie połączeń

    W ramach powyższych elementów dodatkowo będą realizowane:

    • restart DAGów
    • resetowanie konfiguracji
    • opcja „catch”
    • weryfikacja logów

    Opcjonalne moduły do realizacji:

    • budowanie klastrów Airflow (konfiguracja elementów)
    • wykorzystywanie wybranych elementów DAGów
pattern

Trener

Tomasz Stachlewski

CEE Senior Solutions Architecture Manager at Amazon Web Services (AWS)

Od niemal 10 lat wspomaga polskie firmy w wędrówce chmurowej, poprzez prowadzenie dedykowanych warsztatów chmurowych, budowaniu oraz weryfikacji systemów, które mają zostać przeniesione albo zbudowane od podstaw w chmurze AWS. Jedna z nielicznych osób na świecie posiadających wszystkie certyfikacje chmurowe AWS (13) – pozwalające mu pełnić rolę eksperta, jeśli chodzi o tematy związane z chmurą. Wielokrotny prelegent na polskich i międzynarodowych konferencjach, oraz wielki zwolennik podejścia serverless jeśli chodzi o budowanie nowoczesnych systemów i aplikacji chmurowych.

Przemysław Wołosz

Key Account Manager

Telefon

+48 730 830 801

Porozmawiajmy o szkoleniu

Wypełniając formularz zgadzasz się na przetwarzanie Twoich danych w celu udzielenia odpowiedzi na wysłaną przez Ciebie wiadomość
Administratorem danych osobowych jest infoShare Academy sp. z o.o., który dane osobowe przetwarza zgodnie z Klauzulą informacyjną.