Airflow. Monitorowanie przep - Helion

ebook
Autor: Piotr ChudzikISBN: 978-83-289-3387-3
stron: 168, Format: ebook
Księgarnia: Helion
Cena książki: 59,00 zł
Książka będzie dostępna od września 2025
Wszystkie dane pod pe
Zobacz także:
- Tabele i wykresy przestawne dla ka 199,00 zł, (69,65 zł -65%)
- Data Science w Pythonie. Kurs video. Przetwarzanie i analiza danych 149,00 zł, (67,05 zł -55%)
- Excel 2013. Kurs video. Poziom drugi. Przetwarzanie i analiza danych 79,00 zł, (35,55 zł -55%)
- Power Automate. Kurs video. Automatyzacja proces 109,00 zł, (54,50 zł -50%)
- Statystyka. Kurs video. Przewodnik dla student 129,00 zł, (64,50 zł -50%)
Spis treści
Airflow. Monitorowanie przepływu danych eBook -- spis treści
Od autora
Wprowadzenie
Rozdział 1. DAG i zadania
- Pierwszy DAG
- BashOperator
- Skrypty powłoki (sh)
- Kolejność wykonywania poleceń (graf)
- Podejście bitowe (rekomendowane)
- Podejście funkcyjne
- Przykładowa implementacja
- Operatory Pythona
- PythonOperator
- Skrypty i moduły
- PythonVirtualenvOperator
- ExternalPythonOperator
- Konfiguracja i harmonogram DAG-a
- default_args
- Dokumentacja
- Podstawowy harmonogram zadań (scheduler)
- catchup i indywidualny start/end
- Historia wykonań
Rozdział 2. Połączenia, HTTP, sensory
- Połączenia
- Operator i sensor HTTP
- FileSensor
- BashSensor
- PythonSensor
- Sterowanie zadaniami
- Operatory sterujące
Rozdział 3. Reguły wykonywania zadania
- all_success
- all_failed
- all_done
- one_failed
- one_success
- none_failed
- none_skipped
- none_failed_min_one_success
- Przykładowa implementacja
Rozdział 4. Przekazywanie informacji
- Szablon Jinja
- XCom
- Historia XCom
- Variable
- DAG Config oraz obiekt Param
- Opcja do modyfikacji daty logicznej
Rozdział 5. Zadania oparte na SQL-u
- Instalacja rozszerzeń
- SQLExecuteQueryOperator
- SQLColumnCheckOperator/SQLTableCheckOperator
- SQLCheckOperator/SQLValueCheckOperator
- SQLIntervalCheckOperator/SQLThresholdCheckOperator
- BranchSQLOperator
- SQLSensor
Rozdział 6. Hooki i pozostałe operatory
- Hooki
- TriggerDagRunOperator
- ShortCircuitOperator
Rozdział 7. Dataset i backfill
- Dataset jako harmonogram
- Backfill
Rozdział 8. Bezpieczeństwo i administracja
- fernet key
- Rotacja kluczy
- Użytkownicy i uprawnienia
Rozdział 9. Przykłady rozszerzeń (providers)
- Docker
- SFTP
- MongoDB
Rozdział 10. Symulacja środowiska HA
- Uruchomienie klastra
- Pool i kolejka
Rozdział 11. Airflow CLI
- airflow db
- airflow dags
- airflow tasks
- airflow users
- airflow roles
- airflow variables
- airflow connections
- airflow info/version/fernet