Introduzione ad Apache Beam
Intro¶
Scopriamo assieme a Stefano Bosisio Apache Beam per creare data pipelines e orchestrare i propri task di Data Engineering.
Programma della serata:
- Introduzione generale ad apache beam
- Creare una pipeline con beam ed eseguirla localmente
- Introduzione a dataflow
- Esempio pratico di pipeline con windowing da eseguire su dataflow
- I flex templates su dataflow
- Un esempio pratico di scraping con apache beam
Materiale¶
