19/11/2023 –, A203
Découverte d'Apache Airflow 2 pour automatiser des tâches et réaliser un pipeline de production.
Partons à la découverte d'Apache Airflow 2 avec un cas réel et un retour d'expérience.
Après une brève introduction, nous examinerons la situation d'une chaîne de traitement de données complète. Puis nous verrons pas à pas comment transformer l'enchainement d'étapes manuelles en un flux totalement automatisé et monitoré en écrivant des scripts Python pour Apache Airflow.
Enfin, un retour d'expérience apportera quelques conseils pour démarrer.
Ingénieur logiciel depuis 2012 et passionné du libre.