note :
taux d'abandon

Formation Apache Airflow

L’objectif de cette formation est de savoir maitriser les principes de l’orchestration de pipelines data avec Apache Airflow. Airflow est une plate-forme de gestion de flux de travail open source initialement créée par Airbnb en 2014.

Dans cette formation, nous verrons les grands principes des orchestrateurs et les bonnes pratiques à adopter pour utiliser AirFlow dans des contextes d’industrialisation de projets data.

Cette formation s’inscrit dans un parcours de Data Engineer ou de Data Scientist.

Intra entreprise HT
9000€
Inter entreprises HT
1500€
Nous contacter
2 jours
7 participants
chez Hymaïa
*finançable par l'OPCO En savoir plus

Objectifs

Vous serez à même d’utiliser AirFlow dans le contexte de vos projets data, et aurez une culture générale affinée autour des principaux orchestrateurs

Public cible

  • Data Engineers
  • Data Ops Engineers
  • ML Engineers
  • Software Engineers

Programme détaillé

Télécharger

Introduction à l’orchestration

  • Qu’est-ce qu’un orchestrateur ?
  • Historique des outils existants
  • Pourquoi Airflow est partout ?

Le vocabulaire Airflow

  • DAG
  • DAG run
  • Tâche

Créer un DAG

  • Les éléments qui composent un DAG
  • Exercices pratiques

Configurer l’orchestration de son DAG

  • La start date
  • Reprise en cas d’erreur
  • Rejeu d’historique
  • Exercices pratiques

Les fonctionnalités de développement avancées

  • Les plugins
  • Architecturer le code de ses DAGs
  • Xcom : la base de données interne d’Airflow
  • Le pooling
  • Exercices pratiques

Aller plus loin !

  • Quand choisir Airflow et comment ?
  • Discussion et échanges sur votre contexte

Formateur(s)

Photos

No items found.

Financer votre formation par un OPCO

En tant qu'organisme certifié Qualopi, les formations que nous vous proposons sont finançables par l'OPCO. Trouvez l'OPCO dont vous dépendez ici
Où nous trouver ?

Ces formations pourrait aussi vous intéressez

a ne pas manquer

Formation IA Act

Nous contacter
4h
2500€HT (Intra uniquement)
en detail
a ne pas manquer

La Fresque de la Data et de l'IA

Nous contacter
4h
2500€HT (intra uniquement)
en detail
a ne pas manquer

Formation Generative AI & LLM

18 et 19 novembre 2024
2 jours
1500€HT / perso ou 9000€HT en intra
en detail

Nous vous accompagnons dans vos projets Data & IA

De la stratégie à la mise en oeuvre en passant par l'acculturation de vos équipes, nous vous aidons à chaque étape dans la réalisation de vos projets. Découvrez nos offres en détail pour trouver la solution qui correspond à vos besoins.

Les prochains événements Hymaïa

LUN 25 NOV.
en savoir plus
Fondation Biermans-Lapôtre, Paris

Forward Data Conference

Our mission is to build a conference that serves as a dynamic knowledge-sharing hub, where every participant can find their place and thrive.
MER. 11 DEC. - 18:30
en savoir plus
chez Hymaïa

Hymanight - La Data 360 : Explorer, Visualiser, Décider

Un événement où la data rencontre l'expertise et la créativité.