Airflow, c'est l'infrastructure invisible de la data : personne ne le voit tant que tout marche, et tout le monde le voit quand un pipeline casse. Difficile à juger sur un CV, car « j'ai utilisé Airflow » peut signifier « j'ai lancé un DAG existant » comme « je conçois des orchestrations fiables ». Voici comment y voir clair.
Ce qui distingue un vrai profil Airflow, ce n'est pas de savoir écrire un DAG, mais de penser fiabilité : que se passe-t-il quand une tâche échoue la nuit ? La réponse à cette seule question sépare les profils solides des autres.
Demandez : « À quoi sert Airflow dans une équipe data, avec vos mots ? »
Airflow orchestre des pipelines : il enchaîne des tâches dans le bon ordre, à la bonne heure, et gère ce qui se passe quand l'une d'elles échoue. Ce n'est pas un simple planificateur (cron) : sa valeur est dans la gestion des dépendances et des incidents. Un bon candidat fait cette distinction naturellement.
Le mot magique à écouter : fiabilité (idempotence, reprise, monitoring).
Un data engineer qui a vécu de vraies mises en production parle spontanément de ce qui casse et de comment il l'a évité. C'est ce vécu — pas la connaissance de la syntaxe — qui fait la différence sur ce profil.
Repérables sans connaître Airflow.
Beaucoup de candidats ont « touché » à Airflow sans jamais avoir eu à gérer un incident réel. Ils décrivent l'outil, mais pas la fiabilité. C'est le décalage à repérer.
Signal d'alerte : un candidat qui ne peut pas dire ce qui se passe quand un pipeline échoue la nuit n'a probablement jamais géré Airflow en production — il l'a seulement effleuré.
« Que se passe-t-il quand un de vos pipelines échoue à 3h du matin ? »
C'est la question qui révèle tout. Un vrai profil décrit un système pensé pour l'échec : relances, alertes, reprise propre, données non dupliquées. Un profil faible répond « je regarde le matin » — ce qui montre qu'il n'a jamais conçu une orchestration fiable.
Il y a une limite claire à ce qu'un recruteur non technique peut trancher seul.
Les signaux et la question ci-dessus vous permettent d'écarter les profils qui surjouent et de repérer les bons candidats. Mais confirmer finement un niveau Airflow — surtout sur un poste senior ou un profil rare — demande un regard technique. C'est là qu'un entretien mené par un expert fait la différence.
| Niveau | Maîtrise attendue | Signal GO | NO-GO |
|---|---|---|---|
| Junior | Lance et modifie des DAGs existants | Comprend le rôle d'une orchestration | Confond Airflow et un simple cron |
| Confirmé | Écrit des DAGs, gère dépendances et relances | Parle d'idempotence et de reprise | Ne pense jamais à l'échec d'une tâche |
| Senior | Fiabilité, monitoring, secrets, executors | Décrit un vrai incident et sa gestion | N'a aucun incident réel à raconter |
| Lead | Architecture d'orchestration, standards d'équipe | Définit la stratégie de reprise sur incident | « Je regarde le matin » comme seule réponse |
Data Builder mène l'entretien technique et vous livre un rapport clair et détaillé sous 24h. Premier entretien offert.