Développeur de pipelines de données
Description du métier : Développeur de pipelines de données
Le développeur de pipelines de données construit les flux qui collectent, transforment et acheminent des données entre les sources et les systèmes d’analyse. Il travaille dans les équipes data, les banques, le commerce en ligne et les éditeurs de plateformes de données.
Missions principales : Développer des chaînes de traitement de données par lots ou en temps réel, orchestrer les tâches avec des outils comme Airflow ou Spark, surveiller la qualité, les retards et les erreurs de données, optimiser les performances et les coûts, documenter les flux, assurer la reprise en cas d’incident.
Rigueur, sens de la fiabilité, esprit d’analyse et sens de l’optimisation sont indispensables. Le développeur doit faire circuler les données sans les perdre ni les altérer.
Formation : Un bachelor ou un master en informatique ou en science des données, avec une bonne pratique de Python et de SQL, est généralement exigé.
Sources utiles
- Jobuilder.com – Consulter des offres d’emploi.
- Jobstreaming.ch – Découvrir des opportunités professionnelles.