Data Engineer (H/F)
Descriptif
Véritable architecte des flux de données, le Data Engineer est responsable de la collecte, de la structuration, du traitement et de l’acheminement des données brutes vers les systèmes analytiques. Son rôle est essentiel pour garantir la disponibilité, la qualité et la fiabilité des données utilisées par les analystes, les data scientists et les équipes métiers.
Il conçoit et maintient les pipelines de données, les bases de données et les plateformes de traitement massives (big data). Il est le garant de l’infrastructure data de l’entreprise et permet une exploitation optimale des données à grande échelle.
Les autres intitulés de ce poste
Ingénieur data, Ingénieur big data, DataOps Engineer, Développeur data, Architecte data junior
Principales missions
- Conception et développement de pipelines de traitement de données
- Intégration de données issues de multiples sources (APIs, bases SQL/NoSQL, fichiers, etc.)
- Construction et maintenance de data lakes et data warehouses
- Optimisation des performances des flux de données
- Mise en place de systèmes d’automatisation pour le traitement des données
- Surveillance et sécurisation de l’infrastructure data
- Collaboration avec les data scientists, data analysts et architectes data
- Participation à l’industrialisation des modèles de machine learning
Qualités requises
- Maîtrise des langages de programmation (Python, Java, Scala, SQL)
- Bonne connaissance des environnements cloud (AWS, Azure, GCP)
- Compréhension des bases de données relationnelles et non relationnelles
- Esprit logique, rigoureux et structuré
- Capacité à gérer des systèmes complexes et à résoudre des problèmes techniques
- Sens de l’organisation et travail en équipe agile
- Autonomie et volonté d’apprentissage continu
- Bonne communication pour faire le lien entre technique et métiers
Formation et débouchés
Formation de niveau Bac +5, diplômé(e) d’une École d’Ingénieur, École d’Informatique ou Université avec une spécialisation en data engineering, big data ou systèmes d’information.
Le Data Engineer peut évoluer vers des postes de Lead Data Engineer, Architecte Data, DataOps Manager ou encore Chief Data Officer (CDO).
