Description de Poste – Ingénieur de données
📌 Intitulé du poste : Data Engineer
📌 Lieu : [À préciser]
📌 Type de contrat : [CDI, CDD, Freelance, etc.]
📌 Rattachement hiérarchique : Chief Data Officer (CDO) / Directeur IT
📌 Objectif du poste : Concevoir, développer et maintenir l'architecture des pipelines de données afin d'assurer la collecte, le stockage et la transformation des données utilisées par les Data Scientists et Analystes.
Missions principales
- Concevoir et optimiser des pipelines de données robustes et évolutifs.
- Développer et gérer des bases de données et des entrepôts de données (Data Warehouses, Data Lakes).
- Intégrer et nettoyer les données issues de différentes sources (API, bases SQL/NoSQL, fichiers logs, etc.).
- Assurer la qualité, la sécurité et la gouvernance des données.
- Automatiser les processus d'ingestion et de transformation des données.
- Collaborer avec les équipes Data Science et BI pour fournir des données exploitables.
- Optimiser les performances des infrastructures Big Data et Cloud.
- Assurer une veille technologique sur les outils et solutions en Data Engineering.
Compétences requises
✅ Techniques :
- Maîtrise des langages de programmation (Python, Java, Scala, SQL).
- Expérience avec les bases de données SQL (PostgreSQL, MySQL) et NoSQL (MongoDB, Cassandra).
- Connaissance des plateformes Cloud (AWS, Azure, Google Cloud).
- Expertise en frameworks Big Data (Apache Spark, Hadoop, Kafka).
- Outils ETL (Talend, Airflow, dbt).
- Notions en CI/CD et conteneurisation (Docker, Kubernetes).
✅ Comportementales :
- Capacité à résoudre des problèmes complexes.
- Rigueur et sens de l'organisation.
- Bon relationnel et esprit collaboratif.
- Capacité à travailler sur plusieurs projets en parallèle.
Profil recherché
- Bac+5 en Informatique, Data Engineering, ou Sciences des Données.
- Expérience de 2 à 5 ans en Data Engineering.
- Bonne compréhension des environnements Cloud et Big Data.
Fiche de Fonction – Data Engineer
📌 Intitulé de la fonction : Data Engineer
📌 Rattachement hiérarchique : Chief Data Officer / Direction IT
📌 Objectif de la fonction : Assurer la gestion et la structuration des données pour permettre leur exploitation par les équipes Data Science et BI.
Principales missions
- Concevoir et développer des architectures de gestion de données.
- Mettre en place des pipelines de traitement et d'intégration de données.
- Gérer la scalabilité et la performance des infrastructures Data.
- Assurer la conformité des données avec les réglementations (RGPD, sécurité).
- Collaborer avec les équipes métier pour répondre à leurs besoins en données.
Positionnement dans l'organisation
- Interaction avec les Data Scientists, Data Analysts et DevOps.
- Peut évoluer vers un poste de Lead Data Engineer ou Architecte Data.
Interactions internes et externes
- Internes : Équipes IT, BI, Data Science.
- Externes : Fournisseurs Cloud, partenaires technologiques.
Évolution possible
- Ingénieur principal des données
- Architecte de données
- Directeur des données (CDO)
🔹 Différence clé :
- La description de poste est spécifique à une personne et ses missions.
- La fiche de fonction est plus générique et décrit le rôle du Data Engineer dans l'entreprise.
Aucun commentaire:
Enregistrer un commentaire