Data Engineer CR 7

À propos du poste

Nous recherchons un Data Engineer expérimenté, analytique et orienté résultats pour concevoir, développer et maintenir l’infrastructure de données de l’entreprise. Vous serez chargé de créer des pipelines de données robustes, d’optimiser les processus ETL/ELT et d’assurer la disponibilité et la qualité des données pour les équipes métier.

Missions principales

• Concevoir, développer et maintenir des pipelines de données scalables et performants.
• Construire et optimiser les processus ETL/ELT pour intégrer des sources multiples.
• Déployer et administrer des entrepôts de données (Data Warehouse) et des Data Lakes.
• Assurer la qualité, l’intégrité et la disponibilité des données.
• Optimiser les requêtes et les flux de données afin d’améliorer les performances.
• Collaborer avec les analystes, scientifiques des données et développeurs pour répondre aux besoins d’information.
• Mettre en place des processus de monitoring, de validation et de récupération des données.
• Automatiser les tâches de gestion et de traitement des données et documenter les architectures.

Profil recherché

• Expérience confirmée en tant que Data Engineer ou poste similaire.
• Capacité à travailler de façon autonome et en équipe multidisciplinaire.
• Excellentes compétences analytiques et résolution de problèmes.

Compétences requises

• Maîtrise du SQL et des bases de données relationnelles et NoSQL.
• Développement de processus ETL/ELT et de pipelines de données.
• Programmation en Python, Java ou Scala.
• Utilisation d’Apache Spark, Hadoop ou technologies équivalentes.
• Expérience avec les plateformes cloud AWS, Google Cloud Platform ou Microsoft Azure.
• Orchestration avec Apache Airflow.
• Gestion de versions avec Git.
• Connaissance des services BigQuery, Redshift, Snowflake, Azure Synapse.
• Familiarité avec le streaming via Apache Kafka.