Data Engineer
This role focuses on designing scalable data pipelines and modern architectures on GCP, with a strong emphasis on Kafka-based streaming and Java development. You’ll optimize BigQuery datasets, ensure data consistency, and implement cost-performance strategies for batch and real-time workflows.
Skills required
About this role
Au sein de l’équipe Data, vous intervenez sur la conception, le développement et l’industrialisation de pipelines de données batch et temps réel.
Vous contribuez à la mise en place d’architectures data modernes sur GCP ainsi qu’au développement de flux streaming robustes basés sur Kafka et l’écosystème Java.
🔹Data Warehouse & BigQuery
- Concevoir et maintenir des datasets dans BigQuery
- Développer des requêtes SQL optimisées (partitionnement, clustering)
- Mettre en place des stratégies d’optimisation des coûts et performances
- Concevoir des modèles analytiques (schéma en étoile, data marts)
- Garantir la qualité et la cohérence des données
🔹Concevoir et développer des pipelines ELT/ETL (batch & streaming)
- Modéliser les données (modèles analytiques, data warehouse)
- Optimiser les requêtes et la performance des traitements
- Mettre en place des flux temps réel via Kafka / PubSub
- Participer à la définition des architectures data (scalabilité, résilience)
🔹 Développement & Streaming
- Développer des services et APIs en Java (Spring Boot) et/ou Scala
- Implémenter des traitements streaming avec Kafka / Kafka Streams
- Développer et maintenir les transformations via DBT (Data Build Tool)
- Contribuer aux architectures microservices orientées data
🔹 Industrialisation & Exploitation
- Orchestrer les workflows avec Airflow / Cloud Composer
- Automatiser les déploiements via CI/CD (GitLab CI)
- Assurer le versioning avec Git
🔹 Excellente communication écrite et orale : Aptitude à produire des livrables et des reportings
de haute qualité.
🔹Capacité de prise de recul : Aptitude à évaluer les problématiques avec objectivité et à
proposer des solutions d'amélioration.
🔹Esprit d'équipe : Capacité à collaborer efficacement avec les membres de l'équipe po
atteindre des objectifs communs.
🔹Maîtrise des concepts d’Agilité (Scrum, Sprint Planning, Backlog...).
🔹Capacité à s'adapter rapidement aux nouvelles technologies et aux changements de priorités.
Qualifications
● Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation
en informatique, ou justifiant d'une expérience significative équivalent
● Expérience de 4 ans et plus en GCP
