Data Engineer Sénior (Data Platform)
This role focuses on designing scalable data architectures and maintaining high-performance batch/streaming pipelines for real-time and analytical use cases in a cloud-centric environment. The candidate will collaborate with cross-functional teams to ensure robust, efficient data solutions while leveraging technologies like BigQuery and Apache Spark.
Skills required
About this role
Vous aurez comme objectif de concevoir, développer et maintenir des solutions de traitement de données à grande échelle au sein de la Plateforme Data, afin de soutenir les usages analytiques, opérationnels et temps réel dans une architecture data-centric..
Au sein des équipes Plateforme Data, le/la consultant(e) aura pour responsabilités :
- Conception, développement et maintenance de solutions de traitement de données à grande échelle
- Mise en œuvre de pipelines data batch et streaming
- Utilisation de technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark
- Collaboration étroite avec les équipes de développement et de production
- Garantie de la qualité, de la performance et de la robustesse des solutions déployées
Qualifications
Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d'une expérience significative équivalente
Expérience : Plus de 6 / 7 ans d’expérience confirmée en Scala / Java et Data Engineering.
Une expérience dans le retail ou la grande distribution est un plus.
Compétences requises :
Techniques :
- Scala et/ou Java
- Programmation fonctionnelle
- Apache Kafka / Kafka Streams
- Apache Spark
- BigQuery & SQL avancé
- GCP ou AWS (Cloud Storage, BigQuery, Dataproc, Kubernetes)
- CI/CD : GitLab CI/CD, Docker Compose
- Linux & ligne de commande
- Architecture microservices
- Tests unitaires et d’intégration
- Spring Boot
Méthodologies :
- DevOps
- Agile Scrum
Soft skills :
- Excellente communication écrite et orale
- Capacité à produire des livrables et reportings de qualité
- Esprit d’analyse et d’amélioration continue
- Capacité de prise de recul
- Esprit d’équipe et collaboration transverse
Additional Information
Looking forward to hearing from you !
Similar open roles
