D
Devoteam
Data Engineer

Data Engineer

On-siteSeniorData Engineerposted 7mo ago
✦Role summaryAI-generated

This role demands deep expertise in designing scalable Databricks-based architectures for analytics and AI pipelines, with a focus on optimizing performance, cost-efficiency, and production-grade reliability. The candidate will bridge cloud engineering and data operations to build automated, high-throughput systems while ensuring data consistency and observability.

Skills required

About this role

Expert de l’écosystème Databricks, vous concevez et industrialisez des architectures de données scalables pour soutenir les projets Analytics et IA. À l’intersection du Software Engineering et du Cloud, vous transformez des flux complexes en plateformes performantes, automatisées et prêtes pour l'échelle.

Missions détaillées

  • Conception et développement de pipelines ETL/ELT complexes, en batch et en streaming, sur l'écosystème Databricks / Cloud

  • Tuning des clusters, partitionnement des données et optimisation des requêtes pour garantir la scalabilité et maîtriser la facture

  • Industrialisation des déploiements, orchestration des jobs et mise en place de tests de qualité automatisés

  • Monitoring des flux en production, gestion du lignage des données et garantie de la cohérence technique entre les sources et les cibles.

Qualifications

  • Maîtrise avancée de SQL et Python, une maitrise de Scala est un plus
  • Expérience approfondie avec au moins une plateforme cloud (AWS, Azure, GCP) et sur Databricks
  • Maitrise des frameworks de traitement de données distribuées (Spark, PySpark)
  • Maîtrise du cycle de vie logiciel (Git, CI/CD via GitHub Actions/GitLab CI) et de la conteneurisation (Docker, K8s)
  • Expérience avec l'IaC (Terraform)

Profil

  • Issu(e) d'une école d'ingénieur ou équivalent avec minimum 4 ans d'expérience en Data Engineering dont au moins 2 ans dans un écosystème Databricks
  • Excellent relationnel et capacité à travailler en équipe
  • Sens prononcé du service et engagement dans vos activités
  • Aptitude à résoudre des problèmes complexes
  • Rigueur et souci du détail

Additional Information

Le Groupe Devoteam œuvre pour l'égalité des chances, pour la promotion de ses collaboratrices et de ses collaborateurs au mérite et lutte activement contre toute forme de discrimination. Nous sommes persuadés que la diversité contribue à la créativité, au dynamisme et à l'excellence de notre organisation.
Tous nos postes sont ouverts aux personnes en situation de handicap.

Apply on Devoteam →Opens in new tab
score your resume against this role

Similar open roles

C
NEW

Engineering Manager, Data Platform

Codecov·San Francisco, California
On-siteSeniorData Engineer
$220k – $400k USD
today
S
NEW

Data Engineer

Sralab·Chicago, IL
On-siteMidData Engineer
$71k – $125k USD
today
M
NEW

Lead Data Engineer – Data Products, GWAM Asia

Manulife·Hong Kong
On-siteSeniorData Engineer
today
H
NEW

Senior Data Architect

Hitachi·Ho Chi Minh City, Ho Chi Minh, Vietnam
On-siteSeniorData Engineer
today
D
NEW

Data Engineer

Dentsuaegis·Ho Chi Minh City
On-siteSeniorData Engineer
today
PG
NEW

Data Engineer Trainee

Publicis Groupe·Buenos Aires, Argentina
On-siteJuniorData Engineer
yesterday
Apply on Devoteam →