Data Platform Engineer
VusionGroup SA16 days ago
Paris, FranceSenior
Responsibilities
- Migrer les pipelines d’ingestion et d’ELT vers Databricks Jobs/Workflows, Spark, SQL et dbt.
- Évaluer les architectures existantes et définir des modèles cibles basés sur Delta Lake, Databricks et dbt.
- Créer des blocs de code, conventions, modèles, tests et documents standardisés afin de limiter la dette technique.
- Mettre en place l’observabilité des pipelines, les tableaux de bord Datadog, les alertes, les playbooks et les runbooks pour réduire le MTTR.
- Gérer les catalogues, schémas, tables, autorisations, lignages et masquages de données dans Unity Catalog.
- Définir et surveiller les contrats de données, les SLO, la fraîcheur, la qualité et la dérive des schémas.
- Optimiser les tâches et tables Delta, notamment le partitionnement, Z-Order, OPTIMIZE, l’autoscaling et les coûts d’exécution.
- Collaborer avec les équipes data, infrastructure, software, produit, conseil et analytics du secteur retail.
- Former les équipes à l’interrogation SQL dans Databricks et diffuser les bonnes pratiques de Data Engineering.
Requirements
- 5 à 8 ans d’expérience en Data Engineering ou DataOps avec des livraisons en production.
- Maîtrise de SQL et Spark.
- Expérience pratique de Databricks Jobs/Workflows et Delta, incluant l’optimisation des coûts et performances, l’autoscaling, les instances spot et le tuning.
- Expérience pratique de dbt, notamment les modèles, tests et documents, ou d’autres outils de test.
- Solide compréhension de la gouvernance avec Unity Catalog, notamment RBAC, lignage et données personnelles.
- Expérience des tests automatisés, métriques, alertes, runbooks et pratiques d’observabilité, idéalement avec Datadog.
- Connaissance appréciée de Docker, Kubernetes, Kafka, Event Hubs, Airflow, Prefect et Dagster.
- Expérience appréciée en analyse de données retail : ventes, marges, promotions ou fidélisation.
- Excellentes capacités de collaboration et de communication avec des équipes interfonctionnelles.
Benefits
- Opportunités d’évolution rapide et possibilité de façonner son parcours en France comme à l’international.
- Environnement international présent dans 19 pays et trois continents.
- Culture entrepreneuriale, innovation et collaboration multiculturelle.
- Participation à la transformation numérique et durable du commerce physique.
Tech Stack
Categories
Data Engineering
About VusionGroup SA
VusionGroup SA builds electronic shelf labels and an AIoT/cloud software platform that digitizes pricing, store operations, analytics, and in‑store retail media for physical retailers. The company sells hardware, SaaS, and services to over 350 retail groups worldwide; it was founded in 1992, is headquartered in Nanterre, France, and is publicly traded. Its offerings span ESLs, store IoT connectivity, data-driven merchandising, and local e-commerce enablement.