Senior Data Engineer - Delta Lake & dbt (Freelance possible)
Get alerts for roles like this
More Senior Data Engineer - Delta Lake & dbt (Freelance possible) roles in Belgium — straight to your inbox. No account needed.
Applying to this role? Tailor your résumé to this job description in one click, then download it clean — no watermark, no subscription.
Job Description
Dans le cadre d’un programme de plateforme d’échange de données, vous contribuez à la construction d’une plateforme de données on-premise destinée à un environnement public à fortes exigences en matière de sécurité, de gouvernance et de souveraineté des données.
Vous collaborez avec différents profils techniques, notamment en architecture de données, architecture de solutions et BI, afin de mettre en place des flux fiables et exploitables de bout en bout.
Vos missions principales Ingestion & pipelines de données Concevoir et déployer des pipelines d’ingestion à partir de sources hétérogènes : fichiers, APIs et bases de données relationnelles. Mettre en œuvre des flux d’ingestion incrémentale, batch et streaming.
Garantir la fiabilité, l’idempotence et la traçabilité de chaque pipeline. Intervenir sur les problématiques de data acquisition (ETL, ELT, CDC) dans un contexte multi-sources.
Transformation & couche sémantique Développer les modèles de transformation sur les couches Bronze, Silver et Gold dans une architecture de type Medallion/Lakehouse. Appliquer les bonnes pratiques d’historisation des données, telles que SCD2, upsert et append-only.
Développer les exports vers Delta Lake et contribuer à la structuration du datalake. Transactions ACID & gestion des données Gérer et maintenir les tables Delta Lake. Assurer la cohérence transactionnelle des données dans un environnement multi-domaines.
Contribuer aux aspects de data architecture liés à la modélisation, à la structuration et à l’exposition des données. Orchestration & exploitation Implémenter et maintenir les assets à orchestrer. Superviser les exécutions, traiter les erreurs et automatiser les alertes.
Travailler avec un orchestrateur de données tel que Dagster, Airflow ou équivalent. Évoluer dans un environnement Linux/OpenShift, avec une aisance attendue sur PowerShell dans un environnement de développement Windows. Gouvernance & lignage Alimenter la plateforme en métadonnées techniques et métier. Maint
Required Skills
Prepare to Win This Role
Everything you need to ace the interview and negotiate top-of-band compensation.