Data Engineer

🚀 Freelance recherché : Data Engineer / Data Architect – Île-de-France Dans le cadre d’un programme data à fort enjeu, nous recherchons un Data Engineer / Data Architect freelance confirmé afin de participer à la conception et à l’industrialisation de solutions data dans un environnement Big Data / Lakehouse. 📍 Localisation : Île-de-France 🏢 2 jours de présentiel par semaine 📅 Mission longue 🔎 Responsabilités : • Concevoir et mettre en place des pipelines de données scalables • Implémenter des flux batch, streaming et ingestion via API • Organiser les transformations de données selon le modèle Medallion (Bronze / Silver / Gold) • Développer et fiabiliser les pipelines avec DBT, Spark et Iceberg • Participer à l’évolution et à l’optimisation de l’architecture Lakehouse • Déployer et opérer les pipelines dans un environnement Cloud (AWS) • Piloter les workflows ETL / ELT avec Airflow • Mettre en place l’Infrastructure as Code via Terraform • Exécuter les traitements dans des environnements conteneurisés (Docker / Kubernetes) • Assurer la fiabilité, la supervision et le monitoring des traitements data • Définir et appliquer les règles de qualité des données (tests, validation, contrôles automatisés) • Contribuer à la documentation technique et aux bonnes pratiques data • Veiller à la conformité des flux de données, notamment RGPD 🧠 Profil recherché : • Minimum 8 ans d’expérience en Data Engineering • Excellente maîtrise de Spark et Python • Expertise confirmée sur AWS, DBT, Iceberg et Terraform • Bonne connaissance des services AWS (Glue, EMR, S3…) • Connaissance de Trino / Starburst appréciée • Capacité à accompagner et faire monter en compétence des profils juniors • Autonomie, rigueur et sens de l’amélioration continue 🔑 Compétences clés : AWS | Big Data | Python | Spark 📩 Freelances intéressés ? Contactez-moi en message privé ou par email : [Upgrade to PRO to see contact] #freelance #dataengineer #dataarchitect #bigdata #aws #spark #python #lakehouse #datajobs #freelancejobs #techjobs #iledefrance