🚀 Opportunité – Développeur(se) Données / Data Engineer (Azure & Databricks)
Nous sommes à la recherche d’un(e) Développeur(se) Données (Data Engineer) pour contribuer à la conception, au développement et à l’optimisation de plateformes de données modernes supportant des cas d’usage analytiques, d’intelligence artificielle et d’IA générative.
Principales responsabilités
✅ Concevoir, développer et maintenir des pipelines de données robustes et évolutifs.
✅ Intégrer et transformer des données structurées et non structurées provenant de multiples sources.
✅ Développer des flux de traitement en lot et en temps réel pour soutenir les initiatives analytiques et d’intelligence artificielle.
✅ Préparer les jeux de données destinés à l’entraînement, à la validation et à l’inférence des modèles d’IA.
✅ Assurer la qualité, la traçabilité, la sécurité, les tests et l’observabilité des données.
✅ Optimiser les performances, la fiabilité et les coûts des traitements de données.
✅ Collaborer étroitement avec les équipes Data Science, IA, Analytics et MLOps.
✅ Documenter les solutions et promouvoir les bonnes pratiques d’ingénierie des données.
Profil recherché
✔ Excellente maîtrise de Python, SQL, Spark et PySpark.
✔ Expérience significative avec Azure Databricks et les architectures Lakehouse.
✔ Expertise en développement de pipelines ETL/ELT et intégration de données.
✔ Bonne connaissance de Delta Lake, Azure Data Factory et des intégrations API.
✔ Expérience en qualité des données, catalogage, gouvernance et sécurité.
✔ Connaissance des environnements cloud Azure.
✔ Expérience avec Git, Azure DevOps et les pratiques DevOps appliquées aux données.
✔ Capacité à évoluer dans un environnement Agile et collaboratif.
Environnement technologique
- Microsoft Azure
- Azure Databricks
- Python
- SQL
- Spark / PySpark
- Delta Lake
- Azure Data Factory
- Azure DevOps
- Git
- MLflow
- Unity Catalog
- Microsoft Purview
- APIs & Microservices
📍 Mode de travail hybride
🗣️ Français requis
📅 Mandat à long terme dans un environnement innovant axé sur la donnée, l’analytique avancée et l’intelligence artificielle.
📩 Intéressé(e) ? N'hésitez pas à me contacter en privé ou à me faire parvenir votre CV.
#DataEngineer #DataEngineering #Databricks #Azure #PySpark #Spark #Python #SQL #BigData #DataPlatform #Analytics #ArtificialIntelligence #MLOps #Montreal #Quebec #OpenToWork