Nous recherchons un Databricks Engineer pour un client final international. La mission consiste à travailler sur un programme d'agrégation de données de vente B2B construit sur Databricks. L'objectif principal est d'unifier les données CRM provenant de Salesforce, Microsoft Dynamics 365 et Excel/SharePoint dans une plateforme harmonisée. Vous serez responsable de la conception et de la construction de pipelines ETL ainsi que de connecteurs CDC/incrémentaux pour Salesforce et Dynamics 365. Vous mettrez en œuvre des transformations de données de Bronze vers Silver via Delta Lake, développerez des notebooks PySpark et appliquerez des optimisations Delta Lake. De plus, vous serez en charge de la mise en place du monitoring, de l'alerting et de l'orchestration des jobs, tout en documentant l'architecture et le data lineage avec Unity Catalog. La mission est longue et se déroule principalement en remote, avec quelques déplacements à Zurich.
Intervention dans le cadre d'un une migration cloud hybride sur AWS. Le DevOps pilotera l'industrialisation des environnements, la sécurisation des pipelines et l'automatisation de l'infrastructure, en lien direct avec les équipes Dev et Infra. Concevoir et maintenir les pipelines CI/CD (GitHub Actions, GitLab CI, Jenkins) Gérer et optimiser l'infrastructure cloud AWS / Azure (IaC avec Terraform) Orchestrer les conteneurs et déploiements Kubernetes Sécuriser les environnements et appliquer les bonnes pratiques DevSecOps Automatiser les processus de monitoring, alerting et gestion des incidents Accompagner les équipes de développement dans l'adoption des pratiques DevOps
