DataOps / Data Engineer - Databricks

ACTIVUS GROUP
Toulouse

Contexte de la mission Dans le cadre du développement et de l'exploitation d'une plateforme de traitement et d'analyse de données, nous recherchons un DataOps / Data Engineer. La plateforme repose sur une architecture hybride comprenant :

  • un environnement de développement on-premise dédié à l'exploration et à l'expérimentation des données
  • un environnement de production Cloud pour l'exécution et la supervision des traitements
  • une application web client permettant l'exploitation des résultats
Le consultant interviendra sur les activités d'exploitation, d'industrialisation et d'optimisation des pipelines de données ainsi que sur le support au déploiement des algorithmes en production. Missions principales Exploitation et maintien en conditions opérationnelles
  • Assurer le MCO de l'environnement de développement
  • Assurer le monitoring et la supervision de l'environnement de production
  • Garantir la disponibilité et la performance des services de la plateforme
Data engineering
  • Concevoir et mettre en place des pipelines de données
  • Participer à l'industrialisation des traitements de données
  • Optimiser les performances des traitements et algorithmes
Déploiement et optimisation des algorithmes
  • Accompagner le déploiement des algorithmes en production
  • Optimiser les traitements distribués (notamment avec Spark)
  • Contribuer à la maîtrise des coûts de calcul
Industrialisation et amélioration continue
  • Améliorer les processus d'intégration des livrables dans la plateforme
  • Mettre en place des mécanismes de versioning et de configuration
  • Participer à l'amélioration continue des pratiques DataOps / DevOps
Environnement technique Data Python pandas Apache Spark via Azure Databricks SQL Ops & orchestration Docker (Docker Swarm) Ansible GitHub Actions Terraform Apache Airflow Infrastructure Red Hat Enterprise Linux Ubuntu Expérience en Data Engineering / DataOps Bonne maîtrise des environnements data distribués et cloud Capacité à intervenir sur des sujets à la fois data et infrastructure Expérience des environnements CI/CD et automatisation Compétences appréciées Azure Data Factory Connaissances en FinOps (optimisation des coûts cloud) Notions de gouvernance de la donnée Connaissance du secteur aéronautique Qualités attendues Autonomie Rigueur opérationnelle Esprit d'analyse et de résolution de problèmes Forte appétence pour l'amélioration continue et les pratiques DevOps

Publié le 2026-03-17

Emplois Recommandés

Ingénieur Validation des Procédés de Nettoyage (Industrie Pharmaceutique)

EFOR GROUP
Toulouse

Missions Principales : - Piloter la validation des procédés de nettoyage des équipements de production, en conformité avec les exigences réglementaires (BPF, FDA, EMA…) - Rédiger, réviser et appro…

Voir les Détails
Publié le 2026-03-06

Agent logistique H/F

TRESCAL
Toulouse

Quels challenges allez-vous relever avec nous ? L'Agent Logistique alterne entre travail en agence et livraison chez le client. Le périmètre géographique dans lequel l'Agent Logistique opère ses liv…

Voir les Détails
Publié le 2026-03-09

Ingénieur qualité produit H/F - TOULOUSE (31)

Hedon Group
Toulouse

&##128373;️ In génieur qualité produit H/F &##128467;️ Poste à pourvoir ASAP &##128205; CDI à Toulouse (31)  Pourquoi devenir hédoniste ?  L’ H édonisme: c’est être heureux de se lever …

Voir les Détails
Publié le 2026-01-24

Manoeuvre

CRIT TOULOUSE Gros oeuvre & TP
Toulouse

A propos de CRIT TOULOUSE Gros oeuvre & TP: Besoin de conseils pour explorer de nouvelles opportunités ? Faites confiance à Crit ! Nous sommes bien plus qu'une agence d'intérim : toujours à vos …

Voir les Détails
Publié le 2026-03-06

Ingenieur travaux DTGP H/F

Forums Talents Handicap
Toulouse

Poste ouvert aux personnes en situation de handicap. Rejoignez un acteur majeur de la transition énergétique. Dalkia, filiale du groupe EDF, propose à ses clients, Collectivités et Entreprises, des s…

Voir les Détails
Publié le 2026-03-14

Chef d'équipe logistique (H/F)

Gojob
Toulouse

Description de l'offre Nous recherchons pour notre client, un centre logistique de tri de colis, un Chef d'équipe logistique (H/F). Votre mission est essentielle pour que les marchandises soient …

Voir les Détails
Publié le 2026-02-28

Audioprothésiste D.E. Toulouse

Emplois Audioprothésistes
Toulouse

Offre d’emploi : Audioprothésiste (H/F) – CDI ou Prestation – Toulouse  Nous recherchons 1 à 2 audioprothésistes pour rejoindre nos centres situés sur Toulouse Centre  même.  Les conditions…

Voir les Détails
Publié le 2025-12-03

Stage Community Manager (H/F)

Stage
Toulouse

Description de l'offre Retour Stage Community Manager (H/F) ·  V-LOC ·  Toulouse, France ·  08 mars, 2026 79,710 Description Qui sommes-nous ? Chez V-Loc , on ne se content…

Voir les Détails
Publié le 2026-03-09

Opérateur d’intégration mécanique sur satellites (H/F)

Groupe Piment
Toulouse

Nous recherchons pour l'un de nos clients spécialisé dans le secteur de l'aéronautique, Opérateur d'intégration mécanique sur satellites (H/F) Vous intégrez une équipe de l'atelier d'Assemblage, Inté…

Voir les Détails
Publié le 2026-03-06

Technical Bid Manager (F/H) / Resp Technique des Offres (F/H)

Michael Page
Toulouse

Le poste de Technical Bid Manager (F/H) / Resp Technique des Offres (F/H) En tant que TECHNICAL BID MANAGER (F/H), vous aurez les responsabilités suivantes : * Piloter les réponses aux appels …

Voir les Détails
Publié le 2026-01-31