Ingénieur BIG DATA SENIOR - Femme/Homme H/F
Rattaché(e) au Teamlead, vous vous concentrerez sur la garantie d'une livraison évolutive, reproductible et de qualité industrielle des entrées et sorties du modèle. - Mettre en oeuvre l'ingestion (par batch/en continu), les étapes ELT/ETL et les workflows de publication des données.- Gérer les formats scientifiques (netCDF, GRIB2) et le stockage en colonnes (Parquet) ; optimiser les E/S et les algorithmes.- Concevoir un stockage avec des modèles de cohérence finale (publications atomiques, manifestes, chemins versionnés) et un catalogue de métadonnées.- Partitionner et paralléliser les charges de travail pour le calcul distribué ; compacter les petits fichiers et optimiser le rapport coût/performance.- Créer et exécuter des services conteneurisés et des workflows orchestrés ; garantir l'observabilité, les réessais, l'idempotence et les runbooks.- Collaborer avec des scientifiques pour définir des modèles de données et des règles de validation. Votre profil: Formations : Bac + 5 en Informatique, Mathématique ou Data Scientist Expérience : Des postes d'expérimentés sont à pourvoir. Les compétences techniques attendues sont : - ETL- Data lake + Meta Données- Python (xarray, netCDF4, pyarrow), PySpark or Dask- S3-compatible object storage; Parquet format- PostgreSQL / PostGIS- Kubernetes + Docker for deployment- AWS (S3, EKS, EC2) or equivalent cloud; Terraform for IaC Compétences comportementales : - Curiosité- Faculté de communication - Esprit d'équipe- Capacité d'analyse et de résolution de problème- Aptitude managériale pour les profils expérimentés Candidate First est particulièrement engagée en faveur de la Diversité, de l'Égalité des chances, et de l'Inclusion.Partenaire exclusif de Women First, 1er vivier de talents féminins en France, nous nous engageons à présenter des shortlists équilibrées de femmes et d'hommes.
Emplois Recommandés
Agent(e) de restauration rapide - Alternance
Vous souhaitez apprendre un métier concret, au cœur d'un service rapide et efficace ? L'Institut de Métiers Network de Balma recherche un(e) agent(e) de restauration rapide en alternance. Vous inté…
Alternance : Conseiller en clientèle (H/F)
Ipac Bachelor Factory Toulouse recherche un conseiller clientèle (H/F) pour le compte d’une entreprise partenaire spécialisée dans la cosmétique , dans le cadre d’un contrat d’apprentissage à p…
Mécanicien(ne)s Structure Aéronefs CDI AIRBUS TRAM 2026 (H/F)
Description du poste Airbus recherche ses futur(e)s Mécanicien(ne)s Structure (H/F) pour rejoindre les équipes Commercial Aircraft à Toulouse. Vous interviendrez sur l’un de nos emblématiques p…
Auxiliaire de Crèche en alternance F/H
L'école Walter Learning conçoit, produit et dispense des formations en ligne à destination des professionnels et des personnes qui cherchent à construire leur avenir professionnel. …
Ingénieur AIT Mécanique Spatial (H/F)
Sophia transforme depuis 2005 les idées en réalité industrielle. La culture Sophia labellisée Great Place To Work libère l'énergie et accélère l'innovation. Nous sommes multi métiers, multi secteurs…
Cours particuliers en PHYSIQUE SUPERIEUR en classe de SUPERIEUR à TOULOUSE (31400)
Expert du soutien scolaire en France, Anacours recrute un enseignant en PHYSIQUE SUPERIEUR pour donner des cours particuliers à domicile à TOULOUSE (31400) pour un élève en classe de SUPERIEUR. Vo…
Lead Data-Engineer (IT)
Durée de mission : 6 mois Localisation : Centre-ville de Toulouse Télétravail : 2 jours par semaine Démarrage : ASAP (enjeu de délai fort lié à la migration) Contexte de la mission : Dans le ca…
Collaborateur agence d'assurances (H/F)
Manpower ? Cabinet de recrutement de Toulouse accompagne aujourd'hui l'un de ses clients, un Agent Général d'Assurances reconnu, dans le recrutement de son futur : - Collaborateur d'Agence (H/F) …
Alternance : Commercial - Bac + 4 - 5 H/F
Dans le cadre de votre MBA Management Commerce et Entrepreneuriat , une structure du secteur du service et du bien-être recherche un Alternant Commercial pour renforcer son équipe d'accueil, souten…
CONSEILLER IMMOBILIER - CONSEILLER COMMERCIAL - AGENT IMMOBILIER H/F
L’entreprise développe une stratégie avancée d’investissement immobilier locatif à haut rendement, dédiée à la construction d’un capital retraite durable, à horizon 10, 15 ou 20 ans. Nous recherch…