Senior Data Engineer - Palantir Foundry & AWS (H/F)
Contexte Dans le cadre d'un programme data stratégique pour un grand compte industriel international, nous recherchons un(e) Senior Data Engineer pour concevoir, industrialiser et maintenir des pipelines de données de bout en bout entre un environnement cloud AWS et une plateforme analytique basée sur Palantir Foundry. Le poste s'inscrit dans une équipe produit data (data engineers, data scientists, business analysts, product owner) travaillant en mode agile sur des cas d'usage opérationnels à fort volume : données de production, de maintenance, de capteurs (IoT) et de supply chain. Missions principales
- Concevoir et développer des pipelines d'ingestion et de transformation de données (batch et quasi temps réel) depuis AWS et des systèmes sources (ERP, bases relationnelles, API, fichiers, flux) vers Palantir Foundry.
- Développer des transformations en PySpark / Python / SQL dans les Code Repositories Foundry et via Pipeline Builder, en privilégiant les builds incrémentaux.
- Modéliser et maintenir l'Ontologie Foundry (object types, link types, actions, propriétés) pour exposer des données fiables aux applications métier.
- Mettre en place les connexions sources via Data Connection (agents, connecteurs S3, JDBC, REST) et les échanges bidirectionnels Foundry ↔ AWS.
- Garantir la qualité et la fiabilité des données : data expectations, health checks, monitoring des schedules, alerting, gestion des incidents.
- Optimiser la performance et les coûts des traitements Spark (partitionnement, gestion du skew, profils de calcul).
- Industrialiser les déploiements : branches et revues de code, CI/CD, tests unitaires et de données, Infrastructure as Code côté AWS.
- Appliquer les règles de sécurité et de gouvernance : gestion des accès, markings, lignage des données, conformité RGPD.
- Documenter les pipelines et accompagner les équipes métier et les profils plus juniors (revues de code, bonnes pratiques).
- Bac+5 (école d'ingénieur ou université) en informatique, data ou équivalent.
- 5 ans minimum d'expérience en data engineering, dont au moins 2 ans sur Palantir Foundry en contexte de production.
- Solide expérience sur AWS (idéalement certifié AWS Data Engineer - Associate ou Solutions Architect).
- Maîtrise de Spark et de l'optimisation de traitements sur de gros volumes.
- Bonne compréhension de la modélisation de données (dimensionnelle, orientée objet / ontologie).
- Expérience des pratiques DevOps / DataOps : tests, CI/CD, monitoring.
- Anglais professionnel courant (équipes et documentation internationales).
- Expérience sur des données industrielles : maintenance, fiabilité, IoT / capteurs, supply chain, qualité.
- Certification Palantir Foundry (Data Engineer / Application Developer).
- Expérience de flux streaming et d'architectures event-driven.
- Connaissance de Databricks ou Snowflake (contextes multi-plateformes).
- Habitude des environnements soumis à de fortes contraintes de sécurité et de confidentialité.
- Autonomie, rigueur et sens de la qualité de la donnée.
- Capacité à dialoguer avec les métiers et à traduire un besoin en solution data.
- Esprit d'équipe, pédagogie et goût pour le partage de bonnes pratiques.
Emplois Recommandés
STAGE - Ingénieur Développement d'émulateurs - GNSS - F/H
Lieu : Toulouse, France Construisons ensemble un avenir de confiance Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique…
Développeur C# .NET - Environnement Industriel Aéronautique (H/F)
Description de l'entreprise ALTEN est un leader mondial de l’ingénierie et du conseil en technologies, accompagnant ses clients dans leurs projets d’innovation et de transformation digitale. Avec…
Consultant PMO REACH & Conformité Réglementaire H/F
Description de l'entreprise Leader de l’Ingénierie et des IT Services, présent dans plus de 30 pays, le groupe ALTEN accompagne la stratégie de développement de ses clients dans les domaines de l…
Technicien Conception Mécanique -F/H
Le poste : Dans le cadre de projets aéronautiques, AMETRA Engineering recherche un Technicien Conception Mécanique H/F pour intervenir au sein d'équipes dédiées à l'intégration mécanique. Vous p…
Technicien Production Électronique - 2367 - CDI
Salaire: 30-35k€ (Annuel) Technicien Production Électronique H/F Type de contrat CDI Localisation Toulouse Référence 2367 Contact Vous voulez appliquer vos compétences techniques dans un …
Chargé de recrutement F/H
A propos de Interaction Recrutement Interne: Intégrer le Groupe Interaction, c'est rejoindre un acteur reconnu de l'emploi depuis plus de 30 ans et s'engager dans une aventure humaine porteuse de sen…
Manager en architecture et applications logicielles des systèmes d’information (SI) en alternance H/F
Etre manager en architecture et applications logicielles des systèmes d’information (SI) c’est devenir un professionnel clé dans le domaine de l'informatique. Le poste proposé CESI recrute …
Enquêteur "statistique"
Description entreprise et missions du poste Le Service Régional de l’Information Statistique Économique et Territoriale (SRISET) de la DRAAF Occitanie recherche des enquêteurs statistiques pour …
Responsable Procédés Micro électronique SPACE-F/H
Lieu : Toulouse, France Construisons ensemble un avenir de confiance Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique…
Alternant RETRAITE - H/F
Allianz est un leader du domaine de l’assurance fort d’une expérience longue, et qui protège maintenant 88 millions de clients particuliers et professionnels, grâce à ses 140 000 collaborateurs. C…