Consultant(e) Senior AI Engineer / Architecte IA on-premise (H/F)

Hedon
Toulouse

Le poste :

Join the team IA
Tu es passionné(e) par l'IA et les LLM, et tu veux les faire tourner là où se trouvent les données : chez le client, sans cloud public ? Tu souhaites construire de A à Z une plateforme d'IA souveraine, sécurisée et simple à opérer ?
Notre client est un industriel qui conçoit et fabrique des machines spéciales. Pour garder la maîtrise de ses données industrielles (plans SolidWorks, historiques SAV, ERP), il a fait le choix d'une IA hébergée en local et vient de valider l'achat d'un serveur GPU dédié (4× NVIDIA RTX Pro 6000 Blackwell 96 Go, AMD EPYC 32 cœurs).
Une petite équipe interne (chef de projet, développeur, infra/réseaux) a déjà mené plusieurs POC : assistant de diagnostic SAV, recherche d'affaires similaires, fine-tuning et base vectorielle. Elle cherche maintenant un expert pour construire la plateforme, l'exploiter sur site et passer à l'échelle sur une dizaine de cas d'usage. Tout tourne sur l'infrastructure du client, y compris sans accès Internet.

Tes missions seront de :

- Auditer et cadrer : revue des POC existants, priorisation des cas d'usage (SAV, commerce, bureau d'études SolidWorks, production) et dimensionnement du serveur.
- Construire le socle on-premise : installation et durcissement de l'OS, drivers NVIDIA/CUDA, orchestration de conteneurs avec GPU, partage des GPU entre usages.
- Mettre en place la plateforme IA : service des modèles LLM et embeddings, RAG, base vectorielle, graphe de connaissances, passerelle d'accès unique aux modèles.
- Déployer la landing zone et le MLOps : CI/CD sur GitLab auto-hébergé, registre d'images et de modèles en interne, pipelines de données et d'entraînement continu, infrastructure as code.
- Intégrer les données : ERP (NAV, en refonte), SolidWorks, outils SAV, données hébergées sur VPS et serveurs de stockage.
- Assurer la sécurité et l'exploitation : SSO et habilitations, traçabilité des réponses, gestion des secrets, supervision GPU, sauvegarde et plan de reprise (serveur unique).
- Mener un premier projet R&D : industrialisation de l'assistant SAV et cadrage de l'OCR des archives papier (30 ans de bons d'intervention).
- Transférer les compétences : documentation, formation et accompagnement de l'équipe interne vers l'autonomie.

Profil :

Tu as 5 ans ou plus en data/IA, dont au moins 2 ans sur des LLM en production, avec une vraie expérience de l'infrastructure on-premise (pas uniquement des services managés cloud).

Infrastructure on-premise : administration Linux (Ubuntu / RHEL), réseau, stockage ; drivers NVIDIA, CUDA, partage GPU (MIG, time-slicing) ; Kubernetes on-premise (k3s, RKE2 ou équivalent), NVIDIA GPU Operator ; Ansible, Terraform, Helm, GitOps (Argo CD / Flux) ; environnements isolés ou sans Internet (Harbor, miroirs de modèles et de paquets) ; stockage objet S3 on-premise (MinIO, Ceph).
IA et LLM : serving avec vLLM, TGI, Triton ou Ollama (multi-GPU, quantization) ; passerelle d'accès aux modèles (LiteLLM ou équivalent) ; RAG avec LangChain ou LlamaIndex et évaluation de la qualité des réponses ; bases vectorielles (Qdrant, Milvus, pgvector) ; fine-tuning Hugging Face (Transformers, PEFT/LoRA) et préparation de datasets.
MLOps et données : GitLab CI, MLflow ou équivalent ; pipelines de données (Airflow, Dagster ou Prefect) ; intégration par API d'ERP et d'applications métier.
Sécurité et exploitation : SSO / RBAC (Keycloak, LDAP/AD), gestion des secrets (Vault) ; supervision (Prometheus, Grafana, DCGM exporter) ; sauvegarde et reprise (Velero, restic) ; journalisation et traçabilité des requêtes et réponses IA.

Savoir-être : tu as une posture de conseil, le goût du transfert de compétences et du pragmatisme : des choix adaptés à une petite équipe.
Tu maîtrises le français couramment (indispensable).
Un plus : graphes de connaissances (Neo4j), OCR et extraction documentaire (Docling, modèles vision-langage), données CAO / SolidWorks (API, nomenclatures), ERP Microsoft Dynamics NAV / Business Central, expérience dans l'industrie manufacturière et notions de vision industrielle, connaissance d'un cloud privé (OpenStack, Proxmox) ou souverain (SecNumCloud).

A propos de nous :

Satellites, fusées, avions, véhicules de défense, transports de nouvelle génération : nos équipes travaillent sur les projets qui font rêver les ingénieurs. Spécialisés dans l'industrie, nous réunissons deux expertises : l'ingénierie et l'intelligence artificielle.
Né en 2020, Hedon fait aujourd'hui partie d'un groupe de plus de 260 personnes. Une croissance rapide, portée par des talents qui veulent aller loin, et qui en ont les moyens chez nous.
Publié le 2026-11-10

Emplois Recommandés

Architecte Solution Manager IS-IT H/F

Thales
Toulouse

Lieu : Toulouse, France Construisons ensemble un avenir de confiance Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d’activité : Défense & Sécurité, Aéronautiq…

Voir les Détails
Publié le 2026-11-05

Responsable de maintenance CVC (H/F)

asap.work
Toulouse

A propos de asap.work: Salut, nous c'est asap.work, l'agence d'intérim et cabinet de recrutement qui vient casser les codes et remettre l'humain au coeur de notre métier. Nous rejoindre c'est profite…

Voir les Détails
Publié le 2026-10-29

Gestionnaire de Paie (H/F)

ALTINEO
Toulouse

A propos de ALTINEO: Altineo est un cabinet de recrutement spécialisé dans l'accompagnement de profils en Expertise Comptable, Audit, Social et Juridique. Notre objectif est de vous accompagner dans …

Voir les Détails
Publié le 2026-10-26

Comptable clients et trésorerie H/F

Michael Page
Toulouse

Le poste de Comptable clients et trésorerie H/F En tant que Comptable Clients et Trésorerie H/F, vos missions principales seront les suivantes * Assurer le suivi de la comptabilité clients : …

Voir les Détails
Publié le 2026-10-24

Metteur au point Ascenceurs

Toulouse

Notre client est Positionné comme l'une des principales sociétés concevant et fabriquant des ascenseurs au monde. Sous la supervision du Conducteur de Travaux, assurer la responsabilité technique de…

Voir les Détails
Publié le 2026-11-10

Ingénieur Validation CEM & Essais Électriques - 2369 - CDI

Collective.work
Toulouse

Ingénieur Validation CEM & Essais Électriques H/F Type de contrat CDI Localisation Toulouse Référence 2369 Contact Vous souhaitez mettre votre expertise CEM au service de projets innovant…

Voir les Détails
Publié le 2026-07-02

PLOMBIER (H/F)

TridenTT Toulouse
Toulouse

L'agence d'emploi TRIDENTT TOULOUSE, Spécialisée dans les métiers du BATIMENT. Recherche pour un de ses clients un PLOMBIER/CHAUFFAGISTE (N3) (H/F) Vos missions : - Vous intervenez dans des bâ…

Voir les Détails
Publié le 2026-08-29

Opérateur Logistique

FED Group
Toulouse

Fed Supply est un cabinet de recrutement Supply Chain ultra-spécialisé et créé en 2010 par Fed Group . Nos consultants recrutent les meilleurs candidats sur le terrain partout en France en intérim,…

Voir les Détails
Publié le 2026-10-29

Conducteur de travaux menuiserie H/F

Hays France
Toulouse

Notre client, acteur reconnu dans le domaine de la menuiserie extérieure, recherche dans le cadre de son développement un Conducteur de travaux Menuiserie Aluminium pour son activité sur Toulouse. …

Voir les Détails
Publié le 2026-11-05

Chef de chantier HTB H/F

OCY Technologies
Toulouse

Au quotidien, vous êtes en charge du pilotage et de la coordination des travaux sur des chantiers de postes électriques et d'infrastructures HTB pour le compte de grands acteurs de la transition énerg…

Voir les Détails
Publié le 2026-11-06