Ingénieur de recherche, Forge

À propos de Mistral
Mistral fournit des solutions d'IA complètes : des modèles de pointe aux outils de développement, applications et calcul. Nous collaborons avec des entreprises qui s'attaquent aux problèmes les plus difficiles dans des secteurs à enjeux élevés tels que la finance, l'industrie manufacturière, la défense, la santé et le secteur public, en co-créant des systèmes d'IA personnalisés qu'elles peuvent exécuter selon leurs conditions.
Nous sommes une équipe dynamique et collaborative passionnée par l’IA et son potentiel à transformer la société. Notre main-d’œuvre diversifiée s’épanouit dans des environnements compétitifs et s’engage à stimuler l’innovation. Nos équipes sont réparties entre l'Europe, l'Amérique du Nord, l'Asie et le Moyen-Orient. Nous sommes créatifs, modestes et avons l'esprit d'équipe.

Résumé du rôle
En tant qu'ingénieur de recherche sur Forge, vous transformerez les exigences réelles des clients en flux de travail de formation et de déploiement fiables. Vous travaillerez de bout en bout sur l’adaptation du modèle et la post-formation (CPT/SFT/RL/distillation), l’évaluation, les données et l’infrastructure. Le rôle fait le pont entre l’expérimentation de la recherche et les contraintes de production.
Ce rôle relève des sciences appliquées et a un impact direct sur les résultats des clients. Vous collaborerez en étroite collaboration avec les scientifiques, les ingénieurs, les équipes produit et les équipes client pour garantir que les projets Forge sont livrés, maintenables et dignes de confiance des autres.
L'objet de l'entretien peut varier (algorithmes, infrastructure, évaluations ou données). Vous n’avez pas besoin de correspondre à toutes les puces ci-dessous pour postuler.

Ce que tu feras

• Créer et améliorer les workflows de post-formation et d'évaluation (CPT/SFT/RL/distillation), en transformant les prototypes en « recettes Forge » reproductibles.

• Développer des outils et des pipelines pour la génération de données synthétiques, la conservation des données, la formation, l'évaluation et le déploiement.

• Déboguer et renforcer les systèmes ML à grande échelle : formation distribuée, planification/exécution, points de contrôle, observabilité et reproductibilité.

• Améliorez la base de code Forge via des API claires, des tests, de la documentation et des abstractions maintenables.

• Repousser les limites de notre pile de formation RL (par exemple, déploiement asynchrone à haut débit et systèmes post-formation évolutifs à l'échelle d'un modèle frontière)

• Assurez-vous que le déploiement de Forge est transparent et adaptable à une diversité de clients (accès matériel, pile logicielle, cloud et sur site, …)

• Collaborer avec des chercheurs et des ingénieurs d'infrastructure pour traduire les goulots d'étranglement en améliorations concrètes du système.

À propos de vous

• Solides compétences en ingénierie Python et expérience de travail dans de grandes bases de code (tests, révision de code, CI, propriété opérationnelle).

• Expérience pratique avec PyTorch, JAX ou similaire.

• Des fondamentaux solides en matière de systèmes et d'infrastructures.

• Expérience en formation ou post-formation LLM : mise au point, RL, distillation, évaluation et/ou pipelines de données.

• Excellentes compétences en débogage dans des systèmes ambigus (tâches distribuées, problèmes de données, régressions de qualité, pannes infra).

• Communication claire avec les parties prenantes techniques et non techniques.

• Grande capacité d'action, faible ego et confort dans des environnements sous-spécifiés et en évolution rapide.

C'est agréable d'avoir

• Expérience de formation distribuée (FSDP, DeepSpeed, Megatron, etc.).

• Expérience en cluster/orchestration (SLURM, Ray, Kubernetes, Kueue, Karpenter, Skypilot, etc.).

• Expérience dans la création d'infrastructures ML fiables, de systèmes d'évaluation ou de pipelines de traitement de données à grande échelle.

• Expérience de recherche en LLM, agents, modèles multimodaux, raisonnement, code ou adaptation de domaine.

• Contributions open source, publications ou outils internes largement utilisés.

• Expérience de la formation de modèles multimilliardaires de paramètres (préformation ou RL). Expérimentez la formation sur des ensembles de données à l’échelle du pétaoctet et de l’exaoctet.

• Capacité à identifier les goulots d'étranglement dans la pile et à générer des améliorations à partir des premiers principes.

Ce que nous proposons
Nous proposons un ensemble d'avantages sociaux complet conçu pour soutenir votre bien-être, votre croissance et votre équilibre travail-vie personnelle. Les avantages varient selon les pays et peuvent inclure une couverture santé, un congé parental, des plans de retraite, une aide à la réinstallation, des programmes de bien-être, des indemnités de repas et de transport et d'autres avantages spécifiques au lieu.
Pour obtenir les détails les plus récents sur les avantages disponibles dans votre région, veuillez consulter notre page Avantages.

Politique de confidentialité
Votre vie privée nous tient à cœur. Vous pouvez en savoir plus sur la manière dont nous traitons vos données personnelles dans notre Politique de confidentialité des candidats.
Trouvez un emploi en France sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.fr/jobs/companies/mistralai/research-engineer-forge-paris-155448)