Ingénieur d'infrastructure de données et de ML

Nous agrandissons notre équipe avec un ingénieur d'infrastructure Data & ML qui prendra possession de la plate-forme qui permet les flux de travail d'ingestion, de traitement, de stockage et d'apprentissage automatique de données sur plusieurs produits. Opérant à l'intersection de la science des données, du génie logiciel et de l'infrastructure cloud, vous construirez les bases et veillerez à ce que nos systèmes ML soient évolutifs, reproductibles et prêts pour la production.

Dans ce rôle, vous concevrez, mettrez en œuvre et améliorerez continuellement une plate-forme de données et de ML indépendante du cloud qui prend en charge plusieurs produits et équipes. Vous serez responsable de la fiabilité, de l’évolutivité et de la rentabilité de la plateforme, tout en fournissant aux scientifiques des données et aux ingénieurs ML les outils et l’infrastructure nécessaires pour développer, former, valider et déployer efficacement des modèles d’apprentissage automatique. Vous servirez de pont technique entre les équipes de science des données et informatiques/infrastructure, traduisant les exigences en systèmes robustes et maintenables.

Ce rôle comprend la propriété d'une plate-forme existante fournie par un fournisseur et son évolution vers une plate-forme ML entièrement automatisée, reproductible et multi-produits.

Responsabilités clés :

• Concevoir, mettre en œuvre et maintenir l'infrastructure de la plate-forme de données et de ML, y compris les systèmes d'ingestion, de stockage, de traitement et de formation des données.

• Garantir la haute disponibilité, la fiabilité et la disponibilité de la plateforme, car elles sont essentielles à la proposition de valeur commerciale.

• Maintenir et faire évoluer les composants de plateforme fournis par le fournisseur et garantir la maintenabilité et l'indépendance à long terme.

• Créez et gérez des flux de données, notamment des outils de gestion des versions des ensembles de données, de suivi des expériences et de gestion du cycle de vie des modèles sur plusieurs produits.

• Appliquez les pratiques DevOps/MLOps, y compris les pipelines CI/CD, l'infrastructure en tant que code et les flux de travail automatisés.

• Développer des solutions conteneurisées et indépendantes du cloud qui peuvent fonctionner dans des environnements de cloud public et privé dans le cadre des contraintes de l'UE.

• Optimiser le stockage des données, les politiques de cycle de vie et la rentabilité, y compris les stratégies de stockage et de rétention à plusieurs niveaux.

• Mettre en œuvre et maintenir des systèmes de surveillance et d'alerte (par exemple, Prometheus, Grafana) pour les pipelines, les infrastructures et l'utilisation des ressources.

• Assurer la gouvernance, la sécurité et la conformité des données, y compris les exigences en matière de contrôle d'accès, de journalisation d'audit et d'anonymisation.

• Collaborer étroitement avec les data scientists, les ingénieurs ML et les équipes informatiques pour fournir une infrastructure qui répond aux besoins opérationnels.

• Gérer les contrôles des ressources et des coûts, y compris les budgets, les approbations et le suivi.

• Contribuer à la documentation, aux runbooks opérationnels et aux documents d'intégration de la plateforme.

Pourquoi nous rejoindre ?

• Rejoignez l'une des scale-ups de technologie profonde les plus prometteuses d'Europe.

• Façonner l'avenir d'une organisation de R&D multidisciplinaire en croissance rapide.

• Salaire et avantages sociaux compétitifs.

• Profitez d'activités d'équipe régulières et d'événements d'entreprise.

• Déjeuners d'équipe frais fournis 3 fois/semaine.

Qualifications requises :

• MSc ou équivalent avec plus de 5 ans d'expérience dans l'industrie en informatique, en ingénierie des données, en apprentissage automatique ou dans un domaine connexe.

• Solide expérience avec les plateformes de données, l'infrastructure cloud et les systèmes distribués (AWS, GCP, Azure).

• Expérience avérée avec l'infrastructure en tant que code (par exemple, Terraform) et les déploiements automatisés.

• Expérience avec les plateformes et outils ML (MLflow, Feast, DVC, DataHub ou équivalent).

• Expérience avec les plateformes AWS Sagemaker ou Google Vertex AI.

• Expérience avec les bases de données (MongoDB, PostgreSQL, InfluxDB ou équivalent).

• Expérience avec les courtiers de messages et les systèmes de streaming (Kafka, RabbitMQ ou équivalent).

• Expérience pratique de la conteneurisation (Docker/OCI) et de l'orchestration (Kubernetes ou similaire).

• Expérience avec les systèmes CI/CD (par exemple, GitLab CI).

• Compétences en programmation en Python.

• Expérience avec les outils de surveillance et d'observabilité (Prometheus, Grafana).

• Compréhension des pratiques DevOps et MLOps.

• Capacité à travailler en équipe et à traduire les exigences en solutions d'infrastructure évolutives.

Agréable à avoir :

• Connaissance de la gouvernance des données, de l'IAM et des cadres de sécurité.

• Expérience en optimisation des coûts et en gestion des ressources dans les environnements cloud.

• Familiarité avec les architectures de plateformes multi-locataires ou multi-produits.

• Expérience de travail avec les contraintes de conformité des données de l'UE dans les domaines de l'énergie, du maritime ou de la défense.

Sécurité et conformité :
Vous travaillerez avec des clients des secteurs de la défense et de la sécurité, l'obtention d'un certificat de non-objection délivré par l'AIVD (Service général néerlandais de renseignement et de sécurité) est obligatoire. Cela signifie que vous devrez vous soumettre à un contrôle de sécurité. Pour plus d’informations, veuillez vous référer aux détails sur le contrôle de sécurité.
Trouvez plus d'emplois anglophones aux Pays-Bas sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.nl/jobs/companies/optics11/data-ml-infrastructure-engineer-amsterdam-379597)