Ingénieur senior de plateforme de données

Aker Systems a été fondée en 2017 par une équipe de professionnels expérimentés en technologie qui ont reconnu l'opportunité de fournir des plateformes de données d'entreprise hautement sécurisées aux grandes organisations. Nous construisons et exploitons une infrastructure de données cloud révolutionnaire, ultra-sécurisée et haute performance pour l'entreprise. Nos solutions technologiques exclusives améliorent les performances et réduisent les coûts tout en aidant nos clients à améliorer la gestion et le partage des données au sein de leurs organisations.

En 2024, Aker Systems a remporté les Breakthrough Culture Awards récompensant les entreprises en croissance qui accordent la priorité à la culture. En 2020, Aker Systems a été reconnu comme « One to Watch » sur le Sunday Times Tech Track. La société a également été récompensée lors des Thames Valley Tech Awards 2020 ; remportant le prix Thames Valley Tech Company of the Year, les catégories Emerging Tech Company et High Growth Tech Business. Nous encourageons les personnes de tous horizons et identités différentes à postuler. Nous nous engageons à maintenir un lieu inclusif et solidaire pour que vous puissiez faire de votre meilleur travail.

En raison de la nature du projet, une autorisation de contrôle de sécurité (SC) du gouvernement britannique est requise.
Nous recherchons un ingénieur senior de plateforme de données pour concevoir, construire et exploiter des capacités de plateforme de données sécurisées, évolutives et fiables dans le cadre de projets de livraison de clients dans le secteur public et les services publics.
Vous travaillerez en étroite collaboration avec des ingénieurs de données, des ingénieurs logiciels, des architectes, des ingénieurs DevOps et des parties prenantes des clients pour développer et maintenir des plates-formes de données cloud natives prenant en charge les charges de travail par lots, de streaming en temps réel, analytiques et opérationnelles.
Il s'agit d'un rôle d'ingénierie pratique axé sur la création de services de plate-forme fiables, l'automatisation de l'infrastructure et des déploiements, la prise en charge des environnements de production et la contribution aux décisions de conception technique.
Une solide expérience des plates-formes cloud, des systèmes distribués et des technologies de streaming en temps réel est hautement souhaitable.
Principales responsabilités

• Concevoir, développer, tester et déployer des services et des composants de plateforme de données.

• Créer et maintenir des capacités de plateforme prenant en charge les charges de travail de données par lots et en temps réel.

• Développer et exploiter des services de données distribués en utilisant Kafka, Kinesis, Spark, Flink ou des technologies équivalentes.

• Créez et maintenez des capacités de plateforme de données cloud natives à l'aide d'AWS et/ou d'Azure.

• Prise en charge de l'ingestion, du traitement, du stockage et de l'intégration des données sur plusieurs systèmes.

• Développer et maintenir des modèles de données, des schémas et des structures de données de plateforme.

• Prise en charge de l'évolution des schémas, de la qualité et de l'intégrité des données sur les plates-formes distribuées.

• Intégrez des plateformes de données avec des bases de données relationnelles et NoSQL.

• Développer des tests et des validations automatisés pour les services de plateforme et les composants de traitement des données.

• Mettre en œuvre et maintenir des pipelines CI/CD pour les charges de travail de la plateforme de données.

• Utilisez Infrastructure as Code pour créer des environnements reproductibles et maintenables.

• Prise en charge des environnements de plate-forme basés sur Docker et Kubernetes.

• Surveiller les services de la plateforme et enquêter sur les pannes, les problèmes de performances et les problèmes opérationnels.

• Participer aux enquêtes sur les incidents et à l'analyse des causes profondes.

• Prise en charge des améliorations en termes de performances, d'évolutivité, de résilience et de disponibilité de la plateforme.

• Contribuer à la sécurité, à la gouvernance et à la préparation opérationnelle de la plateforme.

• Travailler en étroite collaboration avec les ingénieurs logiciels, les ingénieurs de données, les DevOps et les architectes.

• Participer aux discussions de conception technique, aux révisions de codes et aux normes d'ingénierie.

• Contribuer à l'amélioration continue des pratiques d'ingénierie des plateformes.

Compétences techniques et expérience essentielles

• Solide expérience commerciale en tant qu'ingénieur senior de plateforme de données, ingénieur de données senior, ingénieur de plateforme, ingénieur logiciel ou similaire.

• Solide expérience pratique dans la création et l'exploitation de plateformes de données cloud natives.

• Solide expérience en programmation utilisant Java et/ou Python.

• Expérience pratique du streaming en temps réel et des architectures basées sur les événements, notamment Kafka, Kinesis ou équivalent.

• Expérience avec les technologies de traitement de données distribuées telles que Spark, Flink, Kafka Streams ou équivalent.

• Solide expérience avec les environnements cloud AWS et/ou Azure.

• Expérience avec les services cloud tels que les équivalents S3, Glue, Lambda, RDS, Athena, EC2 ou Azure.

• Solide compréhension de l'architecture de la plateforme de données, des pipelines de données et du traitement distribué.

• Expérience avec les bases de données relationnelles et NoSQL.

• Solides compétences SQL et compréhension de la modélisation des données et de la conception de schémas.

• Expérience avec les pratiques CI/CD et DevOps.

• Expérience de l'utilisation de Terraform ou de technologies Infrastructure as Code équivalentes.

• Expérience avec Docker et/ou Kubernetes.

• Expérience de l'utilisation de GitHub/GitLab et des pratiques modernes de contrôle de source.

• Expérience dans la mise en œuvre de la surveillance, de la journalisation et de l'observabilité pour les services de plateforme.

• Expérience en soutien aux systèmes de production et en résolution de problèmes techniques et opérationnels.

• Compréhension de la sécurité, de la résilience, de l'évolutivité et de la disponibilité de la plateforme.

• Expérience de travail dans des environnements de livraison Agile et/ou DevOps.

•
Souhaitable : Helm, ArgoCD, Airflow, dbt, Bash, Ansible, Packer, Elasticsearch/OpenSearch, Prometheus, Grafana, ELK ou Datadog.

• Une expérience de travail dans le secteur public, les services publics ou d'autres environnements réglementés est un avantage.

Ingénierie de plateforme de données
En tant qu'ingénieur senior de plateforme de données, vous prendrez en charge des activités d'ingénierie de plateforme complexes au sein de votre équipe de livraison client.
Vous allez :

• Créer et maintenir des composants et des services de plateforme de données fiables.

• Contribuer aux décisions de conception technique et de mise en œuvre.

• Développer des modèles de plateforme réutilisables et maintenables.

• Prise en charge des capacités d'ingestion, de traitement, de stockage et d'intégration des données.

• Identifier les risques de la plateforme liés aux performances, à l'évolutivité, à la sécurité et à la fiabilité.

• Contribuer au réglage et à l'optimisation des performances de la plateforme.…

Source : Himalaya (https://himalayas.app/companies/aker-systems/jobs/senior-data-platform-engineer)