Ingénieur de données senior

Travailler chez CreateFuture

CreateFuture est un partenaire de conseil natif en IA où les gens effectuent un travail important et sont soutenus pour bien le faire. Nous travaillons aux côtés d'organisations telles que PayPal, adidas, NatWest, FanDuel et Money Saving Expert, pour créer des produits et services numériques qui font la différence tout en donnant toujours la priorité aux personnes.

Nous sommes une équipe de créateurs. Nous écrivons du code, façonnons la livraison, élaborons des stratégies de mise sur le marché, développons des solutions d'IA et créons les pratiques qui soutiennent nos collaborateurs. Nous travaillons aux côtés de nos clients, remettant en question ce qui ne fonctionne pas et les aidant à construire l’avenir. Notre engagement envers l'artisanat, la qualité et la culture nous a permis de compter plus de 600 personnes en quelques années seulement.

CreateFuture est une entreprise certifiée Great Place to Work™ et a remporté le prix Best Workplaces UK plusieurs années de suite.

Rejoignez-nous dans notre voyage. Créons demain, ensemble, aujourd’hui.

À propos du rôle et de l'équipe :

Nous recherchons un ingénieur de données senior pour rejoindre notre équipe de données, s'appropriant la conception, la livraison et la fiabilité des pipelines de données de production construits sur des plateformes telles que Snowflake/Databricks, Python et PySpark. Vous travaillerez avec un haut degré d'autonomie, en relevant les défis d'ingénierie de données les plus complexes et les plus ambigus dans le cadre de missions client, tout en encadrant des ingénieurs juniors et en contribuant à relever la barre des pratiques d'ingénierie. Vous collaborerez en étroite collaboration avec les architectes, les équipes produit et les parties prenantes des clients pour traduire les exigences en matière de données en solutions robustes et maintenables.

Ce que vous ferez :

• S'approprier la conception, la création et la maintenance de pipelines de données évolutifs et prêts pour la production à l'aide des services de données AWS (par exemple, AWS Glue, EMR, S3, Redshift, Athena), Python et PySpark, avec une supervision minimale.

• Prendre des décisions techniques judicieuses concernant l'architecture du pipeline, la modélisation des données et les outils, en pesant les compromis en termes de performances, de coûts et de maintenabilité.

• Encadrer et soutenir les ingénieurs de données juniors et intermédiaires, en révisant le code et en partageant les connaissances pour élever le niveau de livraison au sein de l'équipe.

• Posséder et améliorer continuellement les pipelines CI/CD pour les flux de travail d'ingénierie des données, garantissant des déploiements fiables et reproductibles.

• Dépanner et résoudre des problèmes complexes dans les pipelines de données en direct, agissant comme point d'escalade pour l'ensemble de l'équipe.

• Collaborer avec des équipes interfonctionnelles et des parties prenantes du client pour comprendre les exigences en matière de données et les transformer en solutions techniques

Nous serions ravis de vous parler si vous :

• Avoir conçu et exploité des pipelines de données de production sur une plate-forme de données cloud moderne, AWS (Glue, EMR, Redshift, S3/Lake Formation), Databricks, Snowflake ou comparable, et pouvoir indiquer laquelle de ces décisions serait transmise à une autre et laquelle ne le serait pas.

• Posséder l'orchestration en production, la conception des dépendances, les tentatives, les SLA et l'observabilité qui vous indique qu'un pipeline a échoué avant le client.

• Avoir reçu des données provenant de sources peu pratiques : API, CDC hors bases de données opérationnelles, fichiers qui changent de forme sans vous le dire.

• Avoir des compétences SQL approfondies et une expérience pratique de la modélisation de données (par exemple, Kimball, modèles de médaillons/lacs ou modélisation pilotée par domaine) : il s'agit de la compétence porteuse et indépendante du fournisseur sous-jacente à presque tous nos travaux de pipeline.

• Disposer de Python et PySpark puissants pour le traitement par lots, avec un code de qualité production et bien testé. La majeure partie de ce travail concerne les lots et les ELT, mais vous devrez avoir une expérience des pipelines événementiels ou micro-batch et savoir où les hypothèses de conception cessent de tenir. )

• Avoir de l'expérience dans la réalisation de travaux d'ingénierie de données avec une supervision limitée, y compris la gestion et le support CI/CD.

• Avoir de l'expérience dans le mentorat ou dans le soutien au développement d'ingénieurs moins expérimentés

• Êtes à l'aise de travailler directement avec les parties prenantes pour façonner des solutions techniques à partir d'exigences ambiguës, en présentant votre travail, votre estimation et en discutant des compromis et des risques.

Ce que nous vous proposerons :

Nous faisons confiance aux gens pour qu’ils fassent de leur mieux. Cela signifie une flexibilité face à des règles rigides, un impact sur l'activité et un réel investissement dans votre croissance, tant professionnelle que personnelle. Vous ferez partie d’une culture solidaire et amicale, entouré de personnes intelligentes et curieuses qui se soucient profondément de ce qu’elles font.

Nous proposons un travail flexible, y compris des options hybrides et à distance. Nos bureaux sont situés à Édimbourg, Leeds, Manchester, Londres et en Bulgarie, avec des déplacements occasionnels sur les sites clients ou dans les bureaux de CreateFuture en cas de besoin.

Nous vous faisons confiance pour gérer votre temps en équilibrant la collaboration avec le temps des clients et un travail ciblé. Ce qui compte, c'est l'impact que vous avez, pas à quel point vous avez l'air occupé.

Notre processus de recrutement

Nous essayons de garder notre processus d'embauche clair, juste et respectueux de votre temps. Notre objectif est de répondre à tous ceux qui postulent et nous serons francs quant à votre situation dans le processus.

Cela ressemble généralement à ceci :

• Appelez notre équipe d'acquisition de talents

• Entretien sur les capacités spécifiques au rôle

Selon le rôle, nous pouvons également vous demander de faire une courte présentation, une tâche pratique ou technique ou d'avoir une conversation axée sur les valeurs. Nous vous expliquerons ce que cela implique avant que quoi que ce soit n'arrive.

Inclusion chez CreateFuture

Nous pensons que des équipes diversifiées créent de meilleurs lieux de travail et de meilleurs produits. Nous voulons que CreateFuture soit un endroit où les gens se sentent capables d'être eux-mêmes et de faire de leur mieux.

Si vous avez besoin d'ajustements ou d'assistance pendant le processus de candidature, n'hésitez pas. Nous ferons ce que nous pouvons pour vous aider.

Nous attendons votre candidature avec impatience !

Trouvez un emploi au Royaume-Uni sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/xdesign/senior-data-engineer-230278)