Ingénieur de données principal

Travailler chez CreateFuture

CreateFuture est un partenaire de conseil natif en IA où les gens effectuent un travail important et sont soutenus pour bien le faire. Nous travaillons aux côtés d'organisations telles que PayPal, adidas, NatWest, FanDuel et Money Saving Expert, pour créer des produits et services numériques qui font la différence tout en donnant toujours la priorité aux personnes.

Nous sommes une équipe de créateurs. Nous écrivons du code, façonnons la livraison, élaborons des stratégies de mise sur le marché, développons des solutions d'IA et créons les pratiques qui soutiennent nos collaborateurs. Nous travaillons aux côtés de nos clients, remettant en question ce qui ne fonctionne pas et les aidant à construire l’avenir. Notre engagement envers l'artisanat, la qualité et la culture nous a permis de compter plus de 600 personnes en quelques années seulement.

CreateFuture est une entreprise certifiée Great Place to Work™ et a remporté le prix Best Workplaces UK plusieurs années de suite.

Rejoignez-nous dans notre voyage. Créons demain, ensemble, aujourd’hui.

À propos du rôle et de l'équipe :

Nous recherchons un ingénieur de données principal pour assumer la direction technique d'un engagement de données, travaillant avec Microsoft Fabric, Python et PySpark au sein de notre équipe de données. Vous dirigerez une équipe d'ingénieurs de données, établissant les normes relatives à la conception, à la construction et à l'exploitation des pipelines et de l'architecture, tout en restant au contact des défis techniques les plus complexes. Vous travaillerez en étroite collaboration avec les parties prenantes du client et avec la capacité d'ingénierie plus large de CreateFuture pour garantir que la livraison est à la fois techniquement excellente et commercialement solide.

Ce que vous ferez :

• Être responsable de la direction technique d'un engagement de données, en établissant des normes pour l'architecture du pipeline, la modélisation des données, les tests et la préparation opérationnelle.

• Diriger et diriger techniquement une équipe d'ingénieurs de données, en répartissant le travail, en examinant les conceptions et le code et en débloquant les défis techniques.

• Concevoir et faire évoluer l'architecture de la plateforme de données sur Microsoft Fabric, y compris les pipelines de données, Azure OneLake et l'écosystème Azure plus large.

• Définir et appliquer des pratiques CI/CD, de test et opérationnelles dans les flux de travail d'ingénierie des données de l'engagement, à l'aide d'Azure DevOps.

• Établir des relations professionnelles avec les principales parties prenantes du client, en traduisant les exigences commerciales et en matière de données en une feuille de route technique cohérente.

• Dépanner et résoudre les problèmes les plus complexes dans les pipelines de données en direct, et diriger la réponse aux incidents en cas de problème.

Nous serions ravis de vous parler si vous :

•

• Avoir une vaste expérience pratique avec une plate-forme de données cloud moderne telle que Microsoft Fabric (la plate-forme de notre client actuel), Databricks, Snowflake ou Synapse, y compris la conception de plates-formes de données de production : la plate-forme est le wrapper, pas la compétence, et une solide profondeur d'ingénierie d'un système se transfère facilement à un autre.

• Avoir une expertise SQL approfondie et une solide maîtrise de la modélisation et de l'architecture des données (Kimball, coffre-fort de données, modèles de médaillon/lakehouse ou modélisation de domaine) : il s'agit de la frontière la plus claire entre quelqu'un qui exploite une plate-forme et quelqu'un qui peut concevoir dessus, et elle est indépendante du fournisseur.

• Avoir une solide maîtrise de Python et de PySpark pour le traitement des données par lots/ELT à grande échelle (ce rôle est centré sur l'ingénierie de pipeline par lots — nous traitons le streaming/en temps réel comme une discipline distincte et ne supposons jamais que les deux sont interchangeables)

• Avoir dirigé ou dirigé techniquement une équipe d'ingénieurs de données, établissant des normes pour la conception, les tests et la livraison de pipelines.

• Avoir de l'expérience dans la possession de CI/CD et de pratiques opérationnelles pour les flux de travail d'ingénierie de données, idéalement en utilisant Azure DevOps

• Sont expérimentés dans le travail direct avec les parties prenantes du client, en instaurant la confiance et en stimulant le cas échéant

• Avoir une connaissance de l'écosystème Azure au sens large, notamment Azure OneLake et Azure ML, en particulier pour l'industrialisation des modèles.

Ce que nous vous proposerons :

Nous faisons confiance aux gens pour qu’ils fassent de leur mieux. Cela signifie une flexibilité face à des règles rigides, un impact sur l'activité et un réel investissement dans votre croissance, tant professionnelle que personnelle. Vous ferez partie d’une culture solidaire et amicale, entouré de personnes intelligentes et curieuses qui se soucient profondément de ce qu’elles font.

Nous proposons un travail flexible, y compris des options hybrides et à distance. Nos bureaux sont situés à Édimbourg, Leeds, Manchester, Londres et en Bulgarie, avec des déplacements occasionnels sur les sites clients ou dans les bureaux de CreateFuture en cas de besoin.

Nous vous faisons confiance pour gérer votre temps en équilibrant la collaboration avec le temps des clients et un travail ciblé. Ce qui compte, c'est l'impact que vous avez, pas à quel point vous avez l'air occupé.

Notre processus de recrutement

Nous essayons de garder notre processus d'embauche clair, juste et respectueux de votre temps. Notre objectif est de répondre à tous ceux qui postulent et nous serons francs quant à votre situation dans le processus.

Cela ressemble généralement à ceci :

• Appelez notre équipe d'acquisition de talents

• Entretien sur les capacités spécifiques au rôle

Selon le rôle, nous pouvons également vous demander de faire une courte présentation, une tâche pratique ou technique ou d'avoir une conversation axée sur les valeurs. Nous vous expliquerons ce que cela implique avant que quoi que ce soit n'arrive.

Inclusion chez CreateFuture

Nous pensons que des équipes diversifiées créent de meilleurs lieux de travail et de meilleurs produits. Nous voulons que CreateFuture soit un endroit où les gens se sentent capables d'être eux-mêmes et de faire de leur mieux.

Si vous avez besoin d'ajustements ou d'assistance pendant le processus de candidature, n'hésitez pas. Nous ferons ce que nous pouvons pour vous aider.

Nous attendons votre candidature avec impatience !

Trouvez un emploi au Royaume-Uni sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/xdesign/lead-data-engineer-edinburgh-414772)