Job
Aus Partner-Feed
Leitender Dateningenieur
Preis auf Anfrage
Details
- Beschäftigungsart
- Vollzeit
- Remote
- Ja
- Unternehmen
- Xdesign
Beschreibung
Automatisch aus dem English übersetzt. Der Originaltext ist maßgeblich. Maschinenübersetzung – eine genauere Version wird vorbereitet.
Arbeiten bei CreateFuture
CreateFuture ist ein KI-nativer Beratungspartner, bei dem Menschen wichtige Aufgaben erledigen und dabei unterstützt werden, sie gut zu erledigen. Wir arbeiten mit Organisationen wie PayPal, adidas, NatWest, FanDuel und Money Saving Expert zusammen und entwickeln digitale Produkte und Dienstleistungen, die einen Unterschied machen und dabei stets den Menschen in den Mittelpunkt stellen.
Wir sind ein Team von Entwicklern. Wir schreiben Code, gestalten die Bereitstellung, entwickeln Markteinführungsstrategien, entwickeln KI-Lösungen und schaffen die Praktiken, die unsere Mitarbeiter unterstützen. Wir arbeiten Seite an Seite mit unseren Kunden, hinterfragen, was nicht funktioniert, und helfen ihnen, die Zukunft aufzubauen. Unser Engagement für Handwerk, Qualität und Kultur hat uns geholfen, in nur wenigen Jahren auf über 600 Mitarbeiter zu wachsen.
CreateFuture ist ein Great Place to Work-Certified™-Unternehmen und wurde mehrere Jahre in Folge als Best Workplaces UK ausgezeichnet.
Begleiten Sie uns auf unserer Reise. Lassen Sie uns heute gemeinsam das Morgen gestalten.
Über die Rolle und das Team:
Wir suchen einen Senior Data Engineer zur Verstärkung unseres Datenteams, der die Verantwortung für das Design, die Bereitstellung und die Zuverlässigkeit von Produktionsdatenpipelines übernimmt, die auf Plattformen wie Snowflake/Databricks, Python und PySpark basieren. Sie arbeiten mit einem hohen Maß an Autonomie, nehmen die komplexeren und mehrdeutigen Data-Engineering-Herausforderungen bei Kundenaufträgen an, betreuen Nachwuchsingenieure und tragen dazu bei, die Messlatte für die Ingenieurspraxis höher zu legen. Sie arbeiten eng mit Architekten, Produktteams und Kundenbeteiligten zusammen, um Datenanforderungen in robuste, wartbare Lösungen umzusetzen.
Was Sie tun werden:
• Übernehmen Sie die Verantwortung für das Entwerfen, Erstellen und Warten skalierbarer, produktionsbereiter Datenpipelines mithilfe von AWS-Datendiensten (z. B. AWS Glue, EMR, S3, Redshift, Athena), Python und PySpark, mit minimaler Aufsicht
• Treffen Sie fundierte technische Entscheidungen zur Pipeline-Architektur, Datenmodellierung und Tools und wägen Sie Kompromisse in Bezug auf Leistung, Kosten und Wartbarkeit ab
• Mentor und Support für junge und mittlere Dateningenieure, Überprüfung des Codes und Weitergabe von Wissen, um den Lieferstandard im gesamten Team zu erhöhen
• Besitzen und verbessern Sie kontinuierlich CI/CD-Pipelines für Data-Engineering-Workflows, um zuverlässige, wiederholbare Bereitstellungen sicherzustellen
• Beheben und lösen Sie komplexe Probleme in Live-Datenpipelines und fungieren Sie als Eskalationspunkt für das gesamte Team
• Arbeiten Sie mit funktionsübergreifenden Teams und Kundenbeteiligten zusammen, um die Datenanforderungen zu verstehen und sie in technische Lösungen umzuwandeln
Wir würden uns freuen, mit Ihnen zu sprechen, wenn Sie:
• Sie haben Produktionsdatenpipelines auf einer modernen Cloud-Datenplattform, AWS (Glue, EMR, Redshift, S3/Lake Formation), Databricks, Snowflake oder vergleichbar, entworfen und betrieben und können darüber sprechen, welche dieser Entscheidungen auf eine andere übertragen würden und welche nicht.
• Sie verfügen über Orchestrierung in der Produktion, Abhängigkeitsdesign, Wiederholungsversuche, SLAs und die Beobachtbarkeit, die Ihnen mitteilt, dass eine Pipeline ausgefallen ist, bevor der Client dies tut.
• Sie sind auf Daten aus ungünstigen Quellen gelandet: APIs, CDC aus operativen Datenbanken, Dateien, die ihre Form ändern, ohne es Ihnen mitzuteilen.
• Sie verfügen über fundierte SQL-Kenntnisse und praktische Erfahrung mit Datenmodellierung (z. B. Kimball, Medaillon-/Lakehouse-Muster oder domänengesteuerte Modellierung) – dies ist die tragende, anbieterunabhängige Fähigkeit, die fast unserer gesamten Pipeline-Arbeit zugrunde liegt
• Verfügen Sie über starkes Python und PySpark für die Stapelverarbeitung mit gut getestetem Code in Produktionsqualität. Der Großteil dieser Arbeit ist Batch und ELT, Sie müssen jedoch Erfahrung mit ereignisgesteuerten oder Mikro-Batch-Pipelines haben und wissen, wo die Designannahmen nicht mehr gelten. )
• Sie verfügen über Erfahrung in der Leitung der Bereitstellung von Data-Engineering-Arbeiten mit begrenzter Aufsicht, einschließlich CI/CD-Management und -Support
• Erfahrung in der Betreuung oder Unterstützung der Entwicklung weniger erfahrener Ingenieure haben
• Fühlen sich wohl, direkt mit Stakeholdern zusammenzuarbeiten, um technische Lösungen aus mehrdeutigen Anforderungen zu entwickeln, Ihre Arbeit und Einschätzungen zu präsentieren und Kompromisse und Risiken zu diskutieren.
Was wir Ihnen bieten:
Wir vertrauen darauf, dass die Menschen ihr Bestes geben. Das bedeutet Flexibilität gegenüber starren Regeln, Einfluss gegenüber Aktivität und echte Investition in Ihr berufliches und persönliches Wachstum. Sie werden Teil einer unterstützenden und freundlichen Kultur sein, umgeben von klugen, neugierigen Menschen, denen das, was sie tun, sehr am Herzen liegt.
Wir bieten flexibles Arbeiten, einschließlich Hybrid- und Remote-Optionen. Unsere Bürozentren befinden sich in Edinburgh, Leeds, Manchester, London und Bulgarien. Bei Bedarf reisen wir gelegentlich zu Kundenstandorten oder zu CreateFuture-Büros.
Wir vertrauen darauf, dass Sie Ihre Zeit so gestalten, dass Sie die Zusammenarbeit mit der Kundenzeit und konzentrierter Arbeit in Einklang bringen. Was zählt, ist die Wirkung, die Sie erzielen, und nicht, wie beschäftigt Sie aussehen.
Unser Einstellungsprozess
Wir versuchen, unseren Einstellungsprozess klar, fair und respektvoll gegenüber Ihrer Zeit zu gestalten. Unser Ziel ist es, bei jedem, der sich bewirbt, eine Rückmeldung zu erhalten, und wir werden Ihnen im Voraus mitteilen, wo Sie im Verfahren stehen.
Normalerweise sieht es so aus:
• Rufen Sie unser Talent Acquisition Team an
• Interview mit rollenspezifischen Fähigkeiten
Abhängig von der Rolle bitten wir Sie möglicherweise auch um eine kurze Präsentation, eine praktische oder technische Aufgabe oder ein werteorientiertes Gespräch. Wir erklären Ihnen, worum es geht, bevor etwas passiert.
Aufnahme bei CreateFuture
Wir glauben, dass vielfältige Teams bessere Arbeitsplätze und bessere Produkte schaffen. Wir möchten, dass CreateFuture ein Ort ist, an dem Menschen das Gefühl haben, sie selbst zu sein und ihre beste Arbeit zu leisten.
Wenn Sie während des Bewerbungsprozesses Anpassungen oder Unterstützung benötigen, wenden Sie sich einfach an uns. Wir werden tun, was wir können, um zu helfen.
Wir freuen uns auf Ihre Bewerbung!
Finden Sie Jobs in Großbritannien auf Arbeitnow
Quelle: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/xdesign/senior-data-engineer-230278)
CreateFuture ist ein KI-nativer Beratungspartner, bei dem Menschen wichtige Aufgaben erledigen und dabei unterstützt werden, sie gut zu erledigen. Wir arbeiten mit Organisationen wie PayPal, adidas, NatWest, FanDuel und Money Saving Expert zusammen und entwickeln digitale Produkte und Dienstleistungen, die einen Unterschied machen und dabei stets den Menschen in den Mittelpunkt stellen.
Wir sind ein Team von Entwicklern. Wir schreiben Code, gestalten die Bereitstellung, entwickeln Markteinführungsstrategien, entwickeln KI-Lösungen und schaffen die Praktiken, die unsere Mitarbeiter unterstützen. Wir arbeiten Seite an Seite mit unseren Kunden, hinterfragen, was nicht funktioniert, und helfen ihnen, die Zukunft aufzubauen. Unser Engagement für Handwerk, Qualität und Kultur hat uns geholfen, in nur wenigen Jahren auf über 600 Mitarbeiter zu wachsen.
CreateFuture ist ein Great Place to Work-Certified™-Unternehmen und wurde mehrere Jahre in Folge als Best Workplaces UK ausgezeichnet.
Begleiten Sie uns auf unserer Reise. Lassen Sie uns heute gemeinsam das Morgen gestalten.
Über die Rolle und das Team:
Wir suchen einen Senior Data Engineer zur Verstärkung unseres Datenteams, der die Verantwortung für das Design, die Bereitstellung und die Zuverlässigkeit von Produktionsdatenpipelines übernimmt, die auf Plattformen wie Snowflake/Databricks, Python und PySpark basieren. Sie arbeiten mit einem hohen Maß an Autonomie, nehmen die komplexeren und mehrdeutigen Data-Engineering-Herausforderungen bei Kundenaufträgen an, betreuen Nachwuchsingenieure und tragen dazu bei, die Messlatte für die Ingenieurspraxis höher zu legen. Sie arbeiten eng mit Architekten, Produktteams und Kundenbeteiligten zusammen, um Datenanforderungen in robuste, wartbare Lösungen umzusetzen.
Was Sie tun werden:
• Übernehmen Sie die Verantwortung für das Entwerfen, Erstellen und Warten skalierbarer, produktionsbereiter Datenpipelines mithilfe von AWS-Datendiensten (z. B. AWS Glue, EMR, S3, Redshift, Athena), Python und PySpark, mit minimaler Aufsicht
• Treffen Sie fundierte technische Entscheidungen zur Pipeline-Architektur, Datenmodellierung und Tools und wägen Sie Kompromisse in Bezug auf Leistung, Kosten und Wartbarkeit ab
• Mentor und Support für junge und mittlere Dateningenieure, Überprüfung des Codes und Weitergabe von Wissen, um den Lieferstandard im gesamten Team zu erhöhen
• Besitzen und verbessern Sie kontinuierlich CI/CD-Pipelines für Data-Engineering-Workflows, um zuverlässige, wiederholbare Bereitstellungen sicherzustellen
• Beheben und lösen Sie komplexe Probleme in Live-Datenpipelines und fungieren Sie als Eskalationspunkt für das gesamte Team
• Arbeiten Sie mit funktionsübergreifenden Teams und Kundenbeteiligten zusammen, um die Datenanforderungen zu verstehen und sie in technische Lösungen umzuwandeln
Wir würden uns freuen, mit Ihnen zu sprechen, wenn Sie:
• Sie haben Produktionsdatenpipelines auf einer modernen Cloud-Datenplattform, AWS (Glue, EMR, Redshift, S3/Lake Formation), Databricks, Snowflake oder vergleichbar, entworfen und betrieben und können darüber sprechen, welche dieser Entscheidungen auf eine andere übertragen würden und welche nicht.
• Sie verfügen über Orchestrierung in der Produktion, Abhängigkeitsdesign, Wiederholungsversuche, SLAs und die Beobachtbarkeit, die Ihnen mitteilt, dass eine Pipeline ausgefallen ist, bevor der Client dies tut.
• Sie sind auf Daten aus ungünstigen Quellen gelandet: APIs, CDC aus operativen Datenbanken, Dateien, die ihre Form ändern, ohne es Ihnen mitzuteilen.
• Sie verfügen über fundierte SQL-Kenntnisse und praktische Erfahrung mit Datenmodellierung (z. B. Kimball, Medaillon-/Lakehouse-Muster oder domänengesteuerte Modellierung) – dies ist die tragende, anbieterunabhängige Fähigkeit, die fast unserer gesamten Pipeline-Arbeit zugrunde liegt
• Verfügen Sie über starkes Python und PySpark für die Stapelverarbeitung mit gut getestetem Code in Produktionsqualität. Der Großteil dieser Arbeit ist Batch und ELT, Sie müssen jedoch Erfahrung mit ereignisgesteuerten oder Mikro-Batch-Pipelines haben und wissen, wo die Designannahmen nicht mehr gelten. )
• Sie verfügen über Erfahrung in der Leitung der Bereitstellung von Data-Engineering-Arbeiten mit begrenzter Aufsicht, einschließlich CI/CD-Management und -Support
• Erfahrung in der Betreuung oder Unterstützung der Entwicklung weniger erfahrener Ingenieure haben
• Fühlen sich wohl, direkt mit Stakeholdern zusammenzuarbeiten, um technische Lösungen aus mehrdeutigen Anforderungen zu entwickeln, Ihre Arbeit und Einschätzungen zu präsentieren und Kompromisse und Risiken zu diskutieren.
Was wir Ihnen bieten:
Wir vertrauen darauf, dass die Menschen ihr Bestes geben. Das bedeutet Flexibilität gegenüber starren Regeln, Einfluss gegenüber Aktivität und echte Investition in Ihr berufliches und persönliches Wachstum. Sie werden Teil einer unterstützenden und freundlichen Kultur sein, umgeben von klugen, neugierigen Menschen, denen das, was sie tun, sehr am Herzen liegt.
Wir bieten flexibles Arbeiten, einschließlich Hybrid- und Remote-Optionen. Unsere Bürozentren befinden sich in Edinburgh, Leeds, Manchester, London und Bulgarien. Bei Bedarf reisen wir gelegentlich zu Kundenstandorten oder zu CreateFuture-Büros.
Wir vertrauen darauf, dass Sie Ihre Zeit so gestalten, dass Sie die Zusammenarbeit mit der Kundenzeit und konzentrierter Arbeit in Einklang bringen. Was zählt, ist die Wirkung, die Sie erzielen, und nicht, wie beschäftigt Sie aussehen.
Unser Einstellungsprozess
Wir versuchen, unseren Einstellungsprozess klar, fair und respektvoll gegenüber Ihrer Zeit zu gestalten. Unser Ziel ist es, bei jedem, der sich bewirbt, eine Rückmeldung zu erhalten, und wir werden Ihnen im Voraus mitteilen, wo Sie im Verfahren stehen.
Normalerweise sieht es so aus:
• Rufen Sie unser Talent Acquisition Team an
• Interview mit rollenspezifischen Fähigkeiten
Abhängig von der Rolle bitten wir Sie möglicherweise auch um eine kurze Präsentation, eine praktische oder technische Aufgabe oder ein werteorientiertes Gespräch. Wir erklären Ihnen, worum es geht, bevor etwas passiert.
Aufnahme bei CreateFuture
Wir glauben, dass vielfältige Teams bessere Arbeitsplätze und bessere Produkte schaffen. Wir möchten, dass CreateFuture ein Ort ist, an dem Menschen das Gefühl haben, sie selbst zu sein und ihre beste Arbeit zu leisten.
Wenn Sie während des Bewerbungsprozesses Anpassungen oder Unterstützung benötigen, wenden Sie sich einfach an uns. Wir werden tun, was wir können, um zu helfen.
Wir freuen uns auf Ihre Bewerbung!
Finden Sie Jobs in Großbritannien auf Arbeitnow
Quelle: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/xdesign/senior-data-engineer-230278)
Dieses Angebot stammt aus einem Partner-Feed. Bewerben Sie sich auf der Quell-Website.
Quelle: Xdesign
Inserat bereitgestellt von Xdesign.
