Główny inżynier danych

Firma Aker Systems została założona w 2017 roku przez zespół doświadczonych specjalistów w dziedzinie technologii, którzy dostrzegli szansę na zapewnienie dużym organizacjom wysoce bezpiecznych platform danych korporacyjnych. Budujemy i obsługujemy przełomową, ultrabezpieczną, wysokowydajną infrastrukturę danych opartą na chmurze dla przedsiębiorstw. Nasze autorskie rozwiązania technologiczne zwiększają wydajność i redukują koszty, pomagając jednocześnie naszym klientom usprawnić zarządzanie i udostępnianie danych w ich organizacjach.

W 2024 r. firma Aker Systems zdobyła nagrodę Breakthrough Culture Awards, wyróżniającą rozwijające się firmy, które stawiają kulturę na pierwszym miejscu. W 2020 r. firma Aker Systems została uznana za „One to Watch” w ścieżce technologicznej Sunday Times. Firma została także wyróżniona w konkursie Thames Valley Tech Awards 2020; zdobywając nagrody w kategoriach Firma roku Thames Valley Tech, Emerging Tech Company i High Growth Tech Business. Zachęcamy do aplikowania osoby z różnych środowisk i o różnej tożsamości. Zależy nam na utrzymaniu włączającego i wspierającego miejsca, w którym możesz wykonywać swoją najlepszą pracę.

Poszukujemy doświadczonego i praktycznego głównego inżyniera danych do projektowania, budowania i rozwijania bezpiecznych, skalowalnych platform danych dla klientów z brytyjskiego sektora publicznego i użyteczności publicznej.

Będziesz ściśle współpracować z architektami, inżynierami i interesariuszami klientów, aby dostarczać nowoczesne rozwiązania w zakresie danych w chmurze, które wspierają przypadki użycia operacyjnego, analitycznego i opartego na sztucznej inteligencji. Stanowisko to łączy w sobie przywództwo techniczne z praktyczną inżynierią, pomagając klientom w modernizacji ich zasobów danych, zapewniając jednocześnie bezpieczeństwo, niezawodność i skalowalność rozwiązań.

Pracując nad wieloma projektami, będziesz kierować rozwojem potoków danych wsadowych i w czasie rzeczywistym, wspierać podejmowanie decyzji dotyczących architektury i pomagać w ustalaniu najlepszych praktyk inżynieryjnych w zespołach dostawczych.

Niezbędne jest duże doświadczenie z technologiami przesyłania strumieniowego w czasie rzeczywistym.

Kluczowe obowiązki

• Kierowanie projektowaniem, rozwojem i wdrażaniem bezpiecznych, skalowalnych potoków danych i komponentów platform danych.

• Projektuj i wdrażaj rozwiązania do przesyłania strumieniowego w trybie wsadowym i w czasie rzeczywistym, korzystając z nowoczesnych architektur sterowanych zdarzeniami.

• Własne decyzje projektowe techniczne w ramach projektów, równoważące skalowalność, bezpieczeństwo, wydajność i wymagania dotyczące dostawy.

• Prowadzić warsztaty techniczne, sesje odkrywcze i dyskusje na temat architektury z interesariuszami klienta.

• Oceń istniejące platformy danych klientów i zaprojektuj praktyczne podejścia do modernizacji, migracji i integracji.

• Twórz i utrzymuj możliwości przyjmowania, przekształcania i integracji danych w różnych źródłach danych.

• Rozwijaj platformy danych natywne w chmurze, korzystając z usług AWS i technologii open source.

• Zapewnienie, że wymagania dotyczące jakości danych, zarządzania, pochodzenia i bezpieczeństwa są uwzględniane w całym cyklu życia danych.

• Najlepsze praktyki inżynierii dysków, w tym przeglądy kodu, testy automatyczne, CI/CD i infrastruktura jako kod.

• Wspieraj współpracę z wieloma klientami, pomagając zespołom dostawczym utrzymać stałą jakość i standardy inżynieryjne.

• Mentoruje i wspiera inżynierów w zespołach projektowych, zapewniając wskazówki techniczne i przywództwo.

• Wykonywanie modelowania danych, dostrajania wydajności i analizy przyczyn źródłowych w celu rozwiązywania złożonych problemów z danymi i platformą.

Niezbędne umiejętności i doświadczenie

Przesyłanie strumieniowe w czasie rzeczywistym i inżynieria danych

• Duże doświadczenie komercyjne w projektowaniu i wdrażaniu platform danych strumieniowych w czasie rzeczywistym.

• Praktyczne doświadczenie z technologiami takimi jak Apache Kafka, AWS Kinesis, Apache Flink, Spark Streaming, Apache Pulsar lub podobnymi technologiami sterowanymi zdarzeniami.

• Doświadczenie w budowaniu odpornych potoków danych o dużej objętości i małych opóźnieniach w środowiskach produkcyjnych.

• Silne zrozumienie nowoczesnych wzorców inżynierii danych, w tym architektur wsadowych, strumieniowych i hybrydowych.

Inżynieria danych i bazy danych

• Rozległe doświadczenie w tworzeniu i obsłudze platform danych na skalę korporacyjną.

• Silne umiejętności SQL i doświadczenie w projektowaniu modeli danych dla obciążeń analitycznych i operacyjnych.

• Biegłość w Pythonie lub innym nowoczesnym języku programowania używanym w inżynierii danych.

• Doświadczenie w konfigurowaniu, dostrajaniu i optymalizacji relacyjnych baz danych i baz danych NoSQL.

Inżynieria chmury i oprogramowania

• Duże doświadczenie w pracy z usługami chmurowymi AWS, w tym EC2, RDS, Lambda, Athena, Glue, S3 i IAM.

• Doświadczenie w pracy w środowiskach dostaw Agile.

• Silne zrozumienie praktyk programowania opartego na testach (TDD) i testów automatycznych.

• Doświadczenie we wdrażaniu rurociągów CI/CD i automatyzacji inżynierii.

• Silne zrozumienie zasad infrastruktury jako zasad Kodeksu.

• Doświadczenie w korzystaniu z systemów kontroli wersji, takich jak Git.

Środowiska regulowane

• Doświadczenie w dostarczaniu rozwiązań technologicznych w brytyjskim sektorze publicznym, usługach użyteczności publicznej, energetyce, wodzie, usługach finansowych lub innych branżach podlegających ścisłym regulacjom.

• Zrozumienie zagadnień związanych z bezpieczeństwem, zarządzaniem i zgodnością w środowiskach regulowanych.

Pożądane umiejętności

• Doświadczenie z Terraformem.

• Doświadczenie z Dockerem i Kubernetesem.

• Znajomość Ansible i Packera.

• Doświadczenie w administrowaniu systemami Linux i Windows.

• Doświadczenie we wspieraniu sztucznej inteligencji, uczenia maszynowego lub zaawansowanych platform analitycznych.

• Doświadczenie w pracy nad programami wymagającymi poświadczenia bezpieczeństwa rządu Wielkiej Brytanii.

Czego szukamy

• Silne przywództwo techniczne i umiejętności rozwiązywania problemów.

• Umiejętność skutecznego komunikowania się z interesariuszami zarówno technicznymi, jak i nietechnicznymi.

• Doświadczenie w pracy w złożonych, regulowanych środowiskach.

• Podejście oparte na współpracy i chęć wspierania i mentorowania innych.

• Koncentracja na dostarczaniu praktycznych rozwiązań tworzących wartość dla klientów.

• Pasja tworzenia niezawodnych, skalowalnych i bezpiecznych platform danych.

Edukacja

Licencjat z informatyki, inżynierii oprogramowania, inżynierii danych, matematyki lub pokrewnej dyscypliny technicznej lub równoważne doświadczenie praktyczne.
Aker Systems Atrybuty…

Źródło: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/akersystems/remote-lead-data-engineer-315863)