Starszy inżynier oprogramowania, usługi związane z danymi i platformami

Lokalizacja: Berlin, Niemcy Status zdalny: Całkowicie zdalny (#LI-Remote)

LivePerson (NASDAQ: LPSN) jest liderem w dziedzinie zaufanej konwersacyjnej sztucznej inteligencji dla przedsiębiorstw i transformacji cyfrowej. Wiodące marki na świecie korzystają z naszej wielokrotnie nagradzanej platformy Conversational Cloud, aby łączyć się z milionami konsumentów. Co miesiąc obsługujemy prawie miliard interakcji konwersacyjnych, zapewniając wyjątkowo bogatą analizę danych i narzędzia bezpieczeństwa, aby uwolnić moc konwersacyjnej sztucznej inteligencji w celu uzyskania lepszych wyników biznesowych. Fast Company uznała LivePerson za najbardziej innowacyjną firmę zajmującą się sztuczną inteligencją na świecie.

Przegląd pozycji

Poszukujemy starszego inżyniera oprogramowania, który dołączy do naszego globalnie rozproszonego zespołu Data Platform w Europie i odegra kluczową rolę w kształtowaniu przyszłości naszego ekosystemu danych.

Na tym wpływowym indywidualnym współpracowniku będziesz kierować modernizacją naszej podstawowej platformy danych poprzez migrację potoków danych o znaczeniu krytycznym ze starszych środowisk Hadoop, Spark i Impala do skalowalnej, natywnej dla chmury architektury Databricks. Będziesz miał okazję podejmować decyzje techniczne, wpływać na architekturę platformy i budować podstawy, które będą podstawą danych w całej firmie.

Jeśli jesteś praktycznym inżynierem, który lubi rozwiązywać złożone wyzwania techniczne, budować nowoczesne platformy danych i wywierać trwały wpływ na dużą skalę, z przyjemnością usłyszymy o Tobie!

Będziesz: kluczowe obowiązki i wpływ

•
Poprowadź modernizację naszej platformy danych: przejmij odpowiedzialność za migrację potoków danych o znaczeniu krytycznym ze starszych środowisk Hadoop, Spark i Impala do nowoczesnego, skalowalnego ekosystemu Databricks. Zreorganizujesz przepływy pracy ETL, skonwertujesz złożony SQL i bezproblemowo przeprowadzisz migrację integracji, połączeń i wpisów tajnych.

•
Przyspiesz rozwój dzięki inżynierii opartej na sztucznej inteligencji: wykorzystaj najnowocześniejsze asystenty kodowania AI, takie jak Claude i Codex, aby znacznie przyspieszyć migrację. Zamiast ręcznie przepisywać starszy kod, poprowadzisz narzędzia AI do konwersji SQL, unowocześnienia skryptów ETL, rozwikłania zależności i wygenerowania czystego, łatwego w utrzymaniu kodu – jednocześnie wykorzystując swoją wiedzę inżynieryjną do sprawdzania architektury, wydajności i jakości.

•
Twórz następną generację potoków danych: projektuj, rozwijaj i optymalizuj skalowalne przepływy pracy z danymi za pomocą Airflow i Databricks. Utworzysz odporne, wydajne potoki, które są niezawodne, ekonomiczne i zbudowane z myślą o obsłudze rosnących potrzeb biznesowych.

•
Champion Data Quality: Zapewnij dokładność i spójność migrowanych danych, wdrażając kompleksowe strategie walidacji i testowania. Będziesz odgrywać kluczową rolę w utrzymaniu integralności danych podczas migracji.

•
Popraw niezawodność platformy: pomóż osiągnąć doskonałość operacyjną, poprawiając praktyki obserwowalności, monitorowania i reagowania na incydenty. Przyczyniaj się do niezawodności usług poprzez SLO/SLA i uczestnicz w skalowalnej rotacji na wezwanie w celu wsparcia systemów produkcyjnych.

•
Zapewnij znaczący wpływ na biznes: wykorzystaj swoją wiedzę na temat analityki contact center, aby zbudować platformy, które zapewniają wgląd w rozmowy z klientami, raportowanie i analizę biznesową. Przyjmiesz sposób myślenia oparty na danych, projektując systemy, które są mierzalne, obserwowalne i stale ulepszane.

Masz: wymagane umiejętności i kwalifikacje

•
Rozległe doświadczenie w inżynierii oprogramowania: 6–8 lat doświadczenia w budowaniu i wspieraniu systemów rozproszonych i wielkoskalowych platform danych, ze sprawdzoną umiejętnością realizowania złożonych inicjatyw technicznych od projektu po produkcję.

•
Sprawdzone doświadczenie w modernizacji platform: praktyczne doświadczenie w kierowaniu lub odgrywaniu kluczowej roli w migracji platform danych przedsiębiorstwa ze starszych technologii — takich jak Hadoop, Spark, Hive lub Impala — do nowoczesnych rozwiązań opartych na chmurze, takich jak Databricks.

•
Głęboka wiedza specjalistyczna w zakresie Databricks: Dobra znajomość ekosystemu Databricks, w tym Jobs, Delta Lake, konfiguracji i optymalizacji klastrów oraz migracji złożonych obciążeń SQL z Impala lub Hive do Spark SQL.

•
Umiejętności związane z potokiem danych i orkiestracją: Zaawansowane umiejętności programowania w języku Python na potrzeby rozwoju ETL oraz rozległe doświadczenie w projektowaniu, budowaniu, debugowaniu i optymalizacji produkcyjnych potoków danych oraz przepływów pracy w zakresie orkiestracji przy użyciu Airflow i Databricks.

•
Znajomość chmury i infrastruktury: doświadczenie w pracy z natywnymi platformami danych w chmurze, w szczególności Google Cloud Platform (GCP) i Google Cloud Storage (GCS), ze zrozumieniem kontenerowych architektur mikrousług opartych na Kubernetes (GKE).

• Doświadczenie w zakresie nowoczesnych platform danych:

•
Dobra znajomość rozproszonych architektur przetwarzania danych i kompromisów między przetwarzaniem danych w czasie rzeczywistym a przetwarzaniem wsadowym.

•
Praktyczne doświadczenie ze starszymi technologiami dużych zbiorów danych, w tym Hadoop i MapReduce, z możliwością modernizacji i migracji złożonych ekosystemów danych.

•
Znajomość wzorców integracji danych, w tym interfejsów API, konektorów, webhooków i architektur sterowanych zdarzeniami.

• Inżynieria chmury i platform:

•
Doświadczenie w budowaniu, wdrażaniu i zarządzaniu natywnymi platformami danych w chmurze, preferowane doświadczenie w Google Cloud Platform (GCP).

•
Znajomość środowisk kontenerowych i obciążeń związanych z danymi w Kubernetesie.

•
Silny nacisk na budowanie wysoce niezawodnych, skalowalnych i obserwowalnych platform, z doświadczeniem we wdrażaniu monitorowania, walidacji i kontroli jakości danych w celu zapewnienia pomyślnej migracji.

• Tworzenie oprogramowania wspomaganego sztuczną inteligencją:

•
Doświadczenie w korzystaniu z narzędzi programistycznych opartych na sztucznej inteligencji, takich jak Claude, Codex lub podobnych asystentów kodowania, w celu przyspieszenia tworzenia oprogramowania, modernizacji kodu i migracji platform.

•
Umiejętność skutecznego monitowania, przeglądania i sprawdzania poprawności kodu wygenerowanego przez sztuczną inteligencję, przy jednoczesnym zapewnieniu integralności architektury, łatwości konserwacji i gotowości produkcyjnej.

• Współpraca i komunikacja:

•
Doskonałe umiejętności komunikacji i współpracy, z doświadczeniem w zakresie współpracy między zespołami inżynieryjnymi w wielu strefach czasowych.…

Źródło: Jobicy (https://jobicy.com/jobs/153692-senior-software-engineer-data-platform-services)