Starszy inżynier danych

O Nebiusie:

Nebius wyznacza nową erę w infrastrukturze chmurowej dla globalnej gospodarki opartej na sztucznej inteligencji. Budujemy kompleksową platformę chmurową AI, która wspiera programistów i przedsiębiorstwa od szkolenia danych i modeli po wdrożenie produkcyjne, bez kosztów i złożoności budowania dużej wewnętrznej infrastruktury AI/ML.

Zbudowany przez inżynierów dla inżynierów. Od orkiestracji procesorów graficznych na dużą skalę po optymalizację wnioskowania – jesteśmy odpowiedzialni za trudne problemy związane z obliczeniami, pamięcią masową, siecią i zastosowaną sztuczną inteligencją.

Jesteśmy notowani na giełdzie Nasdaq (NBIS) z siedzibą w Amsterdamie. Mamy globalny zasięg z ośrodkami badawczo-rozwojowymi w Europie, Wielkiej Brytanii, Ameryce Północnej i Izraelu. Nasz zespół liczący ponad 1500 osób składa się z setek inżynierów posiadających głęboką wiedzę specjalistyczną w zakresie sprzętu, oprogramowania oraz badań i rozwoju sztucznej inteligencji.

Rola

Zespół inżynierii danych tworzy i obsługuje platformę danych, która obsługuje analitykę, analizę biznesową, raportowanie operacyjne i produkty oparte na danych w całym Nebiusie. Pozyskujemy dane z systemów wewnętrznych i zewnętrznych, opracowujemy niezawodne potoki transformacji i modele danych oraz udostępniamy zaufane zbiory danych zespołom biznesowym i produktowym.

Poszukujemy starszego inżyniera danych, który będzie właścicielem znacznej części naszej platformy danych i będzie dostarczał kompleksowe produkty związane z danymi. Zamienisz niejednoznaczne potrzeby biznesowe w pragmatyczne rozwiązania techniczne, dokonasz kompromisów w zakresie architektury i wdrożenia oraz poprawisz niezawodność, skalowalność i użyteczność naszego ekosystemu danych.

Będziesz ściśle współpracować z zespołami zajmującymi się produktami, platformami i biznesem, pomagając im efektywnie wykorzystywać dane, jednocześnie zapewniając, że nasze systemy będą łatwe w utrzymaniu i godne zaufania w miarę rozwoju Nebiusa.

Twoje obowiązki:

• Posiadaj uprawnienia do projektowania, dostarczania i obsługi złożonych potoków danych, zbiorów danych i komponentów platformy.

• Przekładaj wymagania biznesowe i analityczne na skalowalne modele danych, niezawodne produkty oparte na danych i jasne plany techniczne.

• Projektuj i rozwijaj architekturę danych, przechowywanie, przetwarzanie i wzorce orkiestracji dla obciążeń na dużą skalę.

• Popraw jakość danych, ich obserwowalność, pochodzenie i reakcję na incydenty w przypadku krytycznych zbiorów danych i potoków.

• Badanie i rozwiązywanie trudnych problemów z wydajnością, niezawodnością i poprawnością danych w środowisku produkcyjnym.

• Ustanowienie narzędzi, konwencji i automatyzacji wielokrotnego użytku, które poprawiają produktywność inżynierów i zmniejszają ryzyko operacyjne.

• Współpracuj z zespołami ds. produktów i interesariuszami biznesowymi w celu zdefiniowania kontraktów dotyczących danych, priorytetów i kryteriów sukcesu.

• Wkład w kierunek techniczny poprzez przeglądy projektów, przemyślane kompromisy i dokumentację.

• Wspieraj i mentoruj innych inżynierów poprzez recenzje, dopasowywanie się i dzielenie się wiedzą.

• Weź udział w rotacji dyżurów i przejmij odpowiedzialność za poprawę kondycji operacyjnej obsługiwanych systemów.

Niezbędne rzeczy:

• Ponad 5 lat doświadczenia w inżynierii danych, inżynierii backendu lub na pokrewnym stanowisku; lub równoważne doświadczenie w dostarczaniu i obsłudze produkcyjnych systemów danych.

• Udokumentowane doświadczenie w niezależnym dostarczaniu złożonych potoków danych lub możliwości platformy danych od zdefiniowania problemu po operację produkcyjną.

• Dobra znajomość języka Python i SQL, w tym pisanie łatwego w utrzymaniu kodu produkcyjnego i optymalizacja nietrywialnych zapytań.

• Praktyczne doświadczenie z narzędziami do orkiestracji przepływu pracy, takimi jak Airflow, Prefect lub Dagster.

• Silne zrozumienie modelowania danych, w tym projektowanie łatwych do utrzymania modeli analitycznych i kontraktów dotyczących danych dla wielu konsumentów.

• Solidna wiedza na temat architektur danych i systemów przechowywania, w tym kompromisów między różnymi podejściami do przetwarzania i przechowywania.

• Doświadczenie w projektowaniu pod kątem niezawodności: testowanie, monitorowanie, weryfikacja jakości danych, alarmowanie, debugowanie i rozwiązywanie incydentów.

• Umiejętność podejmowania decyzji technicznych w obliczu niejasności, jasnego wyjaśniania kompromisów i skutecznej współpracy z inżynierami i interesariuszami nietechnicznymi

Miło mieć:

• Doświadczenie z platformami danych czasu rzeczywistego lub sterowanymi zdarzeniami oraz technologiami przesyłania strumieniowego.

• Doświadczenie w tworzeniu lub obsłudze usług chmurowych za pomocą Dockera i Kubernetesa.

• Znajomość infrastruktury jako kodu, w szczególności Terraform.

• Doświadczenie w zakresie zarządzania danymi, kontroli dostępu, prywatności i wymogów zgodności, takich jak RODO lub SOC 2.

• Doświadczenie w zakresie narzędzi lub struktur zapewniających możliwość obserwacji danych i jakości, takich jak Wielkie Oczekiwania.

• Doświadczenie w ulepszaniu standardów inżynieryjnych poprzez wspólne biblioteki, narzędzia platformy, dokumentację techniczną lub mentoring.

W ramach procesu przeprowadzamy wywiady kodujące.

Korzyści i korzyści:

• Konkurencyjne wynagrodzenie

• Możliwości rozwoju kariery i uczenia się

• Elastyczność i odpowiedzialność

• Kultura współpracy i innowacyjności

• Możliwość pracy nad wpływowymi projektami AI

• Międzynarodowe środowisko i utalentowane zespoły

Jak wygląda praca w firmie Nebius:

Szybkość działania – Odważne myślenie – Stały rozwój – Znaczący wpływ – Zaufanie i prawdziwa własność – Możliwość kształtowania przyszłości sztucznej inteligencji

Oświadczenie o równych szansach:

Nebius jest pracodawcą zapewniającym równe szanse. Zależy nam na wspieraniu włączającego i zróżnicowanego miejsca pracy oraz zapewnianiu równych możliwości zatrudnienia we wszystkich aspektach zatrudnienia. Nie dyskryminujemy ze względu na rasę, kolor skóry, religię, płeć (w tym ciążę), narodowość, pochodzenie, wiek, niepełnosprawność, informacje genetyczne, stan cywilny, status weterana, orientację seksualną, tożsamość lub ekspresję płciową lub jakąkolwiek inną cechę chronioną przez obowiązujące prawo.

Kandydaci muszą posiadać zezwolenie na pracę w kraju, w którym składają wniosek, a jako warunek zatrudnienia będą zobowiązani do przedstawienia dowodu potwierdzającego uprawnienia do zatrudnienia.

Jeśli potrzebujesz zakwaterowania w trakcie procesu aplikacyjnego, daj nam znać.

Źródło: Jobicy (https://jobicy.com/jobs/156537-senior-data-engineer-5)