Starszy inżynier HPC, obliczenia GPU

O Nebiusie:

Nebius wyznacza nową erę w infrastrukturze chmurowej dla globalnej gospodarki opartej na sztucznej inteligencji. Budujemy kompleksową platformę chmurową AI, która wspiera programistów i przedsiębiorstwa od szkolenia danych i modeli po wdrożenie produkcyjne, bez kosztów i złożoności budowania dużej wewnętrznej infrastruktury AI/ML.

Zbudowany przez inżynierów dla inżynierów. Od orkiestracji procesorów graficznych na dużą skalę po optymalizację wnioskowania – jesteśmy odpowiedzialni za trudne problemy związane z obliczeniami, pamięcią masową, siecią i zastosowaną sztuczną inteligencją.

Jesteśmy notowani na giełdzie Nasdaq (NBIS) z siedzibą w Amsterdamie. Mamy globalny zasięg z ośrodkami badawczo-rozwojowymi w Europie, Wielkiej Brytanii, Ameryce Północnej i Izraelu. Nasz zespół liczący ponad 1500 osób składa się z setek inżynierów posiadających głęboką wiedzę specjalistyczną w zakresie sprzętu, oprogramowania oraz badań i rozwoju sztucznej inteligencji.

Rola

Poszukujemy starszego inżyniera klastrów HPC, który dołączy do naszego zespołu i odegra kluczową rolę w rozwoju naszej najnowocześniejszej platformy hiperskalera. Zespół GPU i InfiniBand jest odpowiedzialny za ulepszanie i optymalizację podstawowych komponentów naszej platformy Cloud, ze szczególnym naciskiem na przetwarzanie GPU, sieci InfiniBand i stos KVM/QEMU. Będziesz ściśle współpracować z technologiami wirtualizacji sprzętu i emulacji urządzeń, zapewniając wysoką wydajność i bezpieczeństwo w środowiskach HPC i multi-GPU. Rola ta polega na analizowaniu, rozwiązywaniu problemów i ulepszaniu infrastruktury w celu obsługi nowego sprzętu, dostrajaniu wydajności systemu oraz automatyzacji wykrywania i rozwiązywania błędów w złożonym systemie.

Na tym stanowisku będziesz odpowiedzialny za:

• Dostrajanie wydajności klastrów GPU i sieci InfiniBand w celu zapewnienia optymalnej pracy w środowiskach HPC i opartych na GPU.

• Analizowanie i rozwiązywanie głównych przyczyn problemów związanych z procesorami graficznymi i sieciami InfiniBand oraz proponowanie działań naprawczych.

• Integracja nowego sprzętu z istniejącą infrastrukturą, w tym obsługa nowego sprzętu GPU za pośrednictwem stosów oprogramowania, takich jak Kubernetes, QEMU i KVM.

• Udoskonalanie systemów automatyzacji w celu proaktywnego monitorowania, wykrywania i rozwiązywania problemów w środowiskach GPU i InfiniBand.

• Konfigurowanie i zarządzanie urządzeniami GPU oraz sieciami InfiniBand, zapewniające wydajne i niezawodne działanie.

Oczekujemy, że będziesz mieć:

• Ponad 5 lat doświadczenia zawodowego w tworzeniu oprogramowania na poziomie systemowym (koncentrujące się na optymalizacji wydajności, programowaniu niskopoziomowym).

• Ponad 3 lata praktycznego doświadczenia z systemami Linux (administracja, rozwiązywanie problemów i dostrajanie wydajności).

• Dogłębne zrozumienie architektury serwerów, w tym urządzeń PCIe, kart sieciowych, systemu operacyjnego/jądra Linux i systemów obliczeń o wysokiej wydajności (HPC).

• Wysoka biegłość w jednym lub większej liczbie języków programowania zorientowanych na wydajność (C/C++, Go, Python).

Dodatkowym atutem będzie, jeśli posiadasz:

• Doświadczenie w kompleksowych testach GPU w środowisku klastrowym z wykorzystaniem sieci InfiniBand.

• Udokumentowane doświadczenie w analizowaniu i optymalizacji wydajności obciążeń HPC (np. symulacje, analiza danych, obciążenia AI/ML).

• Znajomość protokołów RDMA, RoCE i InfiniBand zapewniających wysoką wydajność komunikacji.

• Znajomość sieci definiowanych programowo (SDN) i doświadczenie w zakresie sieci klastrów HPC.

• Zrozumienie wirtualizacji QEMU/KVM i zarządzania środowiskami zwirtualizowanymi.

• Doświadczenie z platformami głębokiego uczenia się, takimi jak PyTorch i TensorFlow, oraz ich integracją z systemami HPC.

• Znajomość bibliotek komunikacji zbiorowej, takich jak MPI i NCCL, do przetwarzania rozproszonego.

W ramach procesu przeprowadzamy wywiady kodujące.

#LI-LH2

Korzyści i korzyści:

• Konkurencyjne wynagrodzenie

• Możliwości rozwoju kariery i uczenia się

• Elastyczność i odpowiedzialność

• Kultura współpracy i innowacyjności

• Możliwość pracy nad wpływowymi projektami AI

• Międzynarodowe środowisko i utalentowane zespoły

Jak wygląda praca w firmie Nebius:

Szybkość działania – Odważne myślenie – Stały rozwój – Znaczący wpływ – Zaufanie i prawdziwa własność – Możliwość kształtowania przyszłości sztucznej inteligencji

Oświadczenie o równych szansach:

Nebius jest pracodawcą zapewniającym równe szanse. Zależy nam na wspieraniu włączającego i zróżnicowanego miejsca pracy oraz zapewnianiu równych możliwości zatrudnienia we wszystkich aspektach zatrudnienia. Nie dyskryminujemy ze względu na rasę, kolor skóry, religię, płeć (w tym ciążę), narodowość, pochodzenie, wiek, niepełnosprawność, informacje genetyczne, stan cywilny, status weterana, orientację seksualną, tożsamość lub ekspresję płciową lub jakąkolwiek inną cechę chronioną przez obowiązujące prawo.

Kandydaci muszą posiadać zezwolenie na pracę w kraju, w którym składają wniosek, a jako warunek zatrudnienia będą zobowiązani do przedstawienia dowodu potwierdzającego uprawnienia do zatrudnienia.

Jeśli potrzebujesz zakwaterowania w trakcie procesu aplikacyjnego, daj nam znać.

Źródło: Jobicy (https://jobicy.com/jobs/156543-senior-hpc-engineer-gpu-compute)