Inżynier danych personelu

Kryzys klimatyczny to najważniejsze wyzwanie naszych czasów, ale to także największa szansa na innowacje i wyzwanie, którego z dumą podejmujemy. W Overstory wykorzystujemy najnowocześniejszą technologię, aby stworzyć odporną sieć elektryczną, która zapewnia rozwój społeczności w obliczu zmian w naszym świecie.

Siatka jest podstawą życia, jakie znamy. Zasila szpitale, utrzymuje świeżość żywności i zapewnia społecznościom stały kontakt. Jednak ekstremalne warunki pogodowe, starzejąca się infrastruktura i rosnące ryzyko pożarów wywierają presję na ten krytyczny system. Wszystko to razem sprawia, że ​​branża elektroenergetyczna stanowi największą szansę na walkę ze zmianami klimatycznymi.

Jedna z głównych przyczyn katastrofalnych pożarów i przerw w dostawie prądu? Drzewa i zarośla wchodzące w kontakt z liniami energetycznymi.

Właśnie tam pomagamy. W Overstory wykorzystujemy sztuczną inteligencję i zaawansowane zdjęcia satelitarne, aby identyfikować i ustalać priorytety zagrożeń związanych z roślinnością, zanim się one zmaterializują. Dostarczając przedsiębiorstwom użyteczności publicznej krytyczną analizę tych zagrożeń, pomagamy zapobiegać przestojom, ograniczać ryzyko pożarów i przyspieszać przejście na bezpieczniejszą, bardziej odporną sieć.

Nasz zespół obejmuje Amerykę i Europę oraz współpracujemy z partnerami z branży użyteczności publicznej w obu Amerykach i poza nimi. Jesteśmy entuzjastami spędzania czasu na świeżym powietrzu, muzykami, artystami, sportowcami, rodzicami i poszukiwaczami przygód. Łączy nas pasja rozwiązywania złożonych problemów, zaangażowanie w działania klimatyczne i przekonanie, że technologia powinna być siłą napędową dobra.

Dołącz do nas i pomóż nam wspólnie budować bardziej odporny świat.

Rola i zespół

Jako inżynier danych w Overstory będziesz kierować projektowaniem i skalowaniem platformy danych, która umożliwia analizę roślinności opartą na sztucznej inteligencji w Overstory. Nasza analiza polega na przesyłaniu ogromnych ilości zdjęć satelitarnych, wniosków z modeli i danych sieci użyteczności publicznej za pośrednictwem zorganizowanych rurociągów w sposób niezawodny, powtarzalny i terminowy, aby pomóc klientom w podejmowaniu decyzji. Będziesz właścicielem architektury tej platformy i wyznaczysz kierunek jej rozwoju.

Będziesz ściśle współpracować z inżynierami zajmującymi się danymi, uczeniem maszynowym i inżynierami produktu, a także zespołami ds. produktów, aby mieć pewność, że dane przepływające do naszych modeli i wysyłane do naszych klientów równoważą pragmatyczne dostarczanie z trwałością, identyfikowalnością i skalowalnością. Jako starszy lider techniczny będziesz mentorem innych inżynierów, będziesz podejmować decyzje dotyczące architektury i wyznaczać standardy w zakresie projektowania rurociągów, granic usług i jakości danych w Overstory.

Wymagania dotyczące strefy czasowej: Europa (GMT/WET, CET, EET) i wschodnia Ameryka Północna (NST, AST, EST)

Co zrobisz

We współpracy z specjalistami zajmującymi się danymi, systemem uczenia maszynowego i współpracownikami ds. produktu będziesz:

• Projektuj i rozwijaj naszą warstwę orkiestracji — wykresy zasobów, kontrole jakości, strategie partycjonowania i wzorce zapewniające niezawodne skalowanie.

• Projektuj i utrzymuj produkcyjne potoki danych dla wielkoskalowych danych geoprzestrzennych i czasowych, od przyjęcia, poprzez transformację, aż do dostarczenia.

• Kierowanie pracami projektowymi systemu na całej platformie danych, w tym granicami usług, kontraktami dotyczącymi danych i projektowaniem uwzględniającym związane z nimi tryby awarii.

• Przejście na architekturę zorientowaną na usługi, oddzielając ściśle powiązane komponenty w usługi, które zespoły mogą posiadać i wdrażać niezależnie.

• Twórz przepływy pracy sterowane zdarzeniami, zastępując kruche łączenie i ręczną koordynację trwałymi wzorcami przesyłania wiadomości.

• Ustanów ramy obserwowalności, testowania i jakości danych, aby problemy pojawiały się, zanim klienci je zobaczą, umożliwiając prześledzenie i wyjaśnienie wszelkich wyników.

• Bądź mentorem dla inżynierów i definiuj standardy budowania, testowania i obsługi systemów danych.

Umiejętności i doświadczenie

• Doświadczenie rozwijające się na styku inżynierii danych, systemów rozproszonych i danych naukowych na dużą skalę; głęboko zmotywowani możliwością zmniejszenia ryzyka pożarów lasów i poprawy odporności sieci dzięki lepszym wzorcom danych i infrastrukturze

• Ponad 10 lat doświadczenia w projektowaniu i budowaniu potoków i systemów danych klasy produkcyjnej

• Głębokie, praktyczne doświadczenie z Dagsterem — orkiestracja oparta na zasobach, partycjach, czujnikach i operacyjnej stronie uruchamiania go w środowisku produkcyjnym (porównywalne doświadczenie z Airflow, Prefect lub podobnym jest rozsądnym substytutem, jeśli jesteś gotowy, aby zagłębić się w Dagster)

• Sprawdzone osiągnięcia w budowaniu i obsłudze potoków danych na dużą skalę, z prawdziwym wyczuciem idempotencji, uzupełniania i partycjonowania

• Doświadczenie w przygotowywaniu systemów do obsługi okresów dużego zapotrzebowania, ze szczególnym uwzględnieniem najlepszych praktyk w zakresie testowalności i skalowalności

• Silne umiejętności projektowania systemów — potrafisz uzasadnić granice, kontrakty, sprzężenia i tryby awarii oraz wyjaśnić kompromisy osobom, które będą z nich korzystać i budować na nich

• Praktyczne doświadczenie w projektowaniu architektury zorientowanej na usługi, w tym wersjonowanie i utrzymywanie funkcjonalności poprzez migracje

• Dobra znajomość języka Python i doświadczenie z Google Cloud

• Doświadczenie z Pub/Sub i wzorcami opartymi na zdarzeniach

• Silne umiejętności komunikacyjne i umiejętność współpracy w zakresie inżynierii, uczenia maszynowego i produktu

• Komfortowe prowadzenie dyskusji architektonicznych i mentorowanie innych inżynierów

• Doświadczenie w zespole pracującym zdalnie i globalnie rozproszonym

Miło mieć

• Komfort pracy z danymi geoprzestrzennymi i sposobami ich przechowywania

• Doświadczenie w budowaniu potoków danych, które wspomagają uczenie i wnioskowanie uczenia maszynowego

• Doświadczenie w zakresie narzędzi inżynierii analitycznej i modelowania magazynu w BigQuery

• Infrastruktura jako kod i komfort posiadania systemów w środowisku produkcyjnym

• Doświadczenie w teledetekcji, leśnictwie lub sektorze użyteczności publicznej

Uwaga: Wierzymy, że wszyscy ludzie są zdolni do wielkich rzeczy. Zachęcamy do aplikowania, nawet jeśli nie spełniasz wszystkich wymagań wymienionych w niniejszym opisie stanowiska.

Co oferujemy

• Konkurencyjne wynagrodzenie i świadczenia zależne od lokalizacji

• Elastyczne, autonomiczne i oparte na współpracy środowisko pracy oparte na zaufaniu – dni pracy budujemy wokół naszego życia, a nie odwrotnie…

Źródło: Praca zdalna w UE (https://euremotejobs.com/job/staff-data-engineer-2/)