Lider zespołu, inżynieria danych

Poszukujemy Lidera Zespołu Inżynierii Danych, który pokieruje zespołem Data Platform w DataSnipper.

Każda decyzja, jaką DataSnipper podejmuje na temat swoich produktów, odbywa się za pośrednictwem platformy danych: która obejmuje grunty, którzy klienci uzyskują wartość, za co wystawiamy rachunki, co dalej naprawiamy i które funkcje sztucznej inteligencji dodają największą wartość. Będziesz kierować zespołem dwóch inżynierów danych, którzy są właścicielami systemów, które to umożliwiają. Oznacza to, w jaki sposób zdarzenia użycia są rejestrowane w coraz większej liczbie produktów, w jaki sposób stają się one godnymi zaufania modelami w Snowflake oraz w jaki sposób Sukces Klienta, Produkt i GTM uzyskują odpowiedzi bez czekania na nas.

Jest to rola zawodnika-trenera w małym zespole o dużej liczbie właścicieli. Jesteś odpowiedzialny za ludzi, plan działania i kierunek techniczny, a także pozostajesz na tyle praktyczny, aby współpracować z zespołem i wiarygodnie wykonywać połączenia architektoniczne. W DataSnipper lider zespołu to nasz punkt wejścia do zarządzania inżynierią: ci sami ludzie, obowiązki związane z dostawą i produktem, co kierownik ds. inżynierii, w mniejszym zespole.

Jesteśmy garstką ludzi obsługujących całą firmę, więc Twoja ocena tego, czego nie budować, ma większe znaczenie niż to, co wysyła zespół.

O DataSnipperze

DataSnipper jest siłą napędową inteligentnej platformy automatyzacji, która zmienia świat audytu i finansów.
Założona w 2017 roku firma DataSnipper gwałtownie wzrosła i jest obecnie OFICJALNIE najszybciej rozwijającą się firmą programistyczną w Holandii według Deloitte Fast50, a niedawno osiągnęła status Unicorn w naszej ostatniej rundzie finansowania. Z ponad 400 000 użytkowników w ponad 125 krajach i drugą bazą w sercu Nowego Jorku, DataSnipper wprowadza zmiany. I na tym nie poprzestaniemy. W DataSnipper zawsze poszukujemy innowatorów, którzy myślą nieszablonowo. Nowe pomysły są nie tylko mile widziane w DataSnipper – są one niezbędne.

Co posiada Twój zespół

Zespół Data Platform działa w trzech obszarach:

• Platforma danych: niezawodna, skalowalna infrastruktura, która dostarcza właściwe dane we właściwe miejsce

• Analityka wewnętrzna: platforma samoobsługowa, dzięki której każdy zespół może uzyskać dostęp do danych bez biletu

• Analityka skierowana do klienta: pulpity nawigacyjne i eksporty, z których klienci korzystają, aby zobaczyć wartość, jaką uzyskują dzięki DataSnipper

Konkretnie, będziesz mieć dostęp do miliardów zdarzeń użycia pochodzących z naszego dodatku Excel, aplikacji internetowych i zaplecza produktów za pośrednictwem Azure Event Hubs do Snowflake; osiedle dbt zbudowane na zasadach medalionu i zarządzane w dbt Cloud; Infrastruktura Snowflake i Azure zarządzana za pomocą Terraform; oraz zestaw zespołów produktowych wysyłających agentów AI szybciej, niż jesteśmy w stanie ich oprzyrządować.
Znajdziesz tu także prawdziwe, nazwane otwarte problemy, a nie uporządkowaną platformę: przechwytywanie zdarzeń w połowie konsolidacji, wiele metod przypisywania użytkowników oraz warstwę jakości danych, która została zaprojektowana, ale jeszcze nie zbudowana. Wolelibyśmy powiedzieć to z góry.

Co zrobisz

Poprowadź zespół

• Poprowadź zespół złożony z dwóch inżynierów danych poprzez wyniki, a nie zadania: wyznacz zespołowi jasne cele i zaufaj mu, że wymyśli, jak to osiągnąć.

• Spraw, aby zespół był mierzalnie lepszy: podnieś poprzeczkę inżynieryjną, stwórz dla każdego inżyniera większe problemy i rozwiązuj problemy z wydajnością bezpośrednio, gdy się pojawią

• Prowadź regularne spotkania 1:1, przekazuj jasne i terminowe informacje zwrotne oraz poznaj cele i rozwój każdego inżyniera

• Wspieraj kulturę eksperymentowania, uczenia się, dokumentacji i doskonałości operacyjnej

• Weź udział w procesie rekrutacji i pomóż kształtować zakres rozwoju zespołu

Własny kierunek i dostawa

• Ściśle współpracuj z działem ds. produktu, inżynierii, sukcesu klienta i GTM, aby kształtować plan działania zespołu, przekształcając niejasne żądania danych w dobrze określoną pracę o określonym zakresie

• Uczyń kompromisy małym zespołem obsługującym potrzeby całej firmy: co zbudować, co odłożyć i kiedy prośba nie powinna stać się potokiem

• Wyznacz kierunek techniczny i wykonaj polecenia architektoniczne, które kształtują systemy zespołu

• Dbaj o widoczność i kontrolę wydajności i kosztów Snowflake, długu technologicznego, zależności i obowiązków związanych z przestrzeganiem zasad (rejestrowanie audytów, usuwanie luk w zabezpieczeniach, dowody Vanta)

• Bądź osobą, do której przychodzą inne zespoły inżynierów, gdy muszą oprzyrządować coś nowego

Bądź na bieżąco z platformą danych

• Współtworzenie architektury pozyskiwania zdarzeń od początku do końca: Azure Event Hubs, Snowpipe, Fivetran i nasze wspólne biblioteki klienta zdarzeń Python/TypeScript

• Twórz i przeglądaj potoki transformacji dbt, które pozostaną niezawodne w miarę wzrostu wolumenu, liczby źródeł i złożoności modelu

• Definiuj i egzekwuj kontrakty i schematy zdarzeń, aby zespoły produktowe mogły opracowywać nowe funkcje bez cichych awarii w dalszej części procesu

• Rozwijaj podstawowe modele danych (zdarzenie, użytkownik, licencja, firma) i integruj nowe źródła, takie jak backendy produktów, MongoDB, HubSpot i rozliczenia

• Kierowanie pracami związanymi z odwrotnym ETL i aktywacją, które wypychają modelowane dane z powrotem do raportowania HubSpot, MongoDB, Postgres i GTM

Co przynosisz

Przywództwo

• Co najmniej 1 rok doświadczenia jako wiodący inżynierowie jako lider zespołu lub menedżer inżynierii: rozmowy 1:1, informacje zwrotne, wyznaczanie celów, wydajność i rozwój

• Styl przywództwa wzmacniający: kierujesz poprzez wyniki i zaufanie, a nie poprzez przydzielanie zadań

• Wczesne dowody na rozwój inżynierów i podnoszenie poprzeczki zespołu oraz chęć bezpośredniego rozwiązywania problemów związanych z wydajnością

• Silne predyspozycje do produktu: możesz kwestionować sformułowanie żądania, przekładać potrzeby interesariuszy na rozwiązania techniczne i dokonywać kompromisów w ramach planu działania

Inżynieria danych

• Ponad 7 lat doświadczenia w inżynierii danych lub na ściśle powiązanym stanowisku w obszarze backendu/platformy, z udokumentowanym doświadczeniem w zakresie kompleksowego posiadania obszaru platformy danych

• Głęboki SQL i mocny Python, w tym optymalizacja zapytań i dostrajanie wydajności w magazynie w chmurze

• Doświadczenie produkcyjne z hurtownią danych w chmurze (używamy Snowflake) i nowoczesnym frameworkiem transformacji (używamy dbt)

• Doświadczenie z pozyskiwaniem sterowanym zdarzeniami/strumieniowaniem i jego trybami awarii: dryf schematu, duplikacja, spóźnione dane, wypełnienia…

Źródło: Arbeitnow (https://www.arbeitnow.nl/jobs/companies/datasnipper/team-lead-data-engineering-amsterdam-286359)