Starszy inżynier danych

O marchewce:

Carrot to wiodąca globalna platforma opieki nad płodnością i rodziną, zbudowana na inteligentnej organizacji opieki: właściwych wskazówkach klinicznych we właściwym momencie, w kontekście życia każdego członka. Ponad tysiąc międzynarodowych pracodawców, planów opieki zdrowotnej i systemów opieki zdrowotnej ufa firmie Carrot w zakresie wspierania milionów członków w 195 krajach – od okresu przed ciążą poprzez menopauzę i najważniejsze momenty życia pomiędzy nimi. Kompleksowy program kliniczny firmy Carrot zapewnia sponsorom planu wiodące w branży oszczędności oraz wielokrotnie nagradzane doświadczenia i lepsze wyniki dla milionów ludzi na całym świecie.

Firma Carrot jest powszechnie uważana za osobę decydującą o innowacjach w opiece zdrowotnej, ponieważ została laureatką kilku najważniejszych nagród, w tym „Najbardziej innowacyjne firmy” magazynu Fast Company i „100 start-upów przełamujących bariery” magazynu CNBC. Firma jest regularnie cytowana przez wiodące światowe media – w tym The Economist, Bloomberg, The Wall Street Journal, NPR, ABC News i Harvard Business Review – jako wiodący głos w sprawie zdrowia cyfrowego, przyszłości pracy i zdrowia rodziny. Więcej informacji znajdziesz na get-carrot.com.

Szansa

Carrot poszukuje starszego inżyniera danych, który będzie kierował ewolucją, niezawodnością i skalowalnością naszej nowoczesnej infrastruktury danych w obszarach analityki, raportowania i analizy biznesowej. Na tym stanowisku będziesz projektować, budować i utrzymywać niezawodne, zautomatyzowane potoki danych, koordynować przepływy pracy, integrować różnorodne źródła danych i współpracować z interesariuszami w całej firmie, aby dostarczać bezpieczne, zgodne i wysokiej jakości rozwiązania w zakresie danych.

Twoja praca obejmie pełny cykl życia danych, od zaprojektowania odpornych potoków ETL/ELT i opracowania integracji danych w czasie rzeczywistym i wsadowym, po automatyzację raportowania, zmniejszenie długu technicznego i umożliwienie zaawansowanej analityki. Starsi inżynierowie danych w firmie Carrot są stewardami operacyjnymi i mentorami technicznymi, dążącymi do ulepszeń w zakresie dojrzałości systemów, efektywności kosztowej, automatyzacji i praktyk współpracy.

Dołączysz do naszego zespołu inżynierii danych, który opracowuje i optymalizuje skalowalne potoki danych i infrastrukturę chmurową, aby umożliwić bezpieczne, zautomatyzowane raportowanie i analizy w całej firmie Carrot. Zespół ściśle współpracuje z partnerami z zakresu analityki biznesowej, produktów, finansów, prawa i handlu, aby zapewnić niezawodne integracje i samoobsługowe rozwiązania, które zwiększają wiedzę biznesową i zwiększają efektywność operacyjną.

Co będziesz posiadać

W tej roli będziesz:

• Projektuj, buduj, testuj, wdrażaj i utrzymuj skalowalne, zautomatyzowane potoki ETL/ELT przy użyciu języka Python, dbt i narzędzi do orkiestracji, takich jak Prefect i Airflow

• Administrowanie i optymalizacja hurtowni danych i platform typu Lake w chmurze, w tym Snowflake, AWS (S3, Redshift) i Google Cloud, integrując nowe źródła i dostosowując je pod kątem wydajności i kosztów

• Organizuj przepływy pracy z danymi za pomocą niestandardowego harmonogramu, alertów, zarządzania zależnościami, monitorowania i rozwiązywania błędów

• Projektuj i utrzymuj bezpieczne zewnętrzne przepływy danych przez SFTP, Files.com i API, koncentrując się na niezawodności i zgodności

• Automatyzuj ręczne raportowanie i zadania operacyjne, budując solidne komponenty rurociągów wielokrotnego użytku, które zmniejszają koszty operacyjne

• Współpracuj z inżynierami produktów zaplecza, aby zoptymalizować schematy produkcyjnej bazy danych z uwzględnieniem przypadków użycia analityki

• Wzmocnij praktyki dotyczące jakości danych, pochodzenia, zarządzania i dokumentacji w kluczowych domenach danych

• Mentoruj członków zespołu i wzmacniaj najlepsze praktyki w zakresie kontroli wersji, przeglądu kodu i zorganizowanego zarządzania przepływem pracy

Jak wygląda sukces

W ciągu pierwszych 12–18 miesięcy będziesz mieć:

• Przejęcie kompleksowej własności głównych rurociągów i integracji, co zapewnia wymierną poprawę niezawodności, aktualności danych i efektywności kosztowej

• Zautomatyzowane, wymagające dużego wysiłku, ręczne procesy robocze, redukujące ryzyko operacyjne i uwalniające możliwości wykonywania bardziej wartościowych prac inżynieryjnych

• Dostarczono bezpieczne, zgodne integracje danych, którym zainteresowane strony w całej firmie ufają przy podejmowaniu decyzji

• Większa obserwowalność na platformie, w tym monitorowanie, ostrzeganie i reagowanie na incydenty w przypadku przepływów pracy z krytycznymi danymi

• Dałeś się poznać jako mentor techniczny i stały partner zespołów Business Intelligence, produktów i zespołów interdyscyplinarnych

O Tobie ✨

Prawdopodobnie masz:

• Biegłość na poziomie eksperckim w zakresie Snowflake, dbt i Python w zakresie modelowania danych, transformacji, opracowywania potoków i zaawansowanej analityki

• Zaawansowane umiejętności SQL w zakresie złożonych zapytań, projektowania modeli danych na dużą skalę i optymalizacji baz danych

• Udokumentowane doświadczenie w projektowaniu, budowaniu, testowaniu, wdrażaniu i utrzymywaniu skalowalnych, zautomatyzowanych potoków ETL/ELT przy użyciu nowoczesnych narzędzi do orkiestracji, takich jak Prefect i Airflow

• Praktyczna administracja hurtowniami danych i platformami typu Lake w chmurze, w tym Snowflake, AWS (S3, Redshift) i Google Cloud

• Dogłębna wiedza na temat bezpiecznych zewnętrznych przepływów danych przez SFTP, Files.com i interfejsy API, ze szczególnym naciskiem na niezawodność i zgodność

• Opanowanie kontroli wersji (Git, GitHub) i strukturalnego zarządzania przepływem pracy (Jira) w celu przeglądu kodu, ścieżek audytu i przejrzystości operacyjnej

• Wykazana umiejętność automatyzacji i upraszczania złożonych zadań ręcznych poprzez budowanie solidnych komponentów rurociągów nadających się do ponownego użycia

• Niezawodność, zdolność adaptacji i oparte na współpracy podejście do inżynierii, kwitnące w dynamicznych i niejednoznacznych środowiskach

Miło mieć ⭐

Chociaż nie jest to wymagane, będziemy szczególnie podekscytowani, jeśli przyniesiesz:

• Praktyczne doświadczenie w środowiskach startupowych lub szybko rozwijających się, w dostarczaniu rozwiązań technicznych w ramach zmieniających się priorytetów

• Doświadczenie wspierające zespoły analityki biznesowej, analityki i analityki danych poprzez integracje na dużą skalę i raportowanie dla wielu dzierżawców

• Znajomość paradygmatów pozyskiwania wsadowego i opartego na zdarzeniach, w tym potoków działających w czasie zbliżonym do rzeczywistego zbudowanych na Snowflake, dbt i Python

• Doświadczenie w automatyzacji przepływów pracy operacyjnych, finansowych lub opartych na zgodności w środowiskach danych w chmurze…

Źródło: Jobicy (https://jobicy.com/jobs/153597-sr-data-engineer-3)