Старший інженер даних

Про моркву:

Carrot є провідною глобальною платформою для фертильності та догляду за сім’єю, побудовану на розумній оркестровці догляду: правильне клінічне керівництво в потрібний момент у контексті життя кожного члена. Понад тисяча багатонаціональних роботодавців, планів охорони здоров’я та систем охорони здоров’я довіряють Carrot підтримку мільйонів учасників у 195 країнах – від періоду до вагітності до менопаузи та найважливіших життєвих моментів між ними. Комплексна клінічна програма Carrot забезпечує найкращу в галузі економію коштів для спонсорів плану та відзначений нагородами досвід і покращення результатів для мільйонів людей у ​​всьому світі.

Керрота широко вважають визначальною силою в інноваціях у сфері охорони здоров’я, оскільки вона отримала кілька найвищих нагород, зокрема «Найінноваційніші компанії» Fast Company та «100 стартапів, що долають бар’єри» CNBC. Провідні світові видання, зокрема The Economist, Bloomberg, The Wall Street Journal, NPR, ABC News і Harvard Business Review, регулярно згадують компанію як провідного виразника цифрового здоров’я, майбутнього роботи та здоров’я сім’ї. Дізнайтесь більше на get-carrot.com.

Можливість

Carrot шукає старшого інженера з обробки даних, який би керував розвитком, надійністю та масштабованістю нашої сучасної інфраструктури даних у сфері аналітики, звітності та бізнес-аналітики. На цій посаді ви розроблятимете, створюватимете та підтримуватимете надійні автоматизовані канали даних, організовуватимете робочі процеси, інтегруватимете різноманітні джерела даних і співпрацюватимете із зацікавленими сторонами в усьому бізнесі, щоб надавати безпечні, сумісні та високоякісні рішення для обробки даних.

Ваша робота охоплюватиме повний життєвий цикл даних, від розробки стійких конвеєрів ETL/ELT і розробки інтеграції даних у режимі реального часу та пакетних даних до автоматизації звітності, зменшення технічної заборгованості та включення розширеної аналітики. Старші інженери з обробки даних у Carrot є оперативними менеджерами та технічними наставниками, які покращують зрілість системи, економічну ефективність, автоматизацію та практику співпраці.

Ви приєднаєтесь до нашої команди Data Engineering, яка займається розробкою та оптимізацією масштабованих каналів даних і хмарної інфраструктури, щоб забезпечити безпечне автоматизоване звітування й аналітику в Carrot. Команда тісно співпрацює з бізнес-аналітикою, продуктами, фінансами, юридичними та комерційними партнерами, щоб забезпечити надійну інтеграцію та рішення для самообслуговування, які сприяють розумінню бізнесу та ефективності роботи.

Що ви будете володіти

У цій ролі ви:

• Архітектор, створення, тестування, розгортання та підтримка масштабованих, автоматизованих конвеєрів ETL/ELT за допомогою Python, dbt та інструментів оркестровки, таких як Prefect і Airflow

• Адміністрування та оптимізація хмарних сховищ даних і платформ Lake, включаючи Snowflake, AWS (S3, Redshift) і Google Cloud, інтегруючи нові джерела та налаштовуючи продуктивність і вартість

• Організуйте робочі процеси даних за допомогою спеціального планування, сповіщень, керування залежностями, моніторингу та вирішення помилок

• Розробляйте та підтримуйте безпечні зовнішні потоки даних через SFTP, Files.com та API, зосереджуючись на надійності та відповідності

• Автоматизуйте ручне звітування та операційні завдання, створюючи надійні багаторазові компоненти конвеєра, що зменшує операційні витрати

• Співпрацюйте з інженерами серверних продуктів для оптимізації схем робочої бази даних з урахуванням випадків використання аналітики

• Покращення якості даних, походження, управління та практики документування в ключових областях даних

• Наставляйте товаришів по команді та закріплюйте найкращі методи контролю версій, перегляду коду та структурованого керування робочим процесом

Як виглядає успіх

У перші 12–18 місяців ви матимете:

• Наскрізне володіння основними конвеєрами та інтеграціями з вимірними покращеннями надійності, актуальності даних і ефективності витрат

• Автоматизовані ручні робочі процеси з великими зусиллями, що знижує операційний ризик і вивільняє потужності для високоцінної інженерної роботи

• Надано безпечну, сумісну інтеграцію даних, якій зацікавлені сторони в бізнесі довіряють для прийняття рішень

• Покращена можливість спостереження на всій платформі, включаючи моніторинг, попередження та реагування на інциденти для критичних робочих процесів даних

• Ви зарекомендували себе як технічний наставник і партнер для бізнес-аналітики, продуктів і міжфункціональних команд

Про тебе✨

Ймовірно, у вас є:

• Володіння Snowflake, dbt і Python на рівні експерта для моделювання даних, трансформації, розробки конвеєрів і розширеної аналітики

• Розширені навички SQL для складних запитів, проектування великомасштабної моделі даних та оптимізації бази даних

• Перевірений досвід проектування, створення, тестування, розгортання та підтримки масштабованих, автоматизованих конвеєрів ETL/ELT за допомогою сучасних інструментів оркестровки, таких як Prefect і Airflow

• Практичне адміністрування хмарних сховищ даних і платформ Lake, включаючи Snowflake, AWS (S3, Redshift) і Google Cloud

• Чітке розуміння захищених зовнішніх потоків даних через SFTP, Files.com і API, з акцентом на надійність і відповідність

• Володіння контролем версій (Git, GitHub) і структурованим керуванням робочим процесом (Jira) для перегляду коду, журналів аудиту та операційної прозорості

• Продемонстрована здатність автоматизувати та спрощувати складні ручні завдання, створюючи надійні багаторазові компоненти трубопроводу

• Надійність, адаптивність і спільний підхід до проектування, процвітання в динамічних і неоднозначних середовищах

Приємно мати ⭐

Хоча це не обов’язково, ми будемо дуже раді, якщо ви візьмете з собою:

• Практичний досвід у стартапах або середовищах швидкого зростання, надання технічних рішень у змінних пріоритетах

• База, що підтримує команди бізнес-аналітики, аналітики та обробки даних завдяки широкомасштабній інтеграції та звітності для кількох клієнтів

• Знайомство з парадигмами пакетного і керованого подіями прийому даних, включаючи конвеєри майже в реальному часі, побудовані на Snowflake, dbt і Python

• Досвід автоматизації операційних, фінансових або контрольних робочих процесів у хмарних середовищах даних…

Джерело: Jobicy (https://jobicy.com/jobs/153597-sr-data-engineer-3)