Инженер данных II

Кто мы

Splice — это творческая платформа для людей, создающих музыку. Серьезные продюсеры выбирают Splice Sounds, чтобы воплотить свои идеи в жизнь. Подписка на Splice вдохновляет и ускоряет творческий успех создателей цифровой музыки благодаря ведущему в отрасли каталогу звуков и сэмплов, а также расширяющемуся стеку искусственного интеллекта. Благодаря рынку DAW и плагинов, предоставляемых в аренду с выкупом, Splice легко интегрируется в любой рабочий процесс создания музыки, независимо от DAW (Digital Audio Workstation). Через Splice, не имеющая себе равных команда звукорежиссеров и создателей сэмплов способствует успеху растущего глобального сообщества продюсеров, студентов и создателей DIY, занимающих лидирующие позиции в чартах.

Как мы работаем

В Splice DISCO — это призыв к сотрудничеству, ответственности и единству внутри нашей организации; Прямой, инклюзивный, сплоченный, ориентированный на творца и оптимистичный. Наш общий успех зависит от нашей способности поддерживать друг друга, хорошо работать вместе и напрямую общаться. Применяя гибкость и единый подход, мы можем ориентироваться во всем, что нам бросается в глаза.

Splice придерживается культуры удаленной работы. Вы увидите, как ваши коллеги приезжают со всех концов США и Великобритании. Чтобы мы могли хорошо работать как команда, мы регулярно общаемся, включая мэрию, ведомственные собрания и встречи.

Присоединяясь к Splice, вы присоединяетесь к сети коллег, коллег и сотрудников. Вы готовы?

Роль

Мы ищем инженера по данным II, который присоединится к команде Splice по разработке данных и поможет масштабировать платформу, обеспечивающую выплаты авторам, отчеты о доходах и аналитику продуктов по всем линейкам продуктов Splice.

Data Engineering создает и поддерживает надежную основу, которая делает возможным получение достоверных данных, позволяя командам Splice работать на основе управляемого и последовательного источника достоверной информации. Мы отвечаем за фундамент склада и трубопровода; прием, преобразование, а также стандарты и меры контроля качества, которые обеспечивают согласованность, своевременность и удобство использования данных. Это должность среднего уровня с высоким уровнем владения: инженеры здесь выполняют функции, начиная с технического проектирования, заканчивая поставкой, мониторингом и документацией, и участвуют в нашей ротации по вызову.

Работа требует практического опыта работы с данными. Наш стек; BigQuery, SQLMesh, Python, Dagster — отличается от стека веб-инжиниринга Splice, и для эффективного вклада требуется знание предметной области в системах конвейеров данных, а не общий опыт разработки программного обеспечения.

Информация о команде

Вы присоединитесь к команде Splice по разработке данных, небольшой команде встроенных платформ, ответственной за конвейеры, преобразования и складскую инфраструктуру, от которых зависит остальная часть компании. Наши системы поддерживают критически важные с финансовой точки зрения процессы (выплаты вкладчикам, отчетность о доходах по GAAP), аналитику продуктов и надежность данных для функций взаимодействия с клиентами, таких как рекомендации. Мы работаем по принципу общей дежурной ротации и с сильным уклоном в сторону наблюдаемых, хорошо документированных и надежных систем.

Что ты будешь делать

Развитие и трансформация трубопровода

• Создавать и поддерживать модели данных в SQLMesh, включая дополнительные стратегии, тестирование и документацию.

• Постоянно улучшать и развивать нашу инфраструктуру оркестрации и трансформации по мере масштабирования платформы.

• Модернизируйте устаревшие конвейерные работы на Python и SQLMesh, со временем сокращая технический долг.

Надежность и наблюдаемость

• Участвовать в дежурной ротации; сортировка и устранение инцидентов, включая сбои ETL, недоступность данных и нарушение основных показателей.

• Создавайте самоанализируемое программное обеспечение: определяйте пороговые значения оповещений, публикуйте метрики и журналы, создавайте информационные панели и устанавливайте замкнутые пути эскалации.

• Улучшите наблюдаемость на всей платформе, чтобы сбои выявлялись на ранней стадии и быстро устранялись.

Финансы и каналы доходов

• Расширить и поддерживать конвейеры, обеспечивающие выплаты авторам и отчетность о доходах в соответствии с GAAP по всем линейкам продуктов Splice.

• Создайте конвейерную поддержку для новых источников дохода по мере их запуска Splice.

Качество и оптимизация платформы

• Повысьте производительность запросов и сократите затраты на вычисления в BigQuery.

• Вносить вклад в работу платформы приема и инфраструктуры анализа продуктов.

• Соблюдайте наше определение готовности: проверка завершена, документация обновлена, ведется мониторинг перед закрытием заявки.

Требования к вакансии

• Более 3 лет практического опыта работы с данными в производственной среде.

• Знание SQL — оконные функции, CTE, оптимизация запросов, анализ плана выполнения.

• Владение Python для логики конвейера, преобразования данных и тестирования (поддерживаемый код, а не только сценарии).

• Опыт работы с современной платформой преобразования — SQLMesh, dbt или эквивалентной — включая инкрементные модели, тестирование и документацию.

• Опыт работы с облачным хранилищем данных (используем BigQuery); понимает секционирование, кластеризацию и управление затратами

• Опыт работы хотя бы с одним оркестратором рабочих процессов (Dagster, Airflow, Prefect или эквивалентным).

• Продемонстрированная способность создавать наблюдаемые и надежные системы данных — оповещения, информационные панели и проверки качества данных.

• Комфортное владение малыми и средними функциями, от технического проектирования до поставки, с ограниченным руководством.

Преимущества сращивания

• Вознаграждение и справедливость: конкурентоспособная оплата с ежегодным обзором и возможностью участия в акционерном капитале.

• Время отключения: Неограниченный ВОМ для подзарядки и процветания.

• Здоровье и благополучие: комплексное медицинское, стоматологическое и офтальмологическое страхование для вас и ваших иждивенцев.

• Пенсионные накопления: план 401(k) с немедленным переходом прав и соответствием компании.

• Родительская поддержка: 12 недель полностью оплачиваемого отпуска по уходу за ребенком для нерожавших родителей и 18-20 недель для рожающих родителей.

• Гибкие возможности работы: работайте удаленно или общайтесь в наших офисных центрах и творческих пространствах по всему миру.

• Профессиональный рост: годовой бюджет обучения, программы лидерства и возможности представителей команды.

• Сообщество и общение: инклюзивные мероприятия, командные встречи и активные группы ресурсов для сотрудников…

Источник: Jobspresso (https://jobspresso.co/job/data-engineer-ii/).