Руководитель группы, инженерия данных

Мы ищем руководителя группы разработки данных, который возглавит команду платформы данных в DataSnipper.

Каждое решение, которое DataSnipper принимает в отношении своих продуктов, принимается через платформу данных: какие функции используются, какие клиенты получают выгоду, за что мы выставляем счета, что исправляем дальше и какие возможности искусственного интеллекта приносят наибольшую ценность. Вы возглавите команду из двух инженеров по обработке данных, владеющих системами, которые делают это возможным. Это означает, как события использования фиксируются в растущем наборе продуктов, как они становятся надежными моделями в Snowflake и как Customer Success, Product и GTM получают ответы, не дожидаясь нас.

Это роль игрока-тренера в небольшой команде с большим количеством владельцев. Вы несете ответственность за людей, дорожную карту и техническое руководство, и вы остаетесь достаточно практичными, чтобы работать вместе с командой и достоверно принимать решения по архитектуре. В DataSnipper руководитель группы — это наша отправная точка в инженерном управлении: те же люди, обязанности по доставке и продукту, что и у инженера-менеджера, в небольшой команде.

Мы — горстка людей, обслуживающих всю компанию, поэтому ваше мнение о том, что не стоит создавать, имеет такое же значение, как и то, что выпускает команда.

О DataSnipper

DataSnipper — это движущая сила интеллектуальной платформы автоматизации, которая меняет мир аудита и финансов.
Компания DataSnipper, основанная в 2017 году, стремительно выросла и теперь ОФИЦИАЛЬНО является самой быстрорастущей компанией-разработчиком программного обеспечения в Нидерландах по данным Deloitte Fast50, а недавно получила статус Unicorn в нашем последнем раунде финансирования. DataSnipper имеет более 400 000 пользователей в более чем 125 странах и вторую базу в центре Нью-Йорка. И мы не останавливаемся на достигнутом. В DataSnipper мы всегда ищем новаторов, которые мыслят нестандартно. В DataSnipper новые идеи не просто приветствуются — они необходимы.

Чем владеет ваша команда

Команда Data Platform работает по трем направлениям:

• Платформа данных: надежная, масштабируемая инфраструктура, которая доставляет нужные данные в нужное место.

• Внутренняя аналитика: платформа самообслуживания, благодаря которой каждая команда может получать данные без тикета.

• Аналитика, ориентированная на клиента: информационные панели и экспорт, которые клиенты используют, чтобы увидеть ценность, которую они получают от DataSnipper.

Конкретно, вы столкнетесь с миллиардами событий использования, передаваемых из нашей надстройки Excel, веб-приложений и серверных частей продуктов через Центры событий Azure в Snowflake; поместье dbt, построенное по принципам медальонов и управляемое в dbt Cloud; Управляемая Terraform инфраструктура Snowflake и Azure; и ряд групп разработчиков, которые поставляют агентов ИИ быстрее, чем мы можем их оснастить.
Вы также найдете реальные, названные открытые проблемы, а не аккуратную платформу: сбор событий в середине консолидации, несколько методов атрибуции пользователей и уровень качества данных, который спроектирован, но еще не создан. Мы бы предпочли сказать вам об этом заранее.

Что ты будешь делать

Возглавьте команду

• Руководите командой из двух инженеров по обработке данных посредством результатов, а не задач: ставьте перед командой четкие цели и доверяйте им понять, как это сделать.

• Сделайте команду заметно лучше: поднимите планку разработки, помогите каждому инженеру решать более крупные задачи и решайте проблемы с производительностью непосредственно по мере их возникновения.

• Регулярно проводите встречи один на один, давайте четкую и своевременную обратную связь и определяйте цели и развитие каждого инженера.

• Развивать культуру экспериментирования, обучения, документирования и повышения эффективности работы.

• Принимайте участие в найме сотрудников и помогайте формировать состав команды по мере ее развития.

Собственное направление и доставка

• Тесно сотрудничайте с отделом разработки продуктов, отделом по работе с клиентами и GTM, чтобы формировать дорожную карту команды, превращая запросы расплывчатых данных в масштабную, четко определенную работу.

• Найдите компромисс между небольшой командой, обслуживающей потребности всей компании: что создавать, что отложить и когда запрос не должен превращаться в конвейер.

• Задайте техническое направление и сделайте архитектурные решения, которые формируют системы команды.

• Обеспечивать видимость и контроль производительности и стоимости Snowflake, технического долга, зависимостей и обязательств по обеспечению соответствия (ведение журнала аудита, устранение уязвимостей, доказательства Vanta).

• Будьте тем человеком, к которому обращаются другие инженерные команды, когда им нужно создать что-то новое.

Будьте в курсе событий на платформе данных

• Вносите вклад в комплексную архитектуру приема событий: Центры событий Azure, Snowpipe, Fivetran и наши общие клиентские библиотеки событий Python/TypeScript.

• Создавайте и проверяйте конвейеры преобразования БДТ, которые остаются надежными по мере роста объема, количества источников и сложности модели.

• Определяйте и применяйте контракты и схемы событий, чтобы команды разработчиков могли внедрять новые функции без скрытых сбоев в дальнейшем.

• Развивайте основные модели данных (событие, пользователь, лицензия, компания) и интегрируйте новые источники, такие как серверные части продукта, MongoDB, HubSpot и биллинг.

• Руководство обратным ETL и работой по активации, которая возвращает смоделированные данные в отчеты HubSpot, MongoDB, Postgres и GTM.

Что ты принесешь

Лидерство

• Ведущие инженеры со стажем работы не менее 1 года в качестве руководителя группы или технического менеджера: 1:1, обратная связь, постановка целей, производительность и развитие.

• Стиль лидерства, основанный на расширении прав и возможностей: вы ведете за счет результатов и доверия, а не путем назначения задач.

• Ранние свидетельства роста инженеров и повышения планки команды, а также готовности напрямую решать проблемы производительности.

• Высокая компетентность в отношении продукта: вы можете бросить вызов формулировке запроса, преобразовать потребности заинтересованных сторон в технические решения и пойти на компромиссные решения в рамках дорожной карты.

Инженерия данных

• Более 7 лет работы в сфере разработки данных или на тесно связанной с ней роли бэкэнда/платформы, с опытом комплексного владения областью платформы данных.

• Глубокий SQL и мощный Python, включая оптимизацию запросов и настройку производительности в облачном хранилище.

• Опыт работы с облачным хранилищем данных (мы используем Snowflake) и современным фреймворком трансформации (мы используем dbt)

• Опыт работы с управляемым событиями/потоковым приемом и его режимами сбоев: дрейф схемы, дублирование, поздние данные, заполнение…

Источник: Arbeitnow (https://www.arbeitnow.nl/jobs/companies/datasnipper/team-lead-data-engineering-amsterdam-286359).