Старший инженер данных

Кто мы:

Мы перестраиваем энергетическую сделку, делая ее прозрачной и справедливой.

Наша цель — вернуть власть туда, где она должна быть, в руки потребителей, и взять на себя одну из самых острых проблем нашего столетия — доступ к дешевой электроэнергии.

Эта тема существует для того, чтобы исправить разрушенный глобальный энергетический рынок, на котором долгое время отдавались предпочтение устаревшим операторам, посредникам и непрозрачному ценообразованию. Сегодняшняя электроэнергетическая система не была предназначена для быстрой декарбонизации, эффективности, основанной на искусственном интеллекте, или справедливого доступа для реальных пользователей – предприятий и производителей.

Мы создали первую инфраструктуру транзакций на основе искусственного интеллекта, чтобы заново изобрести способы покупки, продажи и ценообразования электроэнергии. Наша технология предназначена для сокращения неэффективных сборов, автоматизации сложных рыночных потоков и обеспечения прозрачности и справедливости энергетических операций в больших масштабах.

В конце 2025 года, после необычайного роста, мы закрыли серию B стоимостью 75 миллионов долларов, возглавляемую Lightspeed Venture Partners при участии Albion, Atomico, Allianz, Hitachi Ventures, Hitachi Ventures, Schroders Capital и других, что позволит нам добиться глобальной экспансии, более глубоких инноваций в продуктах и ​​лидерства в своей категории.

Мы расширяемся на международном уровне и движемся к будущему, в котором инфраструктура на базе искусственного интеллекта станет основой рынков электроэнергии во всем мире.

С момента запуска наш современный коммунальный продукт, известный как RED, уже помог тысячам бизнес-клиентов и миллиардным объемам сделок с электроэнергией, доказывая, что современное программное обеспечение и искусственный интеллект могут преобразовать отрасль, построенную на устаревших системах.

В настоящее время мы не просто строим еще одну энергетическую компанию, мы перестраиваем рыночную инфраструктуру так, чтобы прозрачность, эффективность и устойчивость стали стандартом, а не исключением.

РОЛЬ

Приглашаем на работу старшего дата-инженера.

Данные лежат в основе того, что делает tem. Наши данные временных рядов — это основа, которая проходит от ценообразования до выставления счетов: от их работы зависит каждая транзакция. Вам придется работать с действительно разнообразным набором рабочих нагрузок: текстовыми данными, данными временных рядов и потоками событий, каждый из которых имеет свои собственные проблемы с приемом и надежностью, включая TSDS.

Вы присоединитесь к нашей команде по обслуживанию данных из 4 человек и будете владеть разработкой, надежностью и стратегией восстановления конкретных конвейеров и систем приема данных от начала до конца. Это роль индивидуального участника: нет команды, которой нужно управлять, полная ответственность за выполняемую работу. Сейчас у команды больше работы, чем рук, и эта роль существует для того, чтобы ликвидировать этот разрыв, чтобы бизнес мог быстрее работать с данными, от которых он зависит.

Вы также будете тесно сотрудничать с нашими инициативами в области искусственного интеллекта по мере их роста: платформа, которой вы владеете, все больше становится основой, от которой зависят эти усилия.

Вы будете:

– Владейте стратегией проектирования, надежности и восстановления конвейеров и систем приема данных в своем домене.

– Поддерживать и совершенствовать платформу данных, включая работу с существующим накопившимся технологическим долгом.

– Обеспечьте мониторинг и оповещение, чтобы проблемы выявлялись до того, как они станут инцидентами.

– Установите проверки качества данных, которые делают возможным выполнение обязательств по SLA, и соблюдайте их.

– Помогите увеличить количество информационных продуктов с определенным SLA от 2 до 10.

ОБЯЗАННОСТИ

Прием данных

– Владеть дизайном, надежностью и отказоустойчивостью сквозных конвейеров приема, включая TSDS, с четкой стратегией восстановления в случае сбоя.

– Создание и поддержка конвейеров ETL/ELT для новых и существующих источников данных.

– Определите правильный подход (пакетная или потоковая передача) для каждого конвейера в вашем домене, включая требования к крупномасштабным требованиям с низкой задержкой для данных временных рядов.

– Установите проверки качества данных, которые сделают возможным выполнение обязательств по SLA, и соблюдайте их.

Обслуживание платформы

– Обеспечьте повседневную надежность платформы данных: отслеживайте, тестируйте и устраняйте проблемы до того, как они станут серьезными.

– Собственные стандарты качества кода и стандартов для систем, за которые вы отвечаете, включая CI-проверки (линтинг, тесты, покрытие).

– Проработайте существующую накопившуюся задолженность по технологиям, определив приоритетность исправлений, которые разблокируют обязательства по SLA.

– Оптимизируйте конвейеры с точки зрения производительности и стоимости по мере роста объемов данных.

– Обработка режимов сбоев, характерных для энергетических данных: опоздание, повторная обработка, повторное заполнение.

Мониторинг и оповещение

– Обеспечьте и улучшите наблюдаемость в ваших системах, чтобы проблемы выявлялись до того, как они окажут влияние на последующие процессы.

– Настройте оповещения, привязанные к соглашениям об уровне обслуживания, которые берет на себя команда.

– Исследуйте и решайте проблемы в своем домене, обостряя действительно межсистемные проблемы.

Поддержка расширения

– Помогите определить масштаб и подготовить платформу для новых источников данных, связанных с международной экспансией.

– Отметьте, где текущая архитектура не выдерживает роста масштабов, даже если ее исправление — это не ваша задача в одиночку.

– Тесно сотрудничайте с командой искусственного интеллекта по мере роста потребностей в данных на платформе.

ТРЕБОВАНИЯ

Должен иметь

– Сильные навыки работы с Python, а также подтвержденный опыт создания и обслуживания конвейеров производственных данных.

– Опыт владения дизайном, надежностью и отказоустойчивостью конвейера данных или комплексной системы, а не просто написание кода конвейера.

— Опыт работы с AWS или GCP.

– Отличные коммуникативные навыки, удобная работа напрямую с заинтересованными сторонами для определения объема и согласования соглашений об уровне обслуживания, а также объяснение технических компромиссов нетехнической аудитории.

– Сильный командный игрок, умеющий работать независимо, несмотря на накопившуюся работу и принимать решения по расстановке приоритетов, в то же время вписываясь в существующую команду из 4 человек.

- Опыт терраформирования.

Бонусные баллы

– Опыт работы с данными временных рядов в больших масштабах.

– Опыт работы с современными инструментами стека данных (Airflow, Snowflake, BigQuery, Redshift, ClickHouse).

- Опыт работы в сфере энергетики или климатических технологий.

– Опыт работы в быстрорастущих стартапах или масштабных проектах.

– Искренний интерес к тому, как инструменты и рабочие процессы искусственного интеллекта пересекаются с разработкой данных.

Мы открыты для тех, кто не отвечает всем требованиям, при условии, что у них есть солидный опыт работы с AWS или GCP и возможность непрерывно владеть своей собственной работой.

ПРЕИМУЩЕСТВА И ПРИГОДЫ…

Источник: Удаленная работа в ЕС (https://euremotejobs.com/job/senior-data-engineer-7/).