Инженер-программист (данные)

Наша миссия
Мы не обычная платформа льгот – мы движущая сила, которая улучшает жизнь людей. Наша технология объединяет всю экосистему льгот, создавая лучшие результаты для работодателей, сотрудников, брокеров и поставщиков.
Наша миссия ясна: построить мир, в котором все работает наилучшим образом, гарантируя, что каждый сотрудник получит поддержку, необходимую для процветания — как на работе, так и за ее пределами.

Ваша миссия
В качестве нашего инженера-программиста (данные) вы будете создавать и запускать конвейеры, оркестрацию и инфраструктуру, которые перемещают данные по Бену: от нашего продукта и инструментов, которые мы используем, от наших клиентов и обратно к ним. Это сантехника, от которой зависит вся компания и наши клиенты, и она должна оставаться надежной. Мы обслуживаем корпоративных клиентов по всему миру, соблюдая строгие требования к безопасности и надежности.
Вы будете владеть настоящей работой с первого дня. Рядом с вами будет сильная команда кросс-функциональных инженеров, пространство для решения более сложных задач и свобода выполнять работу по-своему.

Над чем вы будете работать

• Владейте всем, что поступает в Бен: создавайте и обслуживайте конвейеры приема, которые доставляют данные в наше хранилище, с помощью Fivetran для управляемых источников и пользовательских конвейеров там, где они нам нужны.

• Обеспечьте своевременную работу всего: владейте оркестрацией, которая обеспечивает передачу данных по расписанию и четкое восстановление в случае сбоя.

• Масштабируйте нашу инфраструктуру данных и управляйте ею: создавайте и управляйте нашей инфраструктурой данных в виде кода с помощью Terraform, используя в основном сервисы AWS.

• Подключите Ben к каждой системе, которую используют наши клиенты: создавайте конвейеры и соединители корпоративного уровня для наших клиентов, передавая их данные, например, из систем управления персоналом и расчета заработной платы, и возвращая им точные данные, надежно и безопасно, даже в тех объемах, которые приносят крупные клиенты.

• Создайте уровень данных, на котором действуют наши агенты: помогите соединить наши данные с агентами искусственного интеллекта и службами, которые мы создаем, в том числе через соединители MCP, чтобы они получали правильный контекст в нужное время.

• Формируйте то, что мы создаем: работайте с продуктом и другими заинтересованными сторонами, чтобы определить проблемы и согласовать простые, но масштабируемые решения.

• Создайте его в соответствии с корпоративными стандартами: используйте текущую практику обеспечения безопасности, например OWASP Top 10 и AWS Well-Architected Framework.

За кулисами
Бен работает на Python 3, Django, PostgreSQL и React на AWS.
Сегодня наша платформа данных построена на основе Fivetran, AWS DMS или пользовательских конвейеров для приема, dbt для преобразования, PostgreSQL на AWS RDS в качестве хранилища и n8n или AWS Lambda для автоматизации между системами. Мы управляем нашей инфраструктурой как кодом с помощью Terraform и используем различные сервисы AWS в зависимости от требований.
Мы внедрили передовые методы разработки агентов и продолжаем расширять границы возможностей современных технологий.

Ваши навыки и опыт

• Большой опыт работы с Python и SQL.

• Несколько лет создания и эксплуатации конвейеров производственных данных, на которые полагались другие люди.

• Комфортно работать с инфраструктурой в виде кода, в идеале Terraform, и иметь практический опыт работы с AWS, например Lambda, ECS, Glue, S3, RDS.

• Хорошее понимание ETL/ELT и оркестровки.

• Опыт создания или эксплуатации интеграций и соединителей данных, особенно тех, от которых зависят другие компании или клиенты, является настоящим плюсом.

• Надежные основы разработки программного обеспечения: чистый код, разумный дизайн и тесты, на которые можно положиться.

• Вы помните о безопасности при создании приложений и настройке инфраструктуры и знаете, чего корпоративные клиенты ожидают от своих данных.

Приятно иметь, но не обязательно:

• Опыт работы над интеграцией данных клиентов, таких как HRIS или потоки заработной платы через SFTP и в формате EDI.

• Опыт разработки серверов MCP или различных способов подготовки данных для агентов ИИ, таких как моделирование онтологий, контекст, графы знаний и семантические слои.

Мы не ожидаем всего этого. Мы ожидаем любопытства по этому поводу.

Зачем присоединяться к нам?
Клиенты Бена — крупные предприятия-работодатели, и сотни тысяч людей, которые у них работают, каждый раз полагаются на нас, чтобы правильно обеспечить их льготы. Это зависит от точного перемещения данных между их системами и нашей в каждом цикле. Вы можете работать над инфраструктурой данных, благодаря которой все работает как часы.
В то же время Бен — организация, основанная на искусственном интеллекте. Агенты уже выполняют здесь большую важную работу, и они могут делать это только с данными, которым могут доверять. Это поднимает вопросы, на которые приборной панели никогда не приходилось отвечать. Насколько свежей должна быть эта информация, чтобы агент мог действовать в соответствии с ней? Как сопоставить один и тот же объект в разных инструментах? Как вы контролируете, что агенту разрешено видеть? Очень немногие инженеры ответили тем, кто находится на производстве. Ты был бы одним из них.
Вы возьмете на себя управление большими и сложными проблемными пространствами, поможете спроектировать способы их масштабирования и создадите агентный уровень, который еще мало кто из инженеров создал где-либо, и вы увидите эффект от этого: Бен поддерживает сотни тысяч людей в более чем 30 странах.…

Источник: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/ben/software-engineer-data-london-478719).