Инженер-программист - группа данных

О нас_
// В Masabi мы совершаем революцию в области оплаты проезда, обеспечивая путешествия миллионов людей по всему миру. Мы создаем платформы для сбора платы за проезд, которые позволяют пассажирам беспрепятственно покупать и предъявлять билеты на общественный транспорт либо на своих мобильных телефонах, в билетных автоматах, либо даже используя свою банковскую карту для поездки.

Наша платформа Justride используется более чем в 250 местах по всему миру, включая некоторые из крупнейших городов мира. Благодаря нашему первому в отрасли SDK для продажи мобильных билетов мы установили партнерские отношения с крупными игроками в транспортной сфере, включая Uber, Moovit и Transit.

Ваше собственное путешествие также важно для нас. Выбор роли здесь означает присоединение к сети новаторов из всех слоев общества; группа увлеченных людей, которые последовательно добиваются результатов. Здесь вы найдете инструменты, необходимые для построения карьеры, которую вы хотите. Независимо от того, выбираете ли вы прямой путь или пробуете новый путь, мы поддержим вас, несмотря ни на что.

Роль_

В Masabi мы помогаем миллионам людей путешествовать, делая оплату общественного транспорта простой, доступной и беспрепятственной.

Мы строим нашу следующую платформу данных. Наши службы продажи билетов, проверки и оплаты уже публикуют события в Kafka, и в следующем году мы превратим эти события в управляемый Lakehouse на AWS, к которому смогут обращаться транзитные агентства, внутренние команды и наши API. Он заменит наше текущее хранилище данных на основе Elasticsearch.

Вы присоединитесь к небольшой команде разработчиков программного обеспечения, которые занимаются проектированием и созданием: выбирают подходы, измеряют производительность и стоимость и записывают свой выбор. Вы перенесете методы разработки программного обеспечения на платформу данных: от хорошо протестированных сервисов и проверок CI до инфраструктуры в виде кода. То, что вы создадите, определит, как агентства и наши собственные команды будут использовать свои данные.

Расположение_

Это полностью удаленная работа по контракту для людей, проживающих в Румынии.

Обязанности_

•
Создавайте и запускайте сервисы, которые включают темы Kafka в таблицы Apache Iceberg на AWS, включая секционирование, сжатие, дедупликацию и обратную загрузку исторических данных.

•
Пишите чистый, хорошо протестированный и удобный в сопровождении код, разумно используя инструменты искусственного интеллекта, а также участвуйте в проверках кода и общих инженерных стандартах.

•
Работайте с командами, которые создают данные по контрактам данных, включая схемы Avro с классификацией на уровне полей, правилами эволюции схемы и CI-проверками, обеспечивающими их соблюдение.

•
Обеспечьте конфиденциальность и доступ к платформе: удаление, хранение и контроль доступа к личным данным для каждого агентства.

•
Создайте уровень запросов на основе нашего API данных, ориентированного на клиентов, и предоставьте другим доступ через Athena.

•
Оценивайте технические подходы, измеряйте производительность и стоимость и документируйте сделанный вами выбор.

•
Перенесите существующие информационные панели, отчеты и финансовые выписки на новую платформу.

•
Позже создайте курируемый уровень общих показателей и готовых к использованию наборов данных для инструментов BI и помощника по аналитике ИИ.

О тебе_

Что вам понадобится:

•
Твердые основы разработки программного обеспечения: вы пишете производственный код, правильно его тестируете и комфортно работаете с Git и CI-конвейерами.

•
Свободное владение искусственным интеллектом: вы ежедневно используете инструменты кодирования искусственного интеллекта и тщательно проверяете их результаты, особенно на предмет SQL, изменений схемы и всего, что влияет на правильность данных.

•
Хорошее знание SQL и некоторый опыт создания или запуска конвейеров данных, чтобы вам было удобно работать с данными от источника до запроса.

•
Уверенное понимание моделирования данных

•
Четкое и уверенное общение на письменном и устном английском языке.

Что поможет вам добиться успеха:

•
Опыт управления озерным домом или хранилищем данных на производстве

•
Опыт работы с Kafka и схемами (в идеале Avro)

•
Опыт работы с персональными данными, включая конфиденциальность, хранение и контроль доступа.

•
Вам комфортно принимать дизайнерские решения и объяснять компромиссы как в письменной форме, так и в разговоре.

•
Вам нравится тесно сотрудничать с командами, которые производят данные, а не только с теми, кто их использует.

•
Приятно иметь: опыт JVM (Kotlin или Java), Apache Iceberg, Terraform, AWS Lake Formation, DuckDB.

Мы не ожидаем, что вы отметите все галочки. Самое главное — это любопытство, желание учиться и мотивация взять на себя ответственность за свою работу.

Что вы узнаете_

•
Как с нуля создать платформу данных для глобальной платформы оплаты проезда, используемой транспортными агентствами и миллионами пассажиров

•
Практический опыт работы с современным стеком озерных домиков: Iceberg, Athena, Lake Formation, Kafka и Avro на AWS.

•
Как сформировать техническое направление в небольшой команде, где ваш выбор дизайна и рецензии устанавливают стандарты

•
Как эффективно использовать инструменты ИИ в реальной инженерной работе в команде, которая их поощряет и заботится о получении правильных результатов.

Наш стек_

•
Java или Котлин

•
AWS: S3, Apache Iceberg, Athena, Lake Formation (и, возможно, другие системы запросов).

•
PostgreSQL, DuckDB

•
Кафка с Авро

•
Терраформ, GitLab CI

Карьера в Масаби предназначена для людей, которые едут куда угодно, движимые миссией сделать транзит справедливым и доступным для всех.

// Мы — сеть новаторов из всех слоев общества, страстно стремящихся изменить ситуацию. В Masabi мы работаем открыто и доверительно, создавая среду, в которой каждый чувствует себя способным полностью проявить себя в работе.

Кто бы ты ни был, просто будь собой.
// Мы приветствуем заявки от недостаточно представленных групп, включая людей с ограниченными возможностями и нейроотличных людей, и можем внести коррективы на любом этапе процесса. Вы также можете поделиться своими местоимениями, когда вам будет удобно. Вместе мы упрощаем путешествия, устраняем барьеры и улучшаем повседневную жизнь миллионов людей.

Зачем присоединяться к Масаби?

•
Движимые целью – мы верим в то, что путешествия должны быть простыми. Работа не всегда легка, но и лучшие вещи никогда не бывают легкими.

•
Призываем к ускорению: Масаби движется вперед, а наши люди находятся за рулем. Независимо от того, выбираете ли вы прямой маршрут или исследуете новые пути, мы поддержим ваше путешествие…

Источник: Jobicy (https://jobicy.com/jobs/159520-software-engineer-data-team).