Старший інженер з даних

Про Ryft

Ryft — це регульований платіжний фасилітатор і авторизована платіжна установа, яка створює рівень інфраструктури для сучасних комерційних платформ.
Ми надаємо можливість ринкам, платформам SaaS і багатостороннім екосистемам вбудовувати та монетизувати платежі нативно. Наша технологія керує адаптацією, відповідністю, оркестровкою, розділеними платежами та розподілом доходу, що дозволяє нашим партнерам зосередитися на зростанні, а ми керуємо складністю.

Зараз ми вступаємо в наступний етап масштабування, розширюючись у нові вертикалі та створюючи вбудовану платіжну платформу, що визначає категорії.

Про роботу

Ми наймаємо старшого інженера з обробки даних, щоб контролювати все, що відбувається з нашими даними після їх написання. Межа з розробкою програмного забезпечення промальована однією лінією: вони володіють усім до запису, ви володієте всім після нього — захопленням, прийомом, бронзовим шаром і службами даних, які працюють поверх. Ви створите платформу збору даних про зміни та керовану подіями платформу, яка надійно одержує дані з наших вихідних систем, і передасте чистий, скорочений бронзовий шар команді аналітики.
Це старший особистий внесок, який щодня працює разом із керівником даних і керівником аналітики. Перший рік складний для створення: CDC і введення подій у S3, а також наскрізна міграція нашого сховища. Наш поточний стек — AWS, RDS Postgres, Dagster, dbt і Superset.

Це гібридна посада в центрі Манчестера, з 2 днями на тиждень в офісі.

Що ти зробиш

• Створіть рівень прийому: захоплюйте потоки змін із наших транзакційних сховищ у S3 разом із подіями домену, які створюють наші служби, щоб сховище відображало як поточний стан, так і те, що там потрапило.

• Володійте бронзовим шаром: надійно розміщуйте дані з відомою затримкою, при цьому еволюція схеми обробляється навмисно, а не зберігається. Відтворення та засипка мають бути звичайними операціями.

• Тримайте контракт на межі: узгодьте з програмною інженерією, що перетинає запис, у якій формі, з яким повідомленням, коли він змінюється — потім виконайте його на своєму боці, щоб зміна схеми була обробленою подією, а не збоєм.

• Забезпечити міграцію сховищ: перехід від Postgres є пріоритетом на наступні дванадцять місяців. Ви будете володіти ним від кінця до кінця, від оцінки до переходу, і ваш погляд на цільову платформу має реальну вагу.

• Запускайте те, що створюєте: розгортання, поведінка у виробництві, можливість спостереження, вартість виконання та надійність. Ми розширюємося в ЄС, тому регіональна резидентність даних є обмеженням дизайну з самого початку, а не модернізацією.

Те, що ми шукаємо

• Кілька років створення та експлуатації платформ виробничих даних, комфортно бути найстаршим інженером на платформі щодня

• Справжня глибина виробництва AWS у S3, IAM, мережах і службах прийому й обміну повідомленнями (Kinesis/Firehose, EventBridge, SNS, SQS, Lambda або еквівалент)

• Практичний збір даних про зміни та обробка, керована подіями — ви розумієте гарантії доставки, ідемпотентність, упорядкування, дублікати та повторне відтворення, а також вартість кожного з них, щоб отримати правильний результат

• Потужний робочий Python і SQL, хмарне сховище (Snowflake, Redshift, BigQuery або аналогічний) і оркестровник (Dagster, Airflow або еквівалент)

• Ви запустили те, що створили, викликали, коли воно зламалося, і змінили щось структурне згодом — Git, запити на отримання, CI/CD і тестування є стандартними, а не прагненнями

• Комфортно працювати в інфраструктурі, яка вам не належить, і вміти домовитися про те, що вам потрібно, з командами, чиї резерви ви не контролюєте

• Прагматичний — ви відправляєте робочі речі й знаєте, коли просте рішення перевершить елегантне пізніше

Приємно мати

• Досвід платежів або фінансових технологій, зокрема дані про транзакції, бухгалтерську книгу або звірку даних

• Змінити збір даних із DynamoDB або подібного сховища

• Міграція складу чи платформи позаду

• знайомство з dbt, щоб ви знали, як споживаються ваші виходи

• AWS з декількома обліковими записами, резидентна робота з даними, контракти на дані або реєстри схем

Що ви отримаєте

• Власність на платформі майже з нуля в платіжному бізнесі, який регулюється FCA, із визначеними та узгодженими межами власності — ви витрачатимете свій час на створення, а не на суперечки про те, чия робота

• Прямий контакт із вищим керівництвом із реальним впливом на цільову архітектуру

• Місце у швидкозростаючому, добре фінансованому масштабуванні фінтех-сфери в справді недостатньо обслуговуваній частині ринку платежів

Знайдіть більше англомовних вакансій у Великобританії на Arbeitnow

Джерело: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/ryftpay/senior-data-engineer-manchester-90629)