Старший інженер з даних

Працює в CreateFuture

CreateFuture — це рідний консалтинговий партнер, де люди виконують важливу роботу та отримують підтримку для її якісного виконання. Ми співпрацюємо з такими організаціями, як PayPal, adidas, NatWest, FanDuel і Money Saving Expert, створюючи цифрові продукти та послуги, які змінюють ситуацію, завжди ставлячи людей на перше місце.

Ми команда творців. Ми пишемо код, формуємо доставку, будуємо стратегії виходу на ринок, розробляємо рішення штучного інтелекту та створюємо практики, які підтримують наших людей. Ми працюємо пліч-о-пліч із нашими клієнтами, кидаємо виклик тому, що не працює, і допомагаємо їм будувати майбутнє. Наша відданість майстерності, якості та культурі допомогла нам збільшити кількість людей до понад 600 лише за кілька років.

CreateFuture — це сертифікована компанія Great Place to Work-Certified™, яка кілька років поспіль вигравала нагороду Best Workplaces UK.

Приєднуйтесь до нас у нашій подорожі. Давайте творити завтра, разом, сьогодні.

Про роль і команду:

Ми шукаємо старшого інженера з даних, щоб приєднатися до нашої команди з обробки даних, який візьме на себе відповідальність за проектування, доставку та надійність конвеєрів виробничих даних, створених на таких платформах, як Snowflake / Databricks, Python і PySpark. Ви працюватимете з високим ступенем автономності, вирішуючи більш складні та неоднозначні завдання інженерної обробки даних під час роботи з клієнтами, водночас наставляючи молодших інженерів і допомагаючи підняти планку інженерної практики. Ви тісно співпрацюватимете з архітекторами, командами продуктів і зацікавленими сторонами клієнтів, щоб перетворити вимоги до даних у надійні рішення, які можна підтримувати.

Що ви будете робити:

• Беріть на себе відповідальність за проектування, створення та підтримку масштабованих, готових до виробництва конвеєрів даних за допомогою служб даних AWS (наприклад, AWS Glue, EMR, S3, Redshift, Athena), Python і PySpark з мінімальним наглядом

• Приймайте обґрунтовані технічні рішення щодо архітектури конвеєра, моделювання даних та інструментів, зважуючи компроміси щодо продуктивності, вартості та зручності обслуговування

• Наставляйте та підтримуйте молодших і середніх інженерів обробки даних, переглядайте код і діліться знаннями, щоб підвищити рівень надання всієї команди

• Володіти та постійно вдосконалювати конвеєри CI/CD для робочих процесів обробки даних, забезпечуючи надійне повторюване розгортання

• Усунення несправностей і вирішення складних проблем у поточних конвеєрах даних, діючи як точка ескалації для ширшої команди

• Співпрацюйте з міжфункціональними командами та зацікавленими сторонами клієнтів, щоб зрозуміти вимоги до даних і втілити їх у технічні рішення

Ми будемо раді поспілкуватися з вами, якщо ви:

• Розробив і керував конвеєрами виробничих даних на сучасній хмарній платформі даних, AWS (Glue, EMR, Redshift, S3/Lake Formation), Databricks, Snowflake або подібних, і міг говорити про те, які з цих рішень будуть передаватись на іншу, а які ні.

• Володійте оркестровкою у виробництві, розробкою залежностей, повторними спробами, SLA та можливістю спостереження, яка повідомляє вам про збій конвеєра раніше, ніж це станеться у клієнта.

• Отримали дані з незручних джерел: API, CDC з оперативних баз даних, файли, які змінюють форму, не повідомляючи вам.

• Володіти глибокими навичками SQL і практичним досвідом роботи з моделюванням даних (наприклад, Kimball, шаблони медальйон/озеро або моделювання, кероване доменом) — це навички несіння навантаження, незалежно від постачальників, які лежать в основі майже всієї нашої роботи над конвеєром

• Майте потужні Python і PySpark для пакетної обробки з виробничим, добре перевіреним кодом. Основна частина цієї роботи — це пакетна робота та ELT, але вам знадобиться мати досвід конвеєрів, керованих подіями або мікропакетних конвеєрів, і знати, де припущення дизайну перестають бути актуальними. )

• Мати досвід роботи з розробки даних з обмеженим наглядом, включаючи керування та підтримку CI/CD

• Мати досвід наставництва або підтримки розвитку менш досвідчених інженерів

• Комфортно працювати безпосередньо із зацікавленими сторонами для формування технічних рішень на основі неоднозначних вимог, презентації вашої роботи, оцінки та обговорення компромісів і ризиків.

Що ми вам запропонуємо:

Ми віримо, що люди виконають свою роботу якнайкраще. Це означає гнучкість у порівнянні з жорсткими правилами, вплив на діяльність і реальні інвестиції у ваш професійний і особистий розвиток. Ви станете частиною сприятливої ​​та доброзичливої ​​культури в оточенні розумних, допитливих людей, яким не байдуже те, що вони роблять.

Ми пропонуємо гнучку роботу, включаючи гібридні та дистанційні варіанти. Наші офісні центри розташовані в Единбурзі, Лідсі, Манчестері, Лондоні та Болгарії, з періодичними поїздками на сайти клієнтів або в офіси CreateFuture, коли це необхідно.

Ми довіряємо вам керувати своїм часом, збалансовуючи співпрацю з часом клієнта та цілеспрямованою роботою. Важливим є ваш вплив, а не те, наскільки зайнятим ви виглядаєте.

Наш процес найму

Ми намагаємося, щоб наш процес найму був зрозумілим, справедливим і з повагою ставився до вашого часу. Ми прагнемо зв’язатися з усіма, хто подав заявку, і повідомимо вам, на якому етапі ви перебуваєте.

Зазвичай це виглядає так:

• Зателефонуйте нашій команді пошуку талантів

• Співбесіда щодо конкретних ролей

Залежно від ролі ми також можемо попросити вас зробити коротку презентацію, практичне чи технічне завдання або провести розмову, зосереджену на цінностях. Ми пояснимо, про що йдеться, перш ніж щось станеться.

Включення в CreateFuture

Ми віримо, що різні команди створюють кращі робочі місця та кращі продукти. Ми хочемо, щоб CreateFuture був місцем, де люди відчувають себе в змозі бути самими собою та виконувати свою роботу якнайкраще.

Якщо вам потрібні будь-які коригування чи підтримка під час процесу подання заявки, просто. Ми зробимо все можливе, щоб допомогти.

Чекаємо на вашу заявку!

Знайдіть роботу у Великій Британії на Arbeitnow

Джерело: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/xdesign/senior-data-engineer-230278)