Інженер з обробки даних AWS (помічник)

Macores — це фірма, яка займається модернізацією AWS. Більшість робіт з модернізації не відправляються, вони зупиняються в пілотних роботах, пробуксовують на рік або втричі перевищують бюджет. Ми існуємо, щоб доставити це: виробничі системи запущені, застарілі зняті з експлуатації, результати виміряні. Наша доставка побудована на Aedeon, агентській платформі, створеній дочірньою компанією засновників Мактореса, яка поглинає повторювані 60–70% роботи із залучення, виявлення, відображення залежностей, перевірки, створення тестів, за які традиційний консалтинг оплачує людські години. Передові інженери володіють рештою: архітектурою, судженням і переходом у дати, які ми зобов’язуємося в контракті.

Ця роль є частиною нашої модернізації платформи даних: консолідація та перенесення інфраструктури даних клієнтів на AWS за тижні, а не за квартал. Клієнти приходять до нас із конвеєрами, яким ніхто не довіряє, показниками, з якими ніхто не погоджується, і складами, які зупиняють кожне нове бізнес-питання. Ви створюватимете продукти обробки даних, які виправлять це — співпрацюватимете з бізнес-лідерами, аналітиками та дослідниками даних, щоб зрозуміти предметну область, а потім створюватимете конвеєри та моделі, які затримаються у виробництві.

Оскільки Aedeon виконує повторюване виявлення джерела рівня, відображення схем, механізми перевірки, ви не будете витрачати свою ранню кар’єру на перевірку електронних таблиць. Ви витратите їх на написання коду, який досягає продуктивності, і на навчання від інженерів, які володіють переробками. Якість даних тут не є прапорцем; це продукт.

Що ви будете робити?

• Напишіть ефективний код PySpark і Amazon Glue, який надсилатиметься у виробництво.

• Напишіть SQL в Amazon Athena та Amazon Redshift.

• Підберіть нові технології та методики та застосуйте їх для вирішення реальних бізнес-проблем.

• Співпрацюйте з інженерними та бізнес-командами, щоб створювати продукти даних і послуги, якими люди насправді користуються.

• Виконуйте проекти разом із командою та вчасно інформуйте клієнтів.

Що ми шукаємо?

• Від 1 до 3 років досвіду роботи з Apache Spark, PySpark і Amazon Glue.

• 2+ роки досвіду написання завдань ETL за допомогою PySpark і SparkSQL.

• 2+ роки досвіду роботи із SQL-запитами та збереженими процедурами.

• Глибоке розуміння API Dataframe і функцій трансформації, які підтримуються Spark 2.7+.

Вам буде віддано перевагу, якщо у вас є

• Попередній досвід роботи з AWS EMR, Apache Airflow

• Сертифікати AWS Certified Big Data – спеціальність АБО Cloudera Certified Big Data Engineer АБО Hortonworks Certified Big Data Engineer

• Розуміння DataOps Engineering

Як ми працюємо?

Ми використовуємо модель передового розгортання. Інженери співпрацюють із командою клієнта, володіють результатами від відкриття до виробництва та виконують зобов’язання щодо доставки особисто. Aedeon поглинає накип; інженери поглинають судження; договір поглинає ризик. Як співробітник, ви працюватимете всередині цієї моделі з першого дня, доставляючи разом зі старшими інженерами, а не спостерігаючи зі лави. Культура невимушена і тримається подалі від жорстких корпоративних звичок. Ми дбаємо про те, що доставляється, і ми дозволяємо вам бути самим собою, коли ви доставляєте це.

Компенсація

Додаткова інформація

Життя в Макторес

Ми дбаємо про створення культури, яка справді змінить життя кожного Макторіанця. Наші 10 основних принципів лідерства, які поважають прийняття рішень, лідерство, співпрацю та цікавість, визначають нашу роботу.

1. Будьте на крок попереду

2. Доставляйте найкраще

3. Будьте сміливими

4. Звертайте увагу на деталі

5. Насолоджуйтеся викликом

6. Будьте допитливі та дійте

7. Візьміть лідерство

8. Володійте цим

9. Доставляйте цінність

10. Співпрацюйте

Ми хотіли б, щоб ви прочитали більше деталей про культуру роботи на https://mactores.com/careers

Шлях до приєднання до команди Mactores

У Mactores наш процес найму складається з трьох окремих етапів:

Оцінка перед прийомом на роботу:

Серія оцінок ваших технічних навичок і відповідності ролі.

Співбесіда з менеджером: Менеджер з найму бере участь у кількох дискусіях з вами, кожне від 30 хвилин до години, охоплюючи технічні навики, практичний досвід, лідерський потенціал і комунікацію.

Обговорення відділу кадрів: протягом цієї 30-хвилинної сесії ви матимете можливість обговорити пропозицію та наступні кроки з членом команди відділу кадрів.

Macores надає рівні можливості в усіх сферах працевлаштування. Ми не дискримінуємо на основі раси, релігії, статі, національного походження, віку, інвалідності, сімейного стану, військового стану, генетичної інформації чи будь-якої іншої категорії, яка захищена федеральними, державними чи місцевими законами. Це стосується кожної частини трудових відносин, найму, винагороди, просування по службі, переведення, дисциплінарних стягнень, звільнення, навчання, а також соціальних і розважальних програм.

Примітка. Будь ласка, дайте відповідь на якомога більше запитань за допомогою цієї програми, щоб прискорити процес найму.

Джерело: Jobicy (https://jobicy.com/jobs/151141-aws-data-engineer-associate)