Інженер розподілених систем – Платформа даних

Команда Data Platform у Netflix створює високомасштабовану платформу даних, яка дає змогу організації зберігати, обробляти та приймати рішення за допомогою даних. Команда володіє інфраструктурою та послугами, які забезпечують прийом, зберігання, обробку та аналітику даних у Netflix, і надають високоякісні, надійні та надійні дані командам інженерів, науковцям із обробки даних та зацікавленим сторонам.

Що ви будете робити

• Проектування, створення та експлуатація масштабованих, високопродуктивних розподілених систем для прийому, зберігання, обробки та аналітики даних.

• Створюйте та обслуговуйте служби та конвеєри, які надійно та ефективно переміщують великі обсяги даних між системами Netflix.

• Вирішуйте складні проблеми узгодженості даних, відмовостійкості, масштабованості та продуктивності.

• Підвищення надійності, спостережливості та працездатності служб платформи даних, які використовуються в усій компанії.

• Співпрацюйте з інженерами, фахівцями з обробки даних і командами продуктів, щоб надавати рішення для обробки даних, які підтримують критичні бізнес-рішення.

• Сприяти довгостроковій архітектурі та технічному напрямку платформи даних.

Те, що ми шукаємо

• Великий досвід проектування та побудови розподілених систем і додатків з великим об’ємом даних.

• Глибоке розуміння концепцій розподілених систем, включаючи узгодженість, розділення, реплікацію та відмовостійкість.

• Досвід широкомасштабної обробки даних і потокових технологій.

• Знання Java або Scala та досвід роботи з такими системами, як Apache Flink, Kafka, Spark або Iceberg.

• Досвід експлуатації виробничих систем у масштабі та налагодження проблем із складними розподіленими системами.

• Досвід постачання високоякісного надійного програмного забезпечення в середовищі спільного проектування.

Приємно мати

• Досвід роботи з хмарною інфраструктурою та контейнерними системами.

• Досвід роботи з архітектурою озера даних і форматами відкритих таблиць.

• Досвід підвищення продуктивності та економічності для великих робочих навантажень даних.

Переваги

Netflix надає комплексні переваги, включаючи плани охорони здоров’я, підтримку психічного здоров’я, пенсійний план 401 (k), включаючи відповідність роботодавця, опціони на акції та політику гнучкого відпустки.

Джерело: Jobspresso (https://jobspresso.co/job/distributed-systems-engineer-data-platform/)