Інженер платформи

Про CuspAI
CuspAI — передова компанія зі штучного інтелекту, яка має на меті знайти революційні матеріали, необхідні для прогресу людства. У той час як природі знадобилися мільярди років, щоб удосконалити молекули, ми використовуємо ШІ, щоб розблокувати прориви в матеріалах на трильйони доларів за місяці, а не за тисячоліття. Наша команда засновників є найбільш цитованою у світі, до її складу входять дослідники світового рівня в галузі ШІ, хімії та інженерії.

Ми працюємо над деякими з найскладніших і найважливіших завдань, зокрема над енергією, чистою водою, майбутнім комп’ютером і вловлюванням вуглецю, і це лише початок того, що розкриє наша «пошукова система» матеріалів наступного покоління.

Ми запрошуємо вас стати частиною різноманітної інноваційної команди на стику штучного інтелекту та матеріалознавства, яка працює над створенням ефективних партнерств, які стимулюють інновації, масштабованість і галузеву співпрацю. Ця робота має значення. Ваша робота має значення.

Ми на порозі ери матеріалів за вимогою. приєднуйтесь до нас

Роль
Оскільки ми розвиваємося, ми шукаємо інженера платформи з потужним досвідом кодування Python, DevOps і хмарних платформ, щоб створювати та підтримувати інфраструктуру, яка забезпечує наші дослідницькі команди МЛ. Ви будете архітектором систем, які дозволять нашим дослідникам навчати та розгортати моделі в масштабі.

Ваш вплив
На цій посаді ви створюватимете та підтримуватимете платформу інфраструктури машинного навчання, яка дає змогу нашим дослідникам ШІ та матеріалознавцям проводити передові експерименти.

Ви допоможете побудувати та підтримувати весь стек операцій машинного навчання – від хмарної архітектури до конвеєрів розгортання – гарантуючи, що наші дослідницькі групи зможуть зосередитися на науці, поки ви керуєте системами.

Ви станете частиною новоствореної команди, яка працюватиме з нашим віце-президентом з розробки ML, у якій ви матимете можливість допомогти сформувати всю нашу інфраструктурну стратегію ML і значно вплинути на архітектуру нашої платформи.

Що ви будете робити

• Створіть платформу інфраструктури машинного навчання: розробіть і запровадьте хмарну платформу на Kubernetes, яка дозволить дослідникам легко навчати, оцінювати та розгортати моделі, не турбуючись про складність інфраструктури.

• Володійте стеком MLOps: впроваджуйте та обслуговуйте конвеєри CI/CD, реєстри моделей, системи відстеження експериментів і автоматизацію розгортання – повний життєвий цикл операцій ML.

• Масштабування розподіленого навчання моделі ML: створіть інфраструктуру для підтримки розподіленого навчання на багатьох графічних процесорах, реалізуючи рішення для конвеєрів даних, контрольних точок і оптимізації ресурсів.

• Надійність платформи: гарантуйте безвідмовну роботу нашої платформи машинного навчання на 99,9% за допомогою систем моніторингу, сповіщень і автоматизованих систем відновлення. Будьте охоронцем стабільності інфраструктури.

• Управління конфігураціями: використовуйте Kapitan для керування складними конфігураціями Kubernetes із кількома середовищами та забезпечення узгодженого розгортання в розробці, проміжному виконанні та виробництві.

• Оптимізація витрат: реалізуйте стратегії управління ресурсами, щоб оптимізувати витрати на хмару та виявити неефективне використання, одночасно максимізуючи обчислювальну пропускну здатність для наших дослідницьких груп.

• Досвід розробника: створюйте інструменти та абстракції, які спрощують для дослідників перехід від експерименту до виробництва без глибоких знань інфраструктури.

• Міждисциплінарна співпраця: тісно співпрацюйте з дослідниками МЛ, хіміками, матеріалознавцями та розробниками програмного забезпечення, щоб зрозуміти їхні потреби та створити інфраструктуру для новаторських проектів

Необхідно мати навички та кваліфікацію

• Ви той, хто в захваті від можливості надати вченим можливість працювати над проблемами, що змінюють світ у цій галузі, особисто зацікавлені в потенційних застосуваннях технології, яку створює Cusp.

• Ви розробник інструментів та інфраструктури, якому подобається максимально спрощувати життя команд. У рамках вашого інтересу до цієї сфери ви залишаєтеся в курсі останніх відповідних технологій, інструментів і проектів з відкритим кодом.

• Ви досвідчений інженер із глибоким досвідом у створенні та підтримці інфраструктури машинного навчання (а не в розробці моделей), ідеально для початкових середовищ. Нам потрібно, щоб ви вміли почати роботу й автономно працювати як експерт із предметної теми, надаючи внески та вказівки щодо передового досвіду, де це необхідно.

• Ви маєте глибокий досвід роботи з робочими навантаженнями ML на Kubernetes і мультихмарних платформах (AWS, GCP, neoclouds).

• Ви володієте сильними навичками програмування на Python та/або Go для автоматизації інфраструктури, а не лише написання сценаріїв.

• Знання інфраструктури як коду (IaC) на рівні експерта з використанням робочих процесів Terraform, Helm, Kapitan і GitOps.

• Досвід роботи з розподіленими платформами ML для JAX і/або PyTorch (Tensorflow буде менш актуальним).

• Вам також знадобиться досвід інфраструктури GPU, зокрема керування кластерами GPU та оптимізація продуктивності

• Попередній досвід інженера-програміста до переходу в DevOps / MLOps / ML Infrastructure або принаймні регулярне написання коду (на роботі та/або у вільний час), оскільки це має надати вам навички кодування, які ми шукаємо.

Бонусні бали (але не критичні)

• Досвід використання нашого стеку технологій (Flyte, Kapitan, Pants) або подібних інструментів

• Досвід роботи з HPC-середовищами та планувальниками завдань (Slurm, PBS)

• Знання інфраструктури обслуговування ML (Triton, TorchServe, KServe)

• Знайомство з робочими процесами наукового обчислення та керування даними

• Досвід роботи з мультитенантними платформами машинного навчання

• Досвід роботи з підтримкою дослідницьких груп (розуміння їхніх унікальних потреб порівняно з виробничим ML)

Що ми пропонуємо

• Конкурентоспроможна зарплата: ми цінуємо й винагороджуємо вплив і зростання

• Власний капітал у CuspAI: ви зацікавлені в успіху компанії

• Відпустка, щоб залишатися свіжими: 28-денна відпустка (Німеччина, Нідерланди, Великобританія) або 21-денна відпустка (Японія, SG, США), на додаток до місцевих державних свят…

Джерело: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/cuspai/platform-engineer-london-424820)