Главный инженер платформы

Фирма Технологии

Firmus Technologies — мировой лидер в разработке и эксплуатации эффективной инфраструктуры искусственного интеллекта в Азиатско-Тихоокеанском регионе.

Наша миссия, основанная в Австралии в 2019 году, — создать наиболее эффективную инфраструктуру искусственного интеллекта, сочетая передовые технологии с твердым стремлением к устойчивому развитию.

В Firmus мы уникальны в своем подходе. Мы проектируем, создаем и эксплуатируем новый класс цифровой инфраструктуры — Фабрику искусственного интеллекта. Благодаря нашему подходу от модели к сети мы раздвинули границы систем жидкостного охлаждения нескольких поколений, управления энергопотреблением, оркестровки программного обеспечения искусственного интеллекта и строительства. Для наших клиентов такой подход позволяет нам учитывать каждый ватт и доставлять недорогие токены AI по всему миру.

Фирмас AI Cloud

Наша крупномасштабная облачная платформа на базе графических процессоров Firmus AI Cloud специально создана для предоставления клиентам энергоэффективных вычислений ИИ в любом масштабе.

Оно дает разработчикам, предприятиям, образовательным учреждениям и государственным пользователям возможность обучать и развертывать модели искусственного интеллекта с непревзойденной эффективностью и экономией средств. Благодаря постоянно растущему набору услуг и приложений мы стремимся предоставить облачную среду, которая является ведущей на рынке, запатентованной и рассчитанной на масштабирование.

КРАТКОЕ ОПИСАНИЕ РОЛИ

Firmus Technologies ищет главного инженера платформы, которая будет владеть платформой, которую инженеры Firmus создают и выпускают в общедоступном облаке и в наших собственных центрах обработки данных. Самообслуживание и безопасность стоят на первом месте: используя один золотой путь, инженер должен иметь возможность создать сервис, получить среду и безопасно отправить его в производство с минимальной поддержкой. Все, что вы разрабатываете, должно работать на разных площадках и масштабироваться до сотен тысяч графических процессоров на фабриках искусственного интеллекта мощностью в гигаватты.

ОСНОВНЫЕ ОБЯЗАННОСТИ

Архитектура и решения

• Владеть архитектурой инженерной платформы и ее многосайтовой плоскостью управления, как в общедоступном облаке, так и локально. Установите целевую архитектуру на два-три года вперед и спланируйте шаги от сегодняшней системы к ней.

• Спроектируйте платформу на базе повторяемого устройства масштабирования. Емкость увеличивается в одинаковых единицах, сбой остается внутри одного подразделения или площадки, и каждая площадка соответствует определенному стандарту, прежде чем на ней появится платформа.

• Решите, как внутренние кластеры Kubernetes и гипервизора создаются, объединяются в сеть, обновляются и восстанавливаются. Обеспечьте совместимость Kubernetes и близость к предыдущим выпускам с помощью обновлений, не требующих простоев. Новые сайты создаются на основе кода и пакета развертывания сайта, а восстановление регулярно тестируется.

• Решите, как услуги упаковываются, выпускаются и продвигаются с помощью постепенного развертывания, а также как неудачный выпуск откатывается и локализуется на всех сайтах.

• Проводить анализ проектов на предмет существенных изменений в группах, подписывать протоколы решений по архитектуре и разрешать технические споры, возникающие у инженеров. Принимайте решения, учитывая неполную информацию, записывайте предположения и возвращайтесь к решению, когда данные изменятся.

Стройте и развивайтесь

• Собственная инженерная служба самообслуживания с дизайном, ориентированным на API. Интерфейс командной строки, автоматизация и любой портал разработчиков используют один и тот же API платформы. Относитесь к каждому обращению к команде платформы как к пробелу в самообслуживании и закрывайте в первую очередь самые распространенные.

• Храните каталог услуг в коде с указанием владельца для каждой услуги и картами показателей, которые показывают каждой команде, насколько ее услуги соответствуют «золотому пути», готовности к производству и стандартам безопасности.

• Обеспечьте многокластерное развертывание для внутренних групп и продукта клиента: один конвейер для каждого региона и центра обработки данных, продукт клиента изолирован от внутренних рабочих нагрузок и сайты, которые продолжают работать, когда оркестратор недоступен.

• Позвольте агентам ИИ работать на пути доставки под тем же контролем, что и инженеры, со своей собственной идентификацией, минимальными привилегиями, изолированной программной средой и человеком, утверждающим каждое производственное изменение.

Надежность, безопасность и стоимость

• Установите SLO и бюджеты ошибок для платформы и используйте бюджет, чтобы решить, когда работа по обеспечению надежности должна быть приоритетной.

• Руководить техническим реагированием на крупные инциденты на платформе и следить за тем, чтобы каждое вскрытие завершалось исправлением, которое предотвращает повторение подобных инцидентов.

• Установите стандарт, которому соответствует каждое изменение, прежде чем оно будет опубликовано: проверка кода, приемочные тесты, сборка, отслеживаемая от исходного кода до развертывания, а также средства контроля группы безопасности приложений в каждом конвейере по умолчанию.

• Предоставлять секреты, сертификаты и единый вход в качестве сервисов платформы, созданных в соответствии со стандартом идентификации и секретов группы безопасности, с взаимным TLS между сервисами и учетными данными, выдаваемыми из кода, кратковременными и автоматически чередующимися.

• Обеспечьте постоянное соответствие требованиям SOC 2 типа 2 и ISO 27001 в платформе, используя элементы управления, записанные в виде политики в коде, автоматически собираемые доказательства, а также обнаруживающие и исправляющие отклонения.

• Автоматизируйте установку исправлений без сбоев и вносите срочные и исправления безопасности, на которые наложено эмбарго, в установленные сроки. Узлы заменяются сайт за сайтом из восстановленных образов с соблюдением ограничений по сбоям в работе каждой службы и с автоматическим откатом.

• Собственные затраты на уровне проектирования, включая расходы на облако, с одним общим путем для каждой команды и сайта.

Техническое лидерство

• Развивайте инженеров посредством наставничества, проверки дизайна и кода. Наем и проверка эффективности находятся в компетенции технического менеджера.

• Установите, как команда использует ИИ для эффективного и безопасного создания программного обеспечения, используя шлюзы проверки и автоматические проверки архитектуры, которые сохраняют код, созданный ИИ, в пределах согласованного проекта.

• Проводить технические собеседования и оценки для инженеров платформ и поддерживать эту планку для каждого кандидата.

Партнерство и общение

• Сформируйте дорожную карту платформы вместе с лидерами по продуктам, инфраструктуре, сети и доставке на сайт и подготовьте платформу до ввода в эксплуатацию каждого нового региона или центра обработки данных.

• Согласуйте право собственности в письменной форме на каждой границе с инфраструктурой, сетью, безопасностью, программным обеспечением, данными и возможностью наблюдения, а также урегулируйте разногласия напрямую.…

Источник: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/firmus/principal-engineer-platform-sydney-australia-409539).