Вакансія
З партнерського стрічки
Штатний інженер-програміст, дані
Ціна за запитом
Деталі
- Тип зайнятості
- Повна зайнятість
- Віддалено
- Так
- Компанія
- Stability AI
Опис
Автоматичний переклад з English. Оригінальний текст є авторитетним. Машинний переклад — готується точніший варіант.
Штаб: Віддалений
Команда
Команда Data створює та запускає системи, які роблять дані Stability AI придатними як для управління бізнесом, так і для навчання наших моделей. Ми невелика команда для співпраці, яка тісно співпрацює з фінансами, маркетингом, SRE, безпекою, продуктами та дослідженнями. Ми зосереджуємося на результатах, а не на годинах, і ви матимете глибокий технічний доступ і свободу створювати.
Наш стек: AWS (S3, Athena, Glue, EMR, Step Functions, EventBridge), Iceberg, dbt, Postgres, Terraform, Helm, GitHub Actions, QuickSight, Stripe, Auth0, HubSpot, Customer.io, PostHog, OpenTelemetry та SLURM — або подібні. Ми дбаємо про суд більше, ніж про логотип.
Робота
Ви будете володіти наскрізною платформою даних нашої компанії: озером даних AWS, рівнем трансформації, інтеграцією між нашими бізнес-системами та інфраструктурою на основі Kubernetes, на якій вони працюють. Дані, які керують бізнесом (виставлення рахунків, телеметрія використання, ідентифікація, CRM, ERP, вартість хмари), зберігаються в дюжині систем, які ніколи не були з’єднані разом. Ви будете інженером, який з’єднує їх і підтримує надійність.
Ви також будете розробником даних для наших дослідницьких груп аудіо, відео, зображень і 3D, будуючи конвеєри, які перетворюють необроблені медіа на набори даних, готові до навчання. Це практична роль із реальним правом власності, а не місце підготовки даних чи аналітика.
• Наскрізне володіння платформою даних компанії: озером S3/Athena/Glue, проектом dbt і його щоденною збіркою, прийомом даних із Stripe, Auth0, HubSpot, OpenTelemetry та подіями продукту, а також рівнем обслуговування Postgres для інформаційних панелей і агентів штучного інтелекту.
• Створюйте та керуйте інтеграціями між системами виставлення рахунків, CRM, ERP, системами ідентифікації та телеметрії, щоб дохід, використання, вартість та ідентифікаційні дані клієнта узгоджувалися автоматично, а не через електронні таблиці та квитки
• Проектувати та підтримувати складський рівень: розмірні моделі, контракти на дані з розробником продукту для схем подій, перевірки якості, походження та каталог
• Застосування рівня ідентифікаційної інформації (відкриті та обмежені схеми) через надання доступу, роботу з безпекою та юридичними відділами
• Масштабна обробка даних: мільярди телеметричних рядків, терабайтні потоки журналів, таблиці Iceberg, розділення та контроль витрат
• Власна оркестровка та інфраструктура: оркестровка на EKS, Helm, Terraform, CI/CD, моніторинг і оповіщення, а також приєднайтеся до чергування робочих годин для щоденних конвеєрів
• Створення операційної звітності для фінансів і керівництва: дохід за бізнес-напрямками, кредити та передоплачені зобов’язання, а також хмарні витрати за відділами
• Підтримка дослідницьких груп у всіх модальностях: джерело, перевірка ліцензії, введення та версія великих навчальних наборів даних для аудіо, відео, зображень і 3D
• Створюйте конвеєри генерації, фільтрації, дедуплікації та субтитрів, які перетворюють необроблені або синтетичні медіафайли на готові до навчання шарди, і запускайте їх у масштабі в нашому кластері SLURM і хмарному сховищі об’єктів
• Підтримуйте актуальність походження, показників якості та документації набору даних, щоб будь-який дослідник міг відтворити навчальний набір
• Керуйте рецензуванням дизайну, наставляйте товаришів по команді та пишіть збірники програм, які усувають залежності від однієї особи
• Співпрацюйте з фінансами, маркетингом, SRE, безпекою, продуктами та дослідженнями в масштабах корпоративних ініціатив щодо даних
Що ви приносите
Ми шукаємо інженера, який поєднує міцні звички розробки програмного забезпечення зі складом. Ідеальний кандидат поєднує в собі сильні звички розробника програмного забезпечення з глибиною моделювання складів і розсудливістю, щоб сказати, що число означає, а що ні.
Досвід
• 6+ років створення та експлуатації виробничих платформ даних, включаючи право власності на архітектуру
• Досвід інтеграції бізнес-систем SaaS (Stripe, HubSpot, ERP, постачальник ідентифікаційних даних) у склад
• Виробничий досвід підготовки великих наборів мультимодальних навчальних даних і виконання пакетних робочих навантажень на HPC або хмарних планувальниках (SLURM, Kubernetes або подібні)
• Комфорт самостійної роботи в невеликій команді з реальною власністю
Навички та досвід
• Експерт із SQL і Python із сильними звичками розробки програмного забезпечення: тестування, перевірка коду та CI
• Склади та озера з реальним моделюванням: Iceberg або Delta на S3, Athena/Trino, Snowflake або BigQuery та dbt
• Оркестровка у виробництві (dbt, Airflow або Argo) і розподіленій обробці (Spark або еквівалент)
• AWS, Kubernetes (EKS), Helm і Terraform — ви можете налагодити невдалу роботу Glue і несправний випуск Helm
Додаткові сильні сторони
• Попереднє володіння платформою 0-1 на стартапі
• Досвід роботи з дослідницькими групами над генеративними моделями або практичне використання аудіо, відео, зображень або 3D-даних
• FinOps і хмарні звіти про витрати
• Знайомство з SOC 2 або подібними вимогами відповідності для доступу до даних
Пільги та компенсації
За межами США
Компенсації та пільги встановлюються відповідно до ринку та місцевої практики кожної країни. Якщо ви подаєте заявку з-за меж США, ваш рекрутер поділиться деталями для вашої країни на початку процесу.
США
• Дистанційна компанія з колегами з багатьох країн, які привносять різноманітні погляди, і гнучкість, вбудовану в нашу співпрацю.
• Медичне страхування для вас і вашої родини. Вибирайте з планів PPO та HMO, включно з вибраними планами, де Stability AI покриває 100% премій для вас і ваших утриманців, які відповідають вимогам.
• Рахунки HSA та FSA для відкладення доларів до сплати податків на охорону здоров’я та інші прийнятні витрати.
• Страхування життя, яке оплачує компанія, з можливістю додати добровільне покриття для вас, вашої дружини та ваших дітей.
• Страхування на короткострокову та довгострокову непрацездатність, щоб захистити частину вашого доходу, якщо хвороба чи травма не дозволяють вам працювати.
• 401(k) із збігом компанії до 4%.
• Оплачувана відпустка по догляду за дитиною, щоб підтримати вас, коли ваша сім'я зростає.
• Гнучка оплачувана відпустка, плюс оплачувана відпустка компанії.
• Обладнання, необхідне для найкращої роботи, надається Stability AI.…
Джерело: ми працюємо віддалено (https://weworkremotely.com/remote-jobs/stability-ai-staff-software-engineer-data)
Команда
Команда Data створює та запускає системи, які роблять дані Stability AI придатними як для управління бізнесом, так і для навчання наших моделей. Ми невелика команда для співпраці, яка тісно співпрацює з фінансами, маркетингом, SRE, безпекою, продуктами та дослідженнями. Ми зосереджуємося на результатах, а не на годинах, і ви матимете глибокий технічний доступ і свободу створювати.
Наш стек: AWS (S3, Athena, Glue, EMR, Step Functions, EventBridge), Iceberg, dbt, Postgres, Terraform, Helm, GitHub Actions, QuickSight, Stripe, Auth0, HubSpot, Customer.io, PostHog, OpenTelemetry та SLURM — або подібні. Ми дбаємо про суд більше, ніж про логотип.
Робота
Ви будете володіти наскрізною платформою даних нашої компанії: озером даних AWS, рівнем трансформації, інтеграцією між нашими бізнес-системами та інфраструктурою на основі Kubernetes, на якій вони працюють. Дані, які керують бізнесом (виставлення рахунків, телеметрія використання, ідентифікація, CRM, ERP, вартість хмари), зберігаються в дюжині систем, які ніколи не були з’єднані разом. Ви будете інженером, який з’єднує їх і підтримує надійність.
Ви також будете розробником даних для наших дослідницьких груп аудіо, відео, зображень і 3D, будуючи конвеєри, які перетворюють необроблені медіа на набори даних, готові до навчання. Це практична роль із реальним правом власності, а не місце підготовки даних чи аналітика.
• Наскрізне володіння платформою даних компанії: озером S3/Athena/Glue, проектом dbt і його щоденною збіркою, прийомом даних із Stripe, Auth0, HubSpot, OpenTelemetry та подіями продукту, а також рівнем обслуговування Postgres для інформаційних панелей і агентів штучного інтелекту.
• Створюйте та керуйте інтеграціями між системами виставлення рахунків, CRM, ERP, системами ідентифікації та телеметрії, щоб дохід, використання, вартість та ідентифікаційні дані клієнта узгоджувалися автоматично, а не через електронні таблиці та квитки
• Проектувати та підтримувати складський рівень: розмірні моделі, контракти на дані з розробником продукту для схем подій, перевірки якості, походження та каталог
• Застосування рівня ідентифікаційної інформації (відкриті та обмежені схеми) через надання доступу, роботу з безпекою та юридичними відділами
• Масштабна обробка даних: мільярди телеметричних рядків, терабайтні потоки журналів, таблиці Iceberg, розділення та контроль витрат
• Власна оркестровка та інфраструктура: оркестровка на EKS, Helm, Terraform, CI/CD, моніторинг і оповіщення, а також приєднайтеся до чергування робочих годин для щоденних конвеєрів
• Створення операційної звітності для фінансів і керівництва: дохід за бізнес-напрямками, кредити та передоплачені зобов’язання, а також хмарні витрати за відділами
• Підтримка дослідницьких груп у всіх модальностях: джерело, перевірка ліцензії, введення та версія великих навчальних наборів даних для аудіо, відео, зображень і 3D
• Створюйте конвеєри генерації, фільтрації, дедуплікації та субтитрів, які перетворюють необроблені або синтетичні медіафайли на готові до навчання шарди, і запускайте їх у масштабі в нашому кластері SLURM і хмарному сховищі об’єктів
• Підтримуйте актуальність походження, показників якості та документації набору даних, щоб будь-який дослідник міг відтворити навчальний набір
• Керуйте рецензуванням дизайну, наставляйте товаришів по команді та пишіть збірники програм, які усувають залежності від однієї особи
• Співпрацюйте з фінансами, маркетингом, SRE, безпекою, продуктами та дослідженнями в масштабах корпоративних ініціатив щодо даних
Що ви приносите
Ми шукаємо інженера, який поєднує міцні звички розробки програмного забезпечення зі складом. Ідеальний кандидат поєднує в собі сильні звички розробника програмного забезпечення з глибиною моделювання складів і розсудливістю, щоб сказати, що число означає, а що ні.
Досвід
• 6+ років створення та експлуатації виробничих платформ даних, включаючи право власності на архітектуру
• Досвід інтеграції бізнес-систем SaaS (Stripe, HubSpot, ERP, постачальник ідентифікаційних даних) у склад
• Виробничий досвід підготовки великих наборів мультимодальних навчальних даних і виконання пакетних робочих навантажень на HPC або хмарних планувальниках (SLURM, Kubernetes або подібні)
• Комфорт самостійної роботи в невеликій команді з реальною власністю
Навички та досвід
• Експерт із SQL і Python із сильними звичками розробки програмного забезпечення: тестування, перевірка коду та CI
• Склади та озера з реальним моделюванням: Iceberg або Delta на S3, Athena/Trino, Snowflake або BigQuery та dbt
• Оркестровка у виробництві (dbt, Airflow або Argo) і розподіленій обробці (Spark або еквівалент)
• AWS, Kubernetes (EKS), Helm і Terraform — ви можете налагодити невдалу роботу Glue і несправний випуск Helm
Додаткові сильні сторони
• Попереднє володіння платформою 0-1 на стартапі
• Досвід роботи з дослідницькими групами над генеративними моделями або практичне використання аудіо, відео, зображень або 3D-даних
• FinOps і хмарні звіти про витрати
• Знайомство з SOC 2 або подібними вимогами відповідності для доступу до даних
Пільги та компенсації
За межами США
Компенсації та пільги встановлюються відповідно до ринку та місцевої практики кожної країни. Якщо ви подаєте заявку з-за меж США, ваш рекрутер поділиться деталями для вашої країни на початку процесу.
США
• Дистанційна компанія з колегами з багатьох країн, які привносять різноманітні погляди, і гнучкість, вбудовану в нашу співпрацю.
• Медичне страхування для вас і вашої родини. Вибирайте з планів PPO та HMO, включно з вибраними планами, де Stability AI покриває 100% премій для вас і ваших утриманців, які відповідають вимогам.
• Рахунки HSA та FSA для відкладення доларів до сплати податків на охорону здоров’я та інші прийнятні витрати.
• Страхування життя, яке оплачує компанія, з можливістю додати добровільне покриття для вас, вашої дружини та ваших дітей.
• Страхування на короткострокову та довгострокову непрацездатність, щоб захистити частину вашого доходу, якщо хвороба чи травма не дозволяють вам працювати.
• 401(k) із збігом компанії до 4%.
• Оплачувана відпустка по догляду за дитиною, щоб підтримати вас, коли ваша сім'я зростає.
• Гнучка оплачувана відпустка, плюс оплачувана відпустка компанії.
• Обладнання, необхідне для найкращої роботи, надається Stability AI.…
Джерело: ми працюємо віддалено (https://weworkremotely.com/remote-jobs/stability-ai-staff-software-engineer-data)
Це оголошення надходить із партнерського фіду. Подайте заявку на сайті джерела.
Джерело: Stability AI
Оголошення надано Stability AI.