Инженер по контролю качества Databricks

Штаб-квартира: США

URL: https://jobs.workable.com/company/kb5Wja5n4RGDc2pq5FujAz/jobs-at-v4c.ai

О V4C V4C — это чистый партнер Databricks. Менее чем за два года мы получили более 850 сертификатов Databricks для более чем 325 клиентов и были названы партнером года 2026 Databricks (C&SI Emerging).
В качестве инженера по обеспечению качества Databricks в нашей команде по разработке данных вы будете владеть воротами качества для корпоративных платформ данных, работая напрямую с клиентами. Вы будете работать на действующих корпоративных платформах данных вместе с одной из наиболее сертифицированных Databricks команд доставки на рынке.

Роль Это роль по обеспечению качества для людей, которые разбираются в инженерии данных, а не в общем обеспечении качества программного обеспечения, ориентированном на проект данных. Вы будете проверять конвейеры Lakehouse, что означает размышления о количестве строк, дрейфе схемы, поздних поступлениях данных и ошибках скрытого преобразования, о которых никогда не будет говорить пользовательский интерфейс. Наш подход основан на автоматизации: пакеты Python и PySpark работают в CI и блокируют продвижение в случае сбоя. Вы сами подписываете выпуск, что делает вас последним лицом между клиентом и неверными данными в производстве.
Обязанности

• Собственная стратегия тестирования и утверждение релизов по заданиям, включая документированные планы тестирования, охватывающие объем, риски и покрытие.

• Создание и поддержка наборов автоматизированных тестов на Python и PySpark (pytest), интегрированных в конвейеры CI.

• Комплексная проверка конвейеров данных: прием, преобразования слоев Medallion, таблицы Delta Lake и рабочие процессы ELT.

• Внедрение правил качества данных в виде кода, включая ожидания Lakeflow и многоразовые структуры проверки.

• Запускайте регрессионную проверку после изменений кода и поддерживайте контрольные параметры качества CI, которые блокируют слияние или продвижение в случае сбоя.

• Сотрудничайте с инженерами, чтобы определить кандидатов на автоматизацию и повысить планку охвата всей практики.

• Более 5 лет в сфере автоматизации или тестирования качества, включая значительное время тестирования конвейеров данных, а не только приложений.

• Опыт работы с данными: вы можете читать конвейер, рассуждать о преобразовании и писать SQL для его проверки.

• SQL экспертного уровня

• Опыт работы с архитектурой Medallion, Delta Lake и платформами данных на базе ELT.

• Опыт создания автоматизированных пакетов, которые работают в условиях CI и развертывания шлюзов.

• Наглядный практический опыт работы с Databricks или аналогичными платформами.

Предпочтения

• Опыт работы в сфере здравоохранения или биологических наук желателен, но не обязателен.

• Существующие сертификаты Databricks.

• Практический опыт работы с каталогом Unity, конвейерами Lakeflow или пакетами ресурсов Databricks.

• Опыт работы с конвейерами Azure DevOps или эквивалентными инструментами CI (GitHub Actions, GitLab CI).

• Знание стандартов проверки данных на основе контрактов, таких как ODCS.

• Опыт использования агентов LLM или инструментов, подключенных к MCP, для проведения проверок, сортировки сбоев или составления отчетов о дефектах.

• Опыт консультирования или работы с клиентами

Ставка оплаты: 70–80 долларов в час (1099 независимых подрядчиков).
Это контрактное обязательство, а не должность наемного сотрудника. То, где показатель окажется в пределах диапазона, зависит от глубины опыта тестирования конвейеров данных и возможностей автоматизации. Открыт для подрядчиков в любой точке США.

Чтобы подать заявку: https://weworkremotely.com/remote-jobs/v4c-ai-databricks-qa-engineer

Источник: Мы работаем удаленно (https://weworkremotely.com/remote-jobs/v4c-ai-databricks-qa-engineer).