Инженер данных

Ваша роль в Veezu:
В качестве инженера по данным вы будете создавать и поддерживать платформу данных, которая обеспечивает отчетность, аналитику и обработку данных в Veezu. Подчиняясь директору по разработке данных, вы будете практически работать с Microsoft Fabric, SQL, Python/PySpark и Power BI, получая данные из наших систем бронирования, баз данных и сторонних API и превращая их в надежные, хорошо смоделированные наборы данных, на которые бизнес опирается каждый день.
Кто такие Визу?
Veezu — самая быстрорастущая компания в Великобритании, занимающаяся такси и частным прокатом автомобилей, работающая в сотнях городов и поселков Великобритании. Мы — высокотехнологичная служба мобильности по требованию, которая поддерживает наши гиперлокальные сообщества, помогая им процветать и многое другое!
Что вы будете делать:

• Проектируйте, создавайте и обслуживайте конвейеры ETL/ELT в Microsoft Fabric с использованием Pipelines, Notebooks, Lakehouses, Warehouses и OneLake.

• Создавайте блокноты PySpark для приема и преобразования данных из баз данных SQL Server, API REST, приложений SaaS и файлового экспорта.

• Разрабатывать и оптимизировать преобразования SQL, хранимые процедуры и модели данных звездообразной схемы в стиле Кимбалла.

• Создавайте и поддерживайте семантические модели Power BI и наборы данных для панелей мониторинга, используемых командами в рамках бизнеса.

• Внедрить проверки качества, проверки и сверки данных, чтобы цифры совпадали в разных системах.

• Контролируйте производственные конвейеры и устраняйте проблемы с данными, производительностью и обновлением.

• Используйте Git, автоматическое тестирование и CI/CD для поддержки надежных и воспроизводимых развертываний.

• Поддерживать четкую документацию, происхождение данных и технические стандарты.

• Работайте с аналитиками и заинтересованными сторонами в бизнесе, чтобы превратить требования в практические решения для обработки данных.

• Мы стремимся поддерживать сертификацию ISO27001 и устанавливать высокие стандарты соответствия информационной безопасности.

Что вам понадобится:
Существенный

• 2-4 года опыта работы в сфере обработки данных.

• Хорошие навыки SQL, включая сложные преобразования и настройку производительности.

• Практический опыт работы с Microsoft Fabric (или Azure Synapse/Data Factory и готовность перейти на Fabric).

• Python и PySpark для приема и преобразования данных.

• Опыт интеграции данных из API и других внешних источников.

• Хорошее знание хранилищ данных и многомерного моделирования (Кимбалл).

• Опыт работы с Power BI и семантическими моделями.

• Понимание качества данных, тестирования и сверки, а также опыт работы с Git/системой контроля версий.

• Уверенное общение с техническими и нетехническими заинтересованными сторонами.

Приятно иметь

• CI/CD и автоматическое тестирование конвейеров данных.

• Сертификация Microsoft Fabric (например, DP-600 или DP-700).

• Образцы проектирования архитектуры дома у озера / медальона.

• Опыт управления данными, безопасности и происхождения.

• Опыт работы с большими объемами транзакционных данных, в идеале в сфере транспорта, мобильности или услуг по требованию.

Где вы будете:
Эта должность является гибридной, она базируется в нашей штаб-квартире в Кардиффе и работает в офисе 3 дня в неделю.
Veezu стремится к справедливому и инклюзивному набору персонала, приветствуя кандидатов с любым опытом, опытом и сообществами.
Найдите работу в Великобритании на Arbeitnow

Источник: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/veezu/data-engineer-cardiff-121842).