Старший инженер данных

Почему Сокуре?

Socure создает инфраструктуру доверия к идентификационным данным для цифровой экономики, проверяя 100 % достоверных данных в режиме реального времени и предотвращая мошенничество еще до его начала. Миссия велика, проблемы сложны, а последствия ощущают предприятия, правительства и миллионы людей каждый день.

Мы нанимаем людей, которым нужен такой уровень ответственности. Люди, которые движутся быстро, мыслят критически, действуют как владельцы и глубоко заботятся о точном решении проблем клиентов. Если вам нужна предсказуемость или узкий охват, это не ваше место. Если вы хотите помочь построить будущее идентичности с командой, которая держит для себя высокую планку — продолжайте читать.

О роли

Мы ищем старшего инженера по обработке данных, который присоединится к нашей команде по автоматизации данных. Вы будете играть решающую роль в проектировании и создании масштабируемых платформ данных и конвейеров, которые будут использоваться в продуктах и ​​аналитике Socure для проверки личности. Эта должность идеальна для тех, кто страстно увлечен решением реальных бизнес-задач с использованием данных и сочетает в себе глубокий практический опыт в области разработки данных и высокую степень ответственности.

Что ты будешь делать

• Проектируйте и создавайте конвейеры пакетной и потоковой передачи данных для поддержки автоматического приема данных, разработки функций машинного обучения и анализа в различных областях продуктов.

• Собственная комплексная доставка сложных, неоднозначных данных, включая архитектуру, реализацию, тестирование, развертывание, мониторинг и документацию.

• Разрабатывать и развивать платформу данных для поддержки крупномасштабной обработки данных с использованием современных облачных технологий.

• Автоматизируйте операции с данными (проверку, проверку качества, оповещения, обратное заполнение и рабочие процессы восстановления), чтобы сократить объем ручного труда и повысить согласованность.

• Оптимизация затрат, производительности и надежности рабочих нагрузок данных.

• Тесно сотрудничайте с межфункциональными командами (обработка данных, продукция, инженерия) для понимания требований и перевода их в технические решения.

• Оценивать и внедрять новые технологии (новые механизмы обработки, форматы хранения, инструменты оркестрации, прием данных с помощью GenAI), чтобы поддерживать платформу современной и эффективной.

Что вы приносите

• Более 5 лет практического опыта работы с данными, создания и обслуживания платформ и конвейеров данных промышленного уровня.

• Сильные навыки программирования на языке общего назначения (например, Python или Scala) для обработки данных и SQL для анализа данных.

• Глубокий опыт работы с платформами распределенной обработки данных, такими как Apache Spark, включая настройку и оптимизацию производительности.

• Подтвержденный опыт создания решений для обработки данных с использованием сервисов AWS (EMR, Lambda, s3 и т. д.).

• Глубокое понимание концепций моделирования и хранения данных, включая секционирование и проектирование схем для крупномасштабных наборов данных.

• Опыт эксплуатации и поддержки производственных конвейеров, включая мониторинг, оповещение, реагирование на инциденты и постепенное повышение надежности.

• Прочный фундамент в практике разработки программного обеспечения, включая контроль версий, CI/CD, стратегии тестирования и проверку кода.

• Сильные коммуникативные навыки и навыки сотрудничества, а также способность эффективно работать как с техническими, так и с нетехническими заинтересованными сторонами.

Предпочтительные квалификации

• Опыт потоковой обработки данных или обработки данных в режиме, близком к реальному времени (Kafka, Kinesis и т. д.).

• Практический опыт работы с инструментами оркестрации данных (Airflow, Step Functions и т. д.).

• Знакомство с современными шаблонами платформ данных, такими как Data Lakehouse, Data Mesh, а также крупномасштабным обменом данными между командами.

• Опыт быстрого проектирования с использованием современных GenAI, больших языковых моделей (LLM).

• Опыт наставничества других инженеров и участия в разработке общетехнических стандартов и передовых практик.

В качестве примечания; Socure не может предоставить спонсорскую поддержку для этой роли ни сейчас, ни в будущем.

Socure — работодатель, предоставляющий равные возможности, который ценит разнообразие во всех его формах внутри нашей компании. Мы не проводим дискриминацию по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, семейного положения, статуса ветерана или инвалидности.
Если вам необходимо размещение на каком-либо этапе подачи заявления или процесса найма, включая собеседование или поддержку при адаптации, обратитесь напрямую к своему партнеру по подбору персонала Socure.

Подписывайтесь на нас!

Ютуб | LinkedIn | Х (Твиттер) | Фейсбук

Источник: Jobicy (https://jobicy.com/jobs/153886-senior-data-engineer-4).