Ingeniero de datos: Python / Airflow / Azure Databricks (m/w/d)

Para un proyecto de ingeniería de datos anspruchsvolles bei einem etablierten Unternehmen in der Schweiz suchen wir einen erfahrenen Data Engineer. Im Fokus stehen die Weiterentwicklung einer bestehenden On-Premise-Datanplattform sowie the laufende Transformation ineine moderne Azure-Databricks- und Lakehouse-Architektur.

• Entwicklung und Weiterentwicklung von Data Products

• Aufbau und Pflege von Ingestion- und Transformationspipelines

• Seguridad de la calidad de la fecha y del rendimiento

• Conexión y control de Apache-Airflow-DAG

• Mitarbeit bei Architekturentscheidungen rund um die Data Platform

• Actualización sobre la migración en Richtung Azure Databricks

• Zusammenarbeit mit Data Architect, DevOps Engineer y Product Owner

• Unterstützung interno Nutzer bei Data-, Plattform- y Python-Themen

• Mehrjährige Erfahrung como ingeniero de datos

• Sehr gute Kenntnisse en Python, insbesondere pandas, polars und Poetry

• Fundacion de equipo con Apache Airflow

• Sehr gute SQL y PostgreSQL-Kenntnisse

• Erfahrung con Azure Databricks

• Kenntnisse en Docker, Kubernetes o OpenShift

• Configuración con Azure DevOps/CI/CD

• Verständnis von Data Mesh, contratos de datos y arquitectura Lakehouse

• Configuración ideal con JupyterHub, Acryl DataHub y MinIO S3

• Selbständige und proaktive Arbeitsweise mit hoher Kommunikationsfähigkeit

Encuentre más trabajos de habla inglesa en Suiza en Arbeitnow

Fuente: Arbeitnow (https://www.arbeitnow.ch/jobs/companies/prostaff-schweiz-gmbh/data-engineer-python-airflow-azure-databricks-basel-444007)