Data Engineer – Python / Airflow / Azure Databricks (m/w/d)

Für ein anspruchsvolles Data-Engineering-Projekt bei einem etablierten Unternehmen in der Schweiz suchen wir einen erfahrenen Data Engineer. Im Fokus stehen die Weiterentwicklung einer On-Premise-Datenplattform sowie die laufende Transformation in eine moderne Azure-Databricks- und Lakehouse-Architektur.

• Entwicklung und Weiterentwicklung von Data Products

• Aufbau und Pflege von Ingestion- und Transformationspipelines

• Sicherstellung von Datenqualität und Performance

• Entwicklung und Verwaltung von Apache-Airflow-DAGs

• Mitarbeit bei Architekturentscheidungen rund um die Data Platform

• Unterstützung der Migration in Richtung Azure Databricks

• Zusammenarbeit mit Data Architect, DevOps Engineer und Product Owner

• Unterstützung interner Nutzer bei Daten-, Plattform- und Python-Themen

• Mehrjährige Erfahrung als Data Engineer

• Sehr gute Kenntnisse in Python, insbesondere Pandas, Polars und Poetry

• Fundierte Erfahrung mit Apache Airflow

• Sehr gute SQL- und PostgreSQL-Kenntnisse

• Erfahrung mit Azure Databricks

• Kenntnisse in Docker, Kubernetes oder OpenShift

• Erfahrung mit Azure DevOps / CI/CD

• Verständnis von Data Mesh, Data Contracts und Lakehouse-Architekturen

• Idealerweise Erfahrung mit JupyterHub, Acryl DataHub und MinIO S3

• Selbständige und proaktive Arbeitsweise mit hoher Kommunikationsfähigkeit

Weitere englischsprachige Jobs in der Schweiz finden Sie auf Arbeitnow

Quelle: Arbeitnow (https://www.arbeitnow.ch/jobs/companies/prostaff-schweiz-gmbh/data-engineer-python-airflow-azure-databricks-basel-444007)