Job
Aus Partner-Feed
Hauptdateningenieur
Preis auf Anfrage
Details
- Beschäftigungsart
- Vollzeit
- Remote
- Nein
- Unternehmen
- Blackduck
Beschreibung
Automatisch aus dem English übersetzt. Der Originaltext ist maßgeblich. Maschinenübersetzung – eine genauere Version wird vorbereitet.
Black Duck Software, Inc. unterstützt Unternehmen bei der Entwicklung sicherer, qualitativ hochwertiger Software, die Risiken minimiert und gleichzeitig Geschwindigkeit und Produktivität maximiert. Black Duck, ein anerkannter Pionier im Bereich Anwendungssicherheit, bietet SAST-, SCA- und DAST-Lösungen, die es Teams ermöglichen, Schwachstellen und Mängel in proprietärem Code, Open-Source-Komponenten und Anwendungsverhalten schnell zu finden und zu beheben. Mit einer Kombination aus branchenführenden Tools, Services und Fachwissen hilft nur Black Duck Unternehmen dabei, die Sicherheit und Qualität in DevSecOps und im gesamten Softwareentwicklungslebenszyklus zu maximieren.
Was Sie tun werden
• Leitung des Designs und Aufbaus produktübergreifender Datendienste für mehrere Produktlinien auf einer verwalteten Datenebene.
• Definieren Sie das Modell der „Kundendatenebene“: kanonische Kundenkennungen, gemeinsame Dimensionen und konsistente Fakten, die über alle Produkte hinweg verwendet werden.
• Erstellen und operationalisieren Sie Aufnahmemuster für Batch-, Streaming- und Ereignisdaten mit wiederholbarem Onboarding für neue Quellen.
• Besitzen Sie das operative Playbook für Datenzuverlässigkeit: Datenverträge, Qualitätsprüfungen, Herkunft, Überwachung und Reaktion auf Vorfälle.
• Implementieren und führen Sie Zugriffsmethoden aus, die Daten nutzbar machen: kuratierte Datensätze, sichere Abfrageschnittstellen und produktfertige Daten-APIs, wo nötig.
• Erstellen Sie kundenorientierte Datenprodukte (Datensätze, Metriken, Exporte und Feeds) mit Versionierung, Dokumentation und klaren Eigentumsverhältnissen.
• Entwerfen Sie Datenmodelle, die sowohl zu Betriebssystemen (RDS) als auch zu Analysespeichern (Spalten/OLAP) passen, einschließlich Leistungs- und Kostenoptimierung.
• Stellen Sie sicher, dass Datenprodukte auch ML-Workflows unterstützen: vertrauenswürdige Trainingsdatensätze, funktionsbereite Ausgaben und konsistente Definitionen für die Entscheidungsfindung.
• Ermöglichen Sie die KI-Automatisierung durch die Bereitstellung zuverlässiger, kontrollierter Datenprodukte mit geringer Latenz, die sicher in automatisierten Arbeitsabläufen verwendet werden können.
• Arbeiten Sie eng mit Produkt-, Technik- und Sicherheitsakteuren zusammen, um Datenprodukte an Roadmap-Prioritäten und Kundenergebnissen auszurichten.
• Erhöhen Sie die technische Messlatte durch Architekturüberprüfungen, Standards und Mentoring – und bleiben Sie gleichzeitig in wichtigen Systemen aktiv.
Erforderlich
• Umfangreiche Erfahrung im Aufbau und Betrieb von Produktionsdatenplattformen im großen Maßstab, einschließlich Bereitschaftsdienst und Betriebsverantwortung.
• Starke SQL-Kenntnisse und ausgeprägte Python-Kenntnisse, die zum Aufbau von Pipelines, Diensten und Automatisierung verwendet werden.
• Praktische Erfahrung im Betrieb von Cloud-Systemen auf AWS und Google Cloud (IaaS-Ebene: Compute, Storage, Networking, IAM).
• Praktische Erfahrung sowohl mit operativen Datenbanken (RDS-Stil) als auch mit Analysespeichern (Spalten/OLAP), einschließlich Leistungsoptimierung.
• Starke Fähigkeit zur Datenmodellierung, einschließlich Schemaentwicklung, angepassten Dimensionen und „One Source of Truth“-Metrikdefinitionen.
• Erfolgsbilanz bei der Bereitstellung von Datenprodukten, auf die andere Teams oder Kunden angewiesen sind, mit klaren Verträgen und Zuverlässigkeitserwartungen.
• Fähigkeit, solide technische Kompromisse in Bezug auf Latenz, Genauigkeit, Kosten und Sicherheit einzugehen, ohne eine spröde Komplexität zu schaffen.
• Erfahrung mit Lakehouse-Mustern und offenen Tabellenformaten (oder ähnlichem), einschließlich Governance und Tabellenpflege.
• Erfahrung mit Orchestrierungs- und Streaming-Systemen, die in der Produktion verwendet werden (Batch + Echtzeit) und der sicheren Verwaltung von Backfills.
• Vertrautheit mit ML-Datenanforderungen (Trainings-/Bereitstellungsaufteilungen, funktionsbereite Datensätze, Bewertungsdatensätze) und KI-nahen Arbeitsabläufen.
Bevorzugt
• Erfahrung im Aufbau von Self-Service-Datenplattformen (Katalog, Auffindbarkeit, Zugriffskontrollen), die von mehreren Teams verwendet werden.
• Erfahrung in regulierten oder sicherheitsrelevanten Umgebungen, einschließlich Aufbewahrung, Prüfung und Datenzugriffskontrollen.
Arbeitsmodell, Standort & Reisen
• Standort: Belfast, Großbritannien
• Berichtet an: VP of Data Engineering
• Arbeitsmodell: Hybrid (Details werden noch bekannt gegeben)
• Zusammenarbeitszeiten: Flexibel; Überschneidungen mit den Zeitzonen Großbritanniens und der USA
• Reisen: Minimal
Black Duck ist ein Arbeitgeber, der Chancengleichheit bietet. Wir berücksichtigen alle Bewerber für eine Anstellung ohne Rücksicht auf Rasse, Hautfarbe, nationale Herkunft, Religion, Geschlecht, Geschlechtsidentität oder -ausdruck, Alter, Behinderung, sexuelle Orientierung, Veteranen- oder Militärdienststatus oder andere durch geltendes Recht geschützte Merkmale. Black Duck hält sich an alle geltenden Gesetze zum Verbot von Diskriminierung am Arbeitsplatz in allen Gerichtsbarkeiten, in denen das Unternehmen tätig ist, und bietet angemessene Vorkehrungen für Menschen mit Behinderungen im Einklang mit geltendem Recht.
Finden Sie Jobs in Großbritannien auf Arbeitnow
Quelle: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/blackduck/principal-data-engineer-belfast-249456)
Was Sie tun werden
• Leitung des Designs und Aufbaus produktübergreifender Datendienste für mehrere Produktlinien auf einer verwalteten Datenebene.
• Definieren Sie das Modell der „Kundendatenebene“: kanonische Kundenkennungen, gemeinsame Dimensionen und konsistente Fakten, die über alle Produkte hinweg verwendet werden.
• Erstellen und operationalisieren Sie Aufnahmemuster für Batch-, Streaming- und Ereignisdaten mit wiederholbarem Onboarding für neue Quellen.
• Besitzen Sie das operative Playbook für Datenzuverlässigkeit: Datenverträge, Qualitätsprüfungen, Herkunft, Überwachung und Reaktion auf Vorfälle.
• Implementieren und führen Sie Zugriffsmethoden aus, die Daten nutzbar machen: kuratierte Datensätze, sichere Abfrageschnittstellen und produktfertige Daten-APIs, wo nötig.
• Erstellen Sie kundenorientierte Datenprodukte (Datensätze, Metriken, Exporte und Feeds) mit Versionierung, Dokumentation und klaren Eigentumsverhältnissen.
• Entwerfen Sie Datenmodelle, die sowohl zu Betriebssystemen (RDS) als auch zu Analysespeichern (Spalten/OLAP) passen, einschließlich Leistungs- und Kostenoptimierung.
• Stellen Sie sicher, dass Datenprodukte auch ML-Workflows unterstützen: vertrauenswürdige Trainingsdatensätze, funktionsbereite Ausgaben und konsistente Definitionen für die Entscheidungsfindung.
• Ermöglichen Sie die KI-Automatisierung durch die Bereitstellung zuverlässiger, kontrollierter Datenprodukte mit geringer Latenz, die sicher in automatisierten Arbeitsabläufen verwendet werden können.
• Arbeiten Sie eng mit Produkt-, Technik- und Sicherheitsakteuren zusammen, um Datenprodukte an Roadmap-Prioritäten und Kundenergebnissen auszurichten.
• Erhöhen Sie die technische Messlatte durch Architekturüberprüfungen, Standards und Mentoring – und bleiben Sie gleichzeitig in wichtigen Systemen aktiv.
Erforderlich
• Umfangreiche Erfahrung im Aufbau und Betrieb von Produktionsdatenplattformen im großen Maßstab, einschließlich Bereitschaftsdienst und Betriebsverantwortung.
• Starke SQL-Kenntnisse und ausgeprägte Python-Kenntnisse, die zum Aufbau von Pipelines, Diensten und Automatisierung verwendet werden.
• Praktische Erfahrung im Betrieb von Cloud-Systemen auf AWS und Google Cloud (IaaS-Ebene: Compute, Storage, Networking, IAM).
• Praktische Erfahrung sowohl mit operativen Datenbanken (RDS-Stil) als auch mit Analysespeichern (Spalten/OLAP), einschließlich Leistungsoptimierung.
• Starke Fähigkeit zur Datenmodellierung, einschließlich Schemaentwicklung, angepassten Dimensionen und „One Source of Truth“-Metrikdefinitionen.
• Erfolgsbilanz bei der Bereitstellung von Datenprodukten, auf die andere Teams oder Kunden angewiesen sind, mit klaren Verträgen und Zuverlässigkeitserwartungen.
• Fähigkeit, solide technische Kompromisse in Bezug auf Latenz, Genauigkeit, Kosten und Sicherheit einzugehen, ohne eine spröde Komplexität zu schaffen.
• Erfahrung mit Lakehouse-Mustern und offenen Tabellenformaten (oder ähnlichem), einschließlich Governance und Tabellenpflege.
• Erfahrung mit Orchestrierungs- und Streaming-Systemen, die in der Produktion verwendet werden (Batch + Echtzeit) und der sicheren Verwaltung von Backfills.
• Vertrautheit mit ML-Datenanforderungen (Trainings-/Bereitstellungsaufteilungen, funktionsbereite Datensätze, Bewertungsdatensätze) und KI-nahen Arbeitsabläufen.
Bevorzugt
• Erfahrung im Aufbau von Self-Service-Datenplattformen (Katalog, Auffindbarkeit, Zugriffskontrollen), die von mehreren Teams verwendet werden.
• Erfahrung in regulierten oder sicherheitsrelevanten Umgebungen, einschließlich Aufbewahrung, Prüfung und Datenzugriffskontrollen.
Arbeitsmodell, Standort & Reisen
• Standort: Belfast, Großbritannien
• Berichtet an: VP of Data Engineering
• Arbeitsmodell: Hybrid (Details werden noch bekannt gegeben)
• Zusammenarbeitszeiten: Flexibel; Überschneidungen mit den Zeitzonen Großbritanniens und der USA
• Reisen: Minimal
Black Duck ist ein Arbeitgeber, der Chancengleichheit bietet. Wir berücksichtigen alle Bewerber für eine Anstellung ohne Rücksicht auf Rasse, Hautfarbe, nationale Herkunft, Religion, Geschlecht, Geschlechtsidentität oder -ausdruck, Alter, Behinderung, sexuelle Orientierung, Veteranen- oder Militärdienststatus oder andere durch geltendes Recht geschützte Merkmale. Black Duck hält sich an alle geltenden Gesetze zum Verbot von Diskriminierung am Arbeitsplatz in allen Gerichtsbarkeiten, in denen das Unternehmen tätig ist, und bietet angemessene Vorkehrungen für Menschen mit Behinderungen im Einklang mit geltendem Recht.
Finden Sie Jobs in Großbritannien auf Arbeitnow
Quelle: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/blackduck/principal-data-engineer-belfast-249456)
Dieses Angebot stammt aus einem Partner-Feed. Bewerben Sie sich auf der Quell-Website.
Quelle: Blackduck
Standort
Belfast, Vereinigtes Königreich
Inserat bereitgestellt von Blackduck.