Mitarbeiter Dateningenieur

Die Klimakrise ist die größte Herausforderung unserer Zeit – aber sie ist auch die größte Chance für Innovationen und eine Herausforderung, die wir mit Stolz annehmen. Bei Overstory nutzen wir modernste Technologie, um ein belastbares Stromnetz zu schaffen, das den Gemeinschaften das Gedeihen ermöglicht, auch wenn sich unsere Welt verändert.

Das Gitter ist das Rückgrat des Lebens, wie wir es kennen. Es versorgt Krankenhäuser mit Strom, hält Lebensmittel frisch und stellt sicher, dass Gemeinden miteinander verbunden bleiben. Aber extreme Wetterbedingungen, veraltete Infrastruktur und wachsende Waldbrandrisiken setzen dieses kritische System unter Druck. All dies zusammen macht die Energieversorgungsbranche zur größten Chance zur Bekämpfung des Klimawandels.

Eine der Hauptursachen für katastrophale Waldbrände und Stromausfälle? Bäume und Gestrüpp kommen mit Stromleitungen in Berührung.

Da helfen wir. Bei Overstory nutzen wir KI und fortschrittliche Satellitenbilder, um Vegetationsrisiken zu lokalisieren und zu priorisieren, bevor sie eintreten. Indem wir Versorgungsunternehmen eine kritische Analyse dieser Risiken liefern, tragen wir dazu bei, Ausfälle zu verhindern, das Risiko von Waldbränden zu verringern und den Übergang zu einem sichereren, widerstandsfähigeren Netz zu beschleunigen.

Unser Team erstreckt sich über Amerika und Europa und wir arbeiten mit Versorgungspartnern in ganz Amerika und darüber hinaus zusammen. Wir sind Outdoor-Enthusiasten, Musiker, Künstler, Sportler, Eltern und Abenteurer. Was uns verbindet, ist die Leidenschaft für die Lösung komplexer Probleme, das Engagement für den Klimaschutz und die Überzeugung, dass Technologie eine treibende Kraft sein sollte.

Helfen Sie uns, gemeinsam eine widerstandsfähigere Welt aufzubauen.

Rolle & Team

Als Staff Data Engineer bei Overstory leiten Sie den Entwurf und die Skalierung der Datenplattform, die die KI-gestützte Vegetationsanalyse von Overstory ermöglicht. Unsere Analyse basiert auf der zuverlässigen, wiederholbaren und pünktlichen Übertragung enormer Mengen an Satellitenbildern, Modellinferenzen und Versorgungsnetzdaten durch orchestrierte Pipelines, um die Entscheidungsfindung der Kunden zu unterstützen. Sie sind Eigentümer der Architektur dieser Plattform und legen die Richtung für deren Weiterentwicklung fest.

Sie arbeiten eng mit Daten-, ML- und Produktingenieuren sowie Produktteams zusammen, um sicherzustellen, dass die Daten, die in unsere Modelle und an unsere Kunden einfließen, eine pragmatische Bereitstellung mit Haltbarkeit, Rückverfolgbarkeit und Skalierbarkeit in Einklang bringen. Als leitender technischer Leiter betreuen Sie andere Ingenieure, treiben Architekturentscheidungen voran und legen Standards für Pipeline-Design, Servicegrenzen und Datenqualität in Overstory fest.

Zeitzonenanforderung: Europa (GMT/WET, CET, EET) und östliches Nordamerika (NST, AST, EST)

Was Sie tun werden

In Zusammenarbeit mit Daten-, ML- und Produktkollegen werden Sie:

• Gestalten und entwickeln Sie unsere Orchestrierungsebene weiter – Asset-Diagramme, Qualitätsprüfungen, Partitionierungsstrategien und die Muster, die für eine zuverlässige Skalierung sorgen.

• Entwerfen und pflegen Sie Produktionsdatenpipelines für umfangreiche Geo- und Zeitdaten, von der Aufnahme über die Transformation bis zur Bereitstellung.

• Leiten Sie Systemdesignarbeiten über die gesamte Datenplattform hinweg, einschließlich Servicegrenzen, Datenverträgen und der Gestaltung rund um die damit verbundenen Fehlermodi.

• Treiben Sie den Wandel hin zu einer serviceorientierten Architektur voran, indem Sie eng gebundene Komponenten in Services entkoppeln, die Teams besitzen und unabhängig voneinander bereitstellen können.

• Erstellen Sie ereignisgesteuerte Arbeitsabläufe und ersetzen Sie spröde Kopplungen und manuelle Koordination durch dauerhafte Nachrichtenmuster.

• Richten Sie Rahmenbedingungen für Beobachtbarkeit, Tests und Datenqualität ein, damit Probleme auftauchen, bevor Kunden sie sehen, und dass jedes Ergebnis zurückverfolgt und erklärt werden kann.

• Betreuen Sie Ingenieure und definieren Sie die Standards für die Art und Weise, wie wir Datensysteme erstellen, testen und betreiben.

Fähigkeiten und Erfahrung

• Erfolgreiche Erfahrung an der Schnittstelle von Datentechnik, verteilten Systemen und umfangreichen wissenschaftlichen Daten; Zutiefst motiviert von der Möglichkeit, das Waldbrandrisiko zu verringern und die Netzstabilität durch bessere Datenmuster und Infrastruktur zu verbessern

• Mehr als 10 Jahre Erfahrung im Entwerfen und Bauen von Datenpipelines und -systemen in Produktionsqualität

• Umfassende praktische Erfahrung mit Dagster – Asset-basierte Orchestrierung, Partitionen, Sensoren und die betriebliche Seite des Betriebs in der Produktion (vergleichbare Erfahrung mit Airflow, Prefect oder ähnlichem ist ein sinnvoller Ersatz, wenn Sie bereit sind, tiefer in Dagster einzusteigen)

• Nachgewiesene Erfolgsbilanz beim Aufbau und Betrieb von Datenpipelines im großen Maßstab, mit einem echten Gespür für Idempotenz, Backfills und Partitionierung

• Erfahrung in der Vorbereitung von Systemen für Zeiten hoher Nachfrage mit Schwerpunkt auf Best Practices für Testbarkeit und Skalierbarkeit

• Ausgeprägte Systemdesignfähigkeiten – Sie können über Grenzen, Verträge, Kopplungen und Fehlermodi nachdenken und die Kompromisse den Leuten erklären, die sie nutzen und darauf aufbauen

• Praktische Erfahrung beim Entwerfen einer serviceorientierten Architektur, einschließlich Versionierung und Aufrechterhaltung der Betriebsbereitschaft durch Migrationen

• Starke Python-Kenntnisse und Erfahrung mit Google Cloud

• Erfahrung mit Pub/Sub und ereignisgesteuerten Mustern

• Starke Kommunikationsfähigkeiten und die Fähigkeit zur Zusammenarbeit in den Bereichen Technik, ML und Produkt

• Bequeme Leitung von Architekturgesprächen und Betreuung anderer Ingenieure

• Erfahrung in Remote-First- und global verteilten Teams

Schön zu haben

• Komfort beim Arbeiten mit Geodaten und deren Speicherung

• Erleben Sie den Aufbau von Datenpipelines, die ML-Training und -Inferenz unterstützen

• Erfahrung mit Analytics-Engineering-Tools und Warehouse-Modellierung in BigQuery

• Infrastructure-as-Code-Erlebnis und Komfort beim Besitz Ihrer Systeme in der Produktion

• Hintergrundwissen in der Fernerkundung, Forstwirtschaft oder im Versorgungssektor

Hinweis: Wir glauben, dass alle Menschen zu Großem fähig sind. Wir empfehlen Ihnen, sich zu bewerben, auch wenn Sie nicht alle in dieser Stellenbeschreibung aufgeführten Anforderungen erfüllen.

Was wir anbieten

• Wettbewerbsfähige, standortspezifische Vergütung und Zusatzleistungen

• Flexibles, autonomes und kollaboratives Arbeitsumfeld, das auf Vertrauen basiert – wir richten unseren Arbeitstag nach unserem Leben aus, nicht umgekehrt …

Quelle: Arbeitnow (https://www.arbeitnow.fr/jobs/companies/overstory/staff-data-engineer-442323)