Job
Aus Partner-Feed
Mitarbeiter Softwareentwickler, Daten
Preis auf Anfrage
Details
- Beschäftigungsart
- Vollzeit
- Remote
- Ja
- Unternehmen
- Stability AI
Beschreibung
Automatisch aus dem English übersetzt. Der Originaltext ist maßgeblich. Maschinenübersetzung – eine genauere Version wird vorbereitet.
Hauptsitz: Abgelegen
Das Team
Das Datenteam erstellt und betreibt die Systeme, die die Daten von Stability AI nutzbar machen, sowohl für den Geschäftsbetrieb als auch für das Training unserer Modelle. Wir sind ein kleines, kollaboratives Team, das eng mit den Bereichen Finanzen, Marketing, SRE, Sicherheit, Produkt und Forschung zusammenarbeitet. Wir konzentrieren uns auf Ergebnisse und nicht auf Stunden, und Sie erhalten umfassenden technischen Zugang und die Freiheit, etwas zu entwickeln.
Unser Stack: AWS (S3, Athena, Glue, EMR, Step Functions, EventBridge), Iceberg, dbt, Postgres, Terraform, Helm, GitHub Actions, QuickSight, Stripe, Auth0, HubSpot, Customer.io, PostHog, OpenTelemetry und SLURM – oder ähnlich. Das Urteil ist uns wichtiger als das Logo.
Die Arbeit
Sie sind durchgängig Eigentümer unserer Unternehmensdatenplattform: der AWS Data Lake, die Transformationsschicht, die Integrationen zwischen unseren Geschäftssystemen und die Kubernetes-basierte Infrastruktur, auf der sie ausgeführt werden. Die Daten, die das Unternehmen steuern (Abrechnung, Nutzungstelemetrie, Identität, CRM, ERP, Cloud-Kosten), befinden sich in einem Dutzend Systemen, die nie miteinander verbunden waren. Sie sind der Ingenieur, der sie verbindet und dafür sorgt, dass sie zuverlässig bleiben.
Sie sind außerdem Dateningenieur für unsere Forschungsteams in den Bereichen Audio, Video, Bild und 3D und bauen die Pipelines auf, die Rohmedien in trainingsbereite Datensätze umwandeln. Dabei handelt es sich um eine praxisorientierte Rolle mit echter Eigenverantwortung, nicht um einen Datenvorbereitungs- oder Analystenposten.
• Besitzen Sie die Unternehmensdatenplattform durchgängig: den S3/Athena/Glue Lake, das dbt-Projekt und seinen täglichen Build, Aufnahme von Stripe, Auth0, HubSpot, OpenTelemetry und Produktereignissen sowie die Postgres-Bereitstellungsschicht für Dashboards und KI-Agenten
• Erstellen und betreiben Sie Integrationen zwischen Abrechnungs-, CRM-, ERP-, Identitäts- und Telemetriesystemen, sodass Umsatz, Nutzung, Kosten und Kundenidentität automatisch und nicht über Tabellenkalkulationen und Tickets abgeglichen werden
• Entwerfen und pflegen Sie die Lagerschicht: Dimensionsmodelle, Datenverträge mit der Produktentwicklung für Ereignisschemata, Qualitätstests, Abstammung und einen Katalog
• Erzwingen Sie PII-Tiering (offene vs. eingeschränkte Schemata) durch Zugriffsgewährung in Zusammenarbeit mit Sicherheit und Recht
• Verarbeiten Sie Daten im großen Maßstab: Milliarden von Telemetriezeilen, Terabyte-Protokollströme, Iceberg-Tabellen, Partitionierung und Kostenkontrolle
• Eigene Orchestrierung und Infrastruktur: Orchestrierung auf EKS, Helm, Terraform, CI/CD, Überwachung und Alarmierung sowie Teilnahme an der Bereitschaftsrotation während der Geschäftszeiten für die täglichen Pipelines
• Bereitstellung von Betriebsberichten für Finanzen und Führung: Umsatz nach Geschäftsbereich, Guthaben und vorausbezahlte Verbindlichkeiten sowie Cloud-Kosten nach Abteilung
• Unterstützen Sie die Forschungsteams in allen Bereichen: Quelle, Lizenzprüfung, Aufnahme und Versionierung großer Trainingsdatensätze für Audio, Video, Bild und 3D
• Erstellen Sie die Generierungs-, Filter-, Deduplizierungs- und Untertitelungspipelines, die rohe oder synthetische Medien in schulungsbereite Shards umwandeln, und führen Sie sie in großem Maßstab auf unserem SLURM-Cluster und Cloud-Objektspeicher aus
• Halten Sie Herkunft, Qualitätsmetriken und Datensatzdokumentation auf dem neuesten Stand, damit jeder Forscher einen Trainingssatz reproduzieren kann
• Leiten Sie Designüberprüfungen, betreuen Sie Teamkollegen und schreiben Sie Runbooks, die Abhängigkeiten von einzelnen Personen beseitigen
• Arbeiten Sie mit Finanzen, Marketing, SRE, Sicherheit, Produkt und Forschung an unternehmensweiten Dateninitiativen zusammen
Was Sie mitbringen
Wir suchen einen Ingenieur, der ausgeprägte Software-Engineering-Kenntnisse mit Lagerhaltung verbindet. Der ideale Kandidat vereint ausgeprägte Software-Engineering-Kenntnisse mit Tiefe in der Lagermodellierung und dem Urteilsvermögen, zu sagen, was eine Zahl bedeutet und was nicht.
Erfahrung
• Mehr als 6 Jahre Erfahrung im Aufbau und Betrieb von Produktionsdatenplattformen, einschließlich der Verantwortung für die Architektur
• Erfahrung in der Integration von SaaS-Geschäftssystemen (Stripe, HubSpot, ein ERP, ein Identitätsanbieter) in ein Lager
• Produktionserfahrung bei der Vorbereitung großer multimodaler Trainingsdatensätze und der Ausführung von Batch-Workloads auf HPC- oder Cloud-Schedulern (SLURM, Kubernetes oder ähnliches)
• Komfort beim selbstständigen Arbeiten in einem kleinen Team mit echter Eigenverantwortung
Fähigkeiten und Fachwissen
• Experte für SQL und Python, mit ausgeprägten Software-Engineering-Kenntnissen: Tests, Codeüberprüfung und CI
• Warehouse- und Seeerfahrung mit realer Modellierung: Iceberg oder Delta auf S3, Athena/Trino, Snowflake oder BigQuery und dbt
• Ein Orchestrator in der Produktion (dbt, Airflow oder Argo) und der verteilten Verarbeitung (Spark oder gleichwertig)
• AWS, Kubernetes (EKS), Helm und Terraform – Sie können einen fehlgeschlagenen Glue-Job und eine fehlerhafte Helm-Version debuggen
Zusätzliche Stärken
• Vorheriger 0-zu-1-Plattformbesitz bei einem Startup
• Erfahrung in der Arbeit mit Forschungsteams an generativen Modellen oder im praktischen Umgang mit Audio-, Video-, Bild- oder 3D-Daten
• FinOps- und Cloud-Kostenberichte
• Vertrautheit mit SOC 2 oder ähnlichen Compliance-Anforderungen für den Datenzugriff
Leistungen und Vergütung
Außerhalb der Vereinigten Staaten
Die Vergütung und Leistungen werden für den Markt und die lokale Praxis jedes Landes festgelegt. Wenn Sie sich von außerhalb der USA bewerben, wird Ihnen Ihr Personalvermittler zu Beginn des Prozesses die Details für Ihr Land mitteilen.
Vereinigte Staaten
• Ein Remote-First-Unternehmen mit Teamkollegen aus mehreren Ländern, die unterschiedliche Perspektiven und Flexibilität in die Art und Weise unserer Zusammenarbeit einbringen.
• Krankenversicherung für Sie und Ihre Familie. Wählen Sie aus PPO- und HMO-Plänen, einschließlich ausgewählter Pläne, bei denen Stability AI 100 % der Prämien für Sie und Ihre berechtigten Angehörigen übernimmt.
• HSA- und FSA-Konten zur Rückstellung von Dollar vor Steuern für Gesundheitsversorgung und andere förderfähige Ausgaben.
• Vom Unternehmen bezahlte Lebensversicherung mit der Option, eine freiwillige Absicherung für sich selbst, Ihren Ehepartner und Ihre Kinder hinzuzufügen.
• Kurz- und langfristige Berufsunfähigkeitsversicherung, um einen Teil Ihres Einkommens abzusichern, wenn Krankheit oder Verletzung Sie von der Arbeit abhalten.
• 401(k) mit Unternehmensübereinstimmung von bis zu 4 %.
• Bezahlter Elternurlaub, um Sie bei der Vergrößerung Ihrer Familie zu unterstützen.
• Flexible bezahlte Freizeit sowie bezahlter Betriebsurlaub.
• Die Ausrüstung, die Sie benötigen, um Ihre beste Arbeit zu leisten, bereitgestellt von Stability AI.…
Quelle: Wir arbeiten remote (https://weworkremotely.com/remote-jobs/stability-ai-staff-software-engineer-data)
Das Team
Das Datenteam erstellt und betreibt die Systeme, die die Daten von Stability AI nutzbar machen, sowohl für den Geschäftsbetrieb als auch für das Training unserer Modelle. Wir sind ein kleines, kollaboratives Team, das eng mit den Bereichen Finanzen, Marketing, SRE, Sicherheit, Produkt und Forschung zusammenarbeitet. Wir konzentrieren uns auf Ergebnisse und nicht auf Stunden, und Sie erhalten umfassenden technischen Zugang und die Freiheit, etwas zu entwickeln.
Unser Stack: AWS (S3, Athena, Glue, EMR, Step Functions, EventBridge), Iceberg, dbt, Postgres, Terraform, Helm, GitHub Actions, QuickSight, Stripe, Auth0, HubSpot, Customer.io, PostHog, OpenTelemetry und SLURM – oder ähnlich. Das Urteil ist uns wichtiger als das Logo.
Die Arbeit
Sie sind durchgängig Eigentümer unserer Unternehmensdatenplattform: der AWS Data Lake, die Transformationsschicht, die Integrationen zwischen unseren Geschäftssystemen und die Kubernetes-basierte Infrastruktur, auf der sie ausgeführt werden. Die Daten, die das Unternehmen steuern (Abrechnung, Nutzungstelemetrie, Identität, CRM, ERP, Cloud-Kosten), befinden sich in einem Dutzend Systemen, die nie miteinander verbunden waren. Sie sind der Ingenieur, der sie verbindet und dafür sorgt, dass sie zuverlässig bleiben.
Sie sind außerdem Dateningenieur für unsere Forschungsteams in den Bereichen Audio, Video, Bild und 3D und bauen die Pipelines auf, die Rohmedien in trainingsbereite Datensätze umwandeln. Dabei handelt es sich um eine praxisorientierte Rolle mit echter Eigenverantwortung, nicht um einen Datenvorbereitungs- oder Analystenposten.
• Besitzen Sie die Unternehmensdatenplattform durchgängig: den S3/Athena/Glue Lake, das dbt-Projekt und seinen täglichen Build, Aufnahme von Stripe, Auth0, HubSpot, OpenTelemetry und Produktereignissen sowie die Postgres-Bereitstellungsschicht für Dashboards und KI-Agenten
• Erstellen und betreiben Sie Integrationen zwischen Abrechnungs-, CRM-, ERP-, Identitäts- und Telemetriesystemen, sodass Umsatz, Nutzung, Kosten und Kundenidentität automatisch und nicht über Tabellenkalkulationen und Tickets abgeglichen werden
• Entwerfen und pflegen Sie die Lagerschicht: Dimensionsmodelle, Datenverträge mit der Produktentwicklung für Ereignisschemata, Qualitätstests, Abstammung und einen Katalog
• Erzwingen Sie PII-Tiering (offene vs. eingeschränkte Schemata) durch Zugriffsgewährung in Zusammenarbeit mit Sicherheit und Recht
• Verarbeiten Sie Daten im großen Maßstab: Milliarden von Telemetriezeilen, Terabyte-Protokollströme, Iceberg-Tabellen, Partitionierung und Kostenkontrolle
• Eigene Orchestrierung und Infrastruktur: Orchestrierung auf EKS, Helm, Terraform, CI/CD, Überwachung und Alarmierung sowie Teilnahme an der Bereitschaftsrotation während der Geschäftszeiten für die täglichen Pipelines
• Bereitstellung von Betriebsberichten für Finanzen und Führung: Umsatz nach Geschäftsbereich, Guthaben und vorausbezahlte Verbindlichkeiten sowie Cloud-Kosten nach Abteilung
• Unterstützen Sie die Forschungsteams in allen Bereichen: Quelle, Lizenzprüfung, Aufnahme und Versionierung großer Trainingsdatensätze für Audio, Video, Bild und 3D
• Erstellen Sie die Generierungs-, Filter-, Deduplizierungs- und Untertitelungspipelines, die rohe oder synthetische Medien in schulungsbereite Shards umwandeln, und führen Sie sie in großem Maßstab auf unserem SLURM-Cluster und Cloud-Objektspeicher aus
• Halten Sie Herkunft, Qualitätsmetriken und Datensatzdokumentation auf dem neuesten Stand, damit jeder Forscher einen Trainingssatz reproduzieren kann
• Leiten Sie Designüberprüfungen, betreuen Sie Teamkollegen und schreiben Sie Runbooks, die Abhängigkeiten von einzelnen Personen beseitigen
• Arbeiten Sie mit Finanzen, Marketing, SRE, Sicherheit, Produkt und Forschung an unternehmensweiten Dateninitiativen zusammen
Was Sie mitbringen
Wir suchen einen Ingenieur, der ausgeprägte Software-Engineering-Kenntnisse mit Lagerhaltung verbindet. Der ideale Kandidat vereint ausgeprägte Software-Engineering-Kenntnisse mit Tiefe in der Lagermodellierung und dem Urteilsvermögen, zu sagen, was eine Zahl bedeutet und was nicht.
Erfahrung
• Mehr als 6 Jahre Erfahrung im Aufbau und Betrieb von Produktionsdatenplattformen, einschließlich der Verantwortung für die Architektur
• Erfahrung in der Integration von SaaS-Geschäftssystemen (Stripe, HubSpot, ein ERP, ein Identitätsanbieter) in ein Lager
• Produktionserfahrung bei der Vorbereitung großer multimodaler Trainingsdatensätze und der Ausführung von Batch-Workloads auf HPC- oder Cloud-Schedulern (SLURM, Kubernetes oder ähnliches)
• Komfort beim selbstständigen Arbeiten in einem kleinen Team mit echter Eigenverantwortung
Fähigkeiten und Fachwissen
• Experte für SQL und Python, mit ausgeprägten Software-Engineering-Kenntnissen: Tests, Codeüberprüfung und CI
• Warehouse- und Seeerfahrung mit realer Modellierung: Iceberg oder Delta auf S3, Athena/Trino, Snowflake oder BigQuery und dbt
• Ein Orchestrator in der Produktion (dbt, Airflow oder Argo) und der verteilten Verarbeitung (Spark oder gleichwertig)
• AWS, Kubernetes (EKS), Helm und Terraform – Sie können einen fehlgeschlagenen Glue-Job und eine fehlerhafte Helm-Version debuggen
Zusätzliche Stärken
• Vorheriger 0-zu-1-Plattformbesitz bei einem Startup
• Erfahrung in der Arbeit mit Forschungsteams an generativen Modellen oder im praktischen Umgang mit Audio-, Video-, Bild- oder 3D-Daten
• FinOps- und Cloud-Kostenberichte
• Vertrautheit mit SOC 2 oder ähnlichen Compliance-Anforderungen für den Datenzugriff
Leistungen und Vergütung
Außerhalb der Vereinigten Staaten
Die Vergütung und Leistungen werden für den Markt und die lokale Praxis jedes Landes festgelegt. Wenn Sie sich von außerhalb der USA bewerben, wird Ihnen Ihr Personalvermittler zu Beginn des Prozesses die Details für Ihr Land mitteilen.
Vereinigte Staaten
• Ein Remote-First-Unternehmen mit Teamkollegen aus mehreren Ländern, die unterschiedliche Perspektiven und Flexibilität in die Art und Weise unserer Zusammenarbeit einbringen.
• Krankenversicherung für Sie und Ihre Familie. Wählen Sie aus PPO- und HMO-Plänen, einschließlich ausgewählter Pläne, bei denen Stability AI 100 % der Prämien für Sie und Ihre berechtigten Angehörigen übernimmt.
• HSA- und FSA-Konten zur Rückstellung von Dollar vor Steuern für Gesundheitsversorgung und andere förderfähige Ausgaben.
• Vom Unternehmen bezahlte Lebensversicherung mit der Option, eine freiwillige Absicherung für sich selbst, Ihren Ehepartner und Ihre Kinder hinzuzufügen.
• Kurz- und langfristige Berufsunfähigkeitsversicherung, um einen Teil Ihres Einkommens abzusichern, wenn Krankheit oder Verletzung Sie von der Arbeit abhalten.
• 401(k) mit Unternehmensübereinstimmung von bis zu 4 %.
• Bezahlter Elternurlaub, um Sie bei der Vergrößerung Ihrer Familie zu unterstützen.
• Flexible bezahlte Freizeit sowie bezahlter Betriebsurlaub.
• Die Ausrüstung, die Sie benötigen, um Ihre beste Arbeit zu leisten, bereitgestellt von Stability AI.…
Quelle: Wir arbeiten remote (https://weworkremotely.com/remote-jobs/stability-ai-staff-software-engineer-data)
Dieses Angebot stammt aus einem Partner-Feed. Bewerben Sie sich auf der Quell-Website.
Quelle: Stability AI
Inserat bereitgestellt von Stability AI.