Ingeniero Principal de Datos

Black Duck Software, Inc. ayuda a las organizaciones a crear software seguro y de alta calidad, minimizando los riesgos y maximizando la velocidad y la productividad. Black Duck, un pionero reconocido en seguridad de aplicaciones, ofrece soluciones SAST, SCA y DAST que permiten a los equipos encontrar y corregir rápidamente vulnerabilidades y defectos en código propietario, componentes de código abierto y comportamiento de las aplicaciones. Con una combinación de herramientas, servicios y experiencia líderes en la industria, solo Black Duck ayuda a las organizaciones a maximizar la seguridad y la calidad en DevSecOps y durante todo el ciclo de vida del desarrollo de software.

que haras

• Liderar el diseño y desarrollo de servicios de datos entre productos para múltiples líneas de productos desde un plano de datos gobernado.

• Definir el modelo del “plano de datos del cliente”: identificadores de cliente canónicos, dimensiones compartidas y hechos consistentes utilizados en todos los productos.

• Cree y ponga en funcionamiento patrones de ingesta para datos por lotes, streaming y eventos, con incorporación repetible para nuevas fuentes.

• Poseer el manual operativo para la confiabilidad de los datos: contratos de datos, controles de calidad, linaje, monitoreo y respuesta a incidentes.

• Implementar y ejecutar métodos de acceso que hagan que los datos sean utilizables: conjuntos de datos seleccionados, interfaces de consulta seguras y API de datos listos para el producto cuando sea necesario.

• Desarrollar productos de datos orientados al cliente (conjuntos de datos, métricas, exportaciones y feeds) con control de versiones, documentación y propiedad clara.

• Diseñar modelos de datos que se ajusten tanto a los sistemas operativos (RDS) como a los almacenes de análisis (columnar/OLAP), incluido el ajuste de rendimiento y costos.

• Asegúrese de que los productos de datos también impulsen los flujos de trabajo de aprendizaje automático: conjuntos de datos de capacitación confiables, resultados listos para funciones y definiciones consistentes para la toma de decisiones.

• Habilite la automatización de la IA al ofrecer productos de datos gobernados confiables y de baja latencia que se pueden utilizar de forma segura en flujos de trabajo automatizados.

• Asociarse estrechamente con partes interesadas en productos, ingeniería y seguridad para alinear los productos de datos con las prioridades de la hoja de ruta y los resultados de los clientes.

• Eleve el nivel técnico a través de revisiones de arquitectura, estándares y tutoría, mientras se mantiene práctico en los sistemas clave.

Requerido

• Experiencia significativa en la construcción y operación de plataformas de datos de producción a escala, incluida la propiedad operativa y de guardia.

• Sólidos conocimientos de SQL y de Python, utilizados para crear canalizaciones, servicios y automatización.

• Experiencia práctica ejecutando sistemas en la nube en AWS y Google Cloud (nivel IaaS: computación, almacenamiento, redes, IAM).

• Experiencia práctica con bases de datos operativas (estilo RDS) y almacenes de análisis (columnar/OLAP), incluido el ajuste del rendimiento.

• Fuerte capacidad de modelado de datos, incluida la evolución de esquemas, dimensiones conformadas y definiciones de métricas de “una fuente de verdad”.

• Historial de entrega de productos de datos de los que dependen otros equipos o clientes, con contratos claros y expectativas de confiabilidad.

• Capacidad para hacer concesiones de ingeniería sólidas entre latencia, precisión, costo y seguridad sin crear una complejidad frágil.

• Experiencia con patrones de lakehouse y formatos de mesa abierta (o similares), incluida la gobernanza y el mantenimiento de la mesa.

• Experiencia con sistemas de orquestación y streaming utilizados en producción (por lotes + tiempo real) y gestión de backfills de forma segura.

• Familiaridad con las necesidades de datos de ML (divisiones de capacitación/servicio, conjuntos de datos listos para funciones, conjuntos de datos de evaluación) y flujos de trabajo adyacentes a la IA.

Preferido

• Experiencia en la creación de plataformas de datos de autoservicio (catálogo, capacidad de descubrimiento, controles de acceso) utilizadas por múltiples equipos.

• Experiencia en entornos regulados o sensibles a la seguridad, incluidos controles de retención, auditoría y acceso a datos.

Modelo de trabajo, ubicación y viajes.

• Ubicación: Belfast, Reino Unido

• Reporta a: VP de Ingeniería de Datos

• Modelo de trabajo: Híbrido (detalles por determinar)

• Horarios de colaboración: Flexibles; se superponen con las zonas horarias del Reino Unido y EE. UU.

• Viajes: Mínimo

Black Duck es un empleador que ofrece igualdad de oportunidades. Consideramos a todos los solicitantes de empleo sin distinción de raza, color, origen nacional, religión, sexo, identidad o expresión de género, edad, discapacidad, orientación sexual, condición de veterano o servicio militar, o cualquier otra característica protegida por la ley aplicable. Black Duck cumple con todas las leyes aplicables que prohíben la discriminación laboral en todas las jurisdicciones donde opera y brinda adaptaciones razonables a personas con discapacidades de acuerdo con la ley aplicable.

Encuentre trabajo en Reino Unido en Arbeitnow

Fuente: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/blackduck/principal-data-engineer-belfast-249456)