Ingeniero de software sénior, datos

Antes del detalle, aquí está el desafío que nos ayudarías a resolver.

Construimos la inteligencia incorporada que mueve vehículos reales de forma segura y el ecosistema en el que funcionarán mil millones de máquinas en el futuro. Muy pocas personas en IA pueden decir esto. Cada rol aquí, sea cual sea el equipo, se conecta con eso.

Esto es lo que cubre este rol en particular.
el papel
Portal es la plataforma en la nube que conecta a Wayve con el mundo exterior: gestiona el intercambio de datos con socios, muestra conocimientos de IA y permite la implementación comercial del controlador de IA de Wayve en vehículos de todo el mundo.
Estamos buscando un ingeniero de software senior de datos para ayudar a construir el centro de transferencia de datos de Wayve: una pieza de infraestructura de misión crítica que se ampliará para transferir petabytes de datos de sensores por día desde socios que cubren vehículos en todo el mundo.
Este es un proyecto fundamental en Wayve. Trabajará como parte de un equipo pequeño y de alta autonomía que creará un sistema de intercambio de datos radial y central distribuido globalmente, trabajando con socios como Uber, Stellantis y Nissan. Su trabajo ayudará a hacer posible el entrenamiento del modelo de IA de Wayve a escala.
Responsabilidades clave:

• Construir y operar canales de transferencia de datos a gran escala para video, LiDAR y datos de sensores de socios globales a una escala de hasta PB/día.

• Contribuir al diseño técnico del Data Transfer Hub, haciendo concesiones pragmáticas entre UX, cuidado, rendimiento, costo, limitaciones de los socios, observabilidad y soporte operativo.

• Cree canales de transferencia de datos distribuidos y paralelizados utilizando Flyte para la orquestación del flujo de trabajo, patrones Kafka/controlados por eventos para el seguimiento del ciclo de vida y Azure para la infraestructura de almacenamiento y transferencia.

• Ayudar a implementar y desarrollar un modelo de transferencia de datos radial y distribuido globalmente para recuperar y compartir datos de sensores a escala con socios.

• Escribir infraestructura como código en Terraform y lógica de canalización principalmente en Python

• Construir bases operativas confiables, incluidas estrategias de reintento, reabastecimientos, comprobaciones de integridad de datos, seguimiento del ciclo de vida/estado, paneles de control y alertas.

• Trabajar en soluciones de redes de nube a nube y entre nubes, con Azure como plataforma de nube principal.

• Una vez establecido, participar en una rotación de guardia y soporte fuera de horario.

• Colaborar con equipos comerciales, de productos y de socios para comprender las limitaciones y ofrecer soluciones que resuelvan problemas reales de clientes y socios.

• Trabajar en un entorno que cambia rápidamente donde los requisitos y las fechas de entrega de los socios evolucionan, mientras se mantienen altos estándares de ingeniería.

Sobre ti
Para prepararlo para el éxito como ingeniero de software senior en Wayve, buscamos las siguientes habilidades y experiencia.
Esencial

• Experiencia comprobada en la construcción y operación de transferencias de datos, ingestión o procesamiento de datos a gran escala, idealmente a escala de múltiples TB o PB.

• Fuertes habilidades de ingeniería de software.

• Experiencia en la entrega y mantenimiento de sistemas de producción.

• Experiencia con la orquestación del flujo de trabajo para trabajos paralelizados; Se prefiere Flyte, pero Airflow, Prefect o herramientas similares también son relevantes

• Experiencia en la creación de sistemas de datos confiables y observables, incluidas estrategias de reintento, reabastecimientos, verificaciones de integridad de datos, seguimiento del ciclo de vida/estado y alertas operativas.

• Fuertes habilidades en plataformas en la nube, siendo preferible Azure; La experiencia con AWS o GCP es una ventaja.

• Dominio de Python y Terraform

• Experiencia con almacenamiento de blobs/objetos, movimiento de archivos a gran escala, redes o transferencia de datos de nube a nube

• Una mentalidad de producto: piensa en el cliente y crea soluciones que solucionan problemas reales, no solo implementan requisitos.

• Comodidad al trabajar en un entorno que cambia rápidamente y con requisitos en evolución

• Un fuerte sentido de propiedad: usted asume la responsabilidad de los resultados, se comunica con claridad y ayuda al equipo a avanzar rápidamente.

Deseable

• Experiencia trabajando con socios de datos externos o integraciones técnicas de cara al cliente.

• Experiencia en vehículos autónomos, robótica, datos geoespaciales, procesamiento de video u otros dominios con uso intensivo de datos.

• Experiencia con Kafka u otros sistemas basados en eventos para la observabilidad de transferencias y el seguimiento del ciclo de vida

• Experiencia en la creación de paneles para comunicar el estado del trabajo de transferencia.

• Experiencia de múltiples nubes en Azure, AWS y/o GCP

• Experiencia en mejorar la rentabilidad, el rendimiento o la confiabilidad de sistemas de datos en la nube a gran escala.

Este es un puesto de tiempo completo basado en nuestra oficina en Londres. En Wayve queremos lo mejor de todos los mundos, por eso operamos una política de trabajo híbrida que combina tiempo juntos en nuestras oficinas y talleres para impulsar la innovación, la cultura, las relaciones y el aprendizaje, y el tiempo dedicado a trabajar desde casa.
Una nota rápida y honesta antes de presentar la solicitud.
Wayve no es un lugar maduro y completamente estructurado con el manual ya escrito. Gran parte de cómo trabajamos aún se está escribiendo y, si te unes, ayudarás a escribirlo. Esto se adapta más a las personas que desean una propiedad real que a las personas que necesitan una estructura establecida desde el primer día.

Si ese parece ser el tipo de problema al que desea dedicar su tiempo, nos encantaría saber de usted.

En Wayve estamos comprometidos a crear una cultura diversa, justa y respetuosa que incluya a todos en función de sus habilidades y perspectivas únicas, e independientemente de su sexo, raza, religión o creencia, origen étnico o nacional, discapacidad, edad, ciudadanía, estado civil, de pareja de hecho o civil, orientación sexual, identidad de género, condición de veterano, embarazo o condición relacionada (incluida la lactancia materna) o cualquier otra base protegida por la ley aplicable.

Para obtener más información, visite Carreras en Wayve. Para obtener más información sobre lo que nos motiva, visita Valores en Wayve...

Fuente: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/wayve/senior-software-engineer-data-london-united-kingdom-13175)