Ingeniero de software, rastreo web

Exa es un laboratorio de inteligencia artificial aplicada que construye un motor de búsqueda como nunca antes se había visto en el mundo. Construimos infraestructura a gran escala para rastrear toda la web, entrenamos modelos integrados de última generación para procesarla y diseñamos bases de datos vectoriales de muy alto rendimiento para recuperarla. Ahora impulsamos la búsqueda de Cursor, Cognition, HubSpot y más de 400 000 desarrolladores y hemos recaudado 350 millones de dólares de Lightspeed, Benchmark y a16z.

Nuestro objetivo final es crear búsquedas perfectas en toda la información del mundo, mucho más allá de Google. Si desea crear sistemas de aprendizaje automático a gran escala que definan la forma en que el nuevo mundo de la IA consume información, este es el lugar para usted.

Como ingeniero de Web Crawler, serás responsable de rastrear toda la web. ¡Básicamente, cree un rastreo a escala de Google!

quien eres

• Tiene amplia experiencia en la creación y ampliación de rastreadores web, o le entusiasmaría poder progresar muy rápidamente.

• Tienes experiencia con algún lenguaje de alto rendimiento (C++, Rust, etc.)

• Está familiarizado con TypeScript, Playwright, diseño web moderno y CDP (Protocolo Chrome DevTools).

• Se siente cómodo optimizando un sistema en un grado excepcional.

• Te preocupas por el problema de encontrar conocimiento de alta calidad y reconoces lo importante que es para el mundo.

Lo que podrías hacer

• Cree un rastreador distribuido que pueda manejar más de 100 millones de páginas por día.

• Optimice la cortesía de rastreo y la limitación de velocidad en miles de dominios

• Diseñar sistemas para detectar y manejar contenido dinámico, representación de JavaScript y medidas anti-bots.

• Cree algoritmos inteligentes de priorización y programación de rastreo para lograr la máxima eficiencia de cobertura

Logística

• Ubicación: Esta es una oportunidad en persona en Zurich.

• Visas: Nos complace patrocinar candidatos internacionales (por ejemplo, STEM OPT, OPT, H1B, O1, E3). Si bien no podemos garantizar su visa, históricamente hemos tenido éxito en patrocinar candidatos de todo el mundo. Si recibe una oferta, nuestro equipo trabajará arduamente para conseguirle una visa.

• Beneficios: Ofrecemos beneficios de atención médica premium (médicos, dentales, oftalmológicos), beneficios de fertilidad, 16 semanas de licencia parental totalmente remunerada para todos los nuevos padres y un estipendio mensual de bienestar para todos nuestros empleados.

Exa es un empleador que ofrece igualdad de oportunidades. Todos los solicitantes calificados recibirán consideración para el empleo sin distinción de raza, credo, color, religión, sexo, orientación sexual, identidad o expresión de género, origen nacional, discapacidad, edad, condición de veterano, estado civil, embarazo o condiciones relacionadas, antecedentes penales consistentes con la ley aplicable o cualquier otra base protegida por la ley aplicable.
Encuentre más trabajos de habla inglesa en Suiza en Arbeitnow

Fuente: Arbeitnow (https://www.arbeitnow.ch/jobs/companies/exa/software-engineer-web-crawling-zurich-403574)