Ingénieur logiciel, exploration Web

Exa est un laboratoire d'IA appliquée qui construit un moteur de recherche comme le monde n'en a jamais vu. Nous construisons une infrastructure à grande échelle pour explorer l'ensemble du Web, formons des modèles d'intégration de pointe pour la traiter et concevons des bases de données vectorielles ultra performantes pour les récupérer. Nous optimisons désormais la recherche pour Cursor, Cognition, HubSpot et plus de 400 000 développeurs et avons levé 350 millions de dollars auprès de Lightspeed, Benchmark et a16z.

Notre objectif ultime est de créer une recherche parfaite sur toutes les informations du monde, bien au-delà de Google. Si vous souhaitez créer des systèmes de ML à grande échelle qui définiront la manière dont le nouveau monde de l'IA consomme les informations, cet endroit est fait pour vous.

En tant qu'ingénieur Web Crawler, vous serez responsable de l'exploration de l'ensemble du Web. Créez essentiellement une exploration à l’échelle de Google !

Qui tu es

• Vous possédez une vaste expérience dans la création et la mise à l'échelle de robots d'exploration Web, ou seriez ravi de monter en puissance très rapidement.

• Vous avez de l'expérience avec un langage haute performance (C++, Rust, etc.)

• Vous êtes familier avec TypeScript, Playwright, la conception Web moderne, CDP (Chrome DevTools Protocol)

• Vous êtes à l'aise pour optimiser un système à un degré exceptionnel

• Vous vous souciez du problème de trouver des connaissances de haute qualité et reconnaissez à quel point cela est important pour le monde.

Ce que vous pourriez faire

• Créez un robot d'exploration distribué capable de gérer plus de 100 millions de pages par jour.

• Optimisez la politesse d'exploration et la limitation du débit sur des milliers de domaines.

• Concevoir des systèmes pour détecter et gérer le contenu dynamique, le rendu JavaScript et les mesures anti-bots

• Créez des algorithmes intelligents de planification et de priorisation des analyses pour une efficacité de couverture maximale.

Logistique

• Localisation : Il s'agit d'une opportunité en personne à Zurich.

• Visas : nous sommes heureux de parrainer des candidats internationaux (par exemple, STEM OPT, OPT, H1B, O1, E3). Bien que nous ne puissions pas garantir votre visa, nous avons toujours réussi à parrainer des candidats du monde entier. Si vous recevez une offre, notre équipe travaillera dur pour vous obtenir un visa.

• Avantages : Nous offrons des prestations de santé premium (médicales, dentaires, visuelles), des prestations de fertilité, 16 semaines de congé parental entièrement payé pour tous les nouveaux parents et une allocation mensuelle de bien-être à tous nos employés.

Exa est un employeur garantissant l'égalité des chances. Tous les candidats qualifiés seront pris en considération pour un emploi sans égard à la race, aux croyances, à la couleur, à la religion, au sexe, à l'orientation sexuelle, à l'identité ou à l'expression de genre, à l'origine nationale, au handicap, à l'âge, au statut d'ancien combattant, à l'état civil, à la grossesse ou à des conditions connexes, aux antécédents criminels conformément à la loi applicable ou à toute autre base protégée par la loi applicable.
Trouvez plus d'emplois anglophones en Suisse sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.ch/jobs/companies/exa/software-engineer-web-crawling-zurich-403574)