Инженер-программист, Механизм знаний – Механизм запросов

Exa — это лаборатория прикладного искусственного интеллекта, создающая поисковую систему, которую мир еще не видел. Мы создаем крупномасштабную инфраструктуру для сканирования всей сети, обучаем современные модели внедрения для ее обработки и разрабатываем сверхвысокопроизводительные векторные базы данных для извлечения данных из нее. Теперь мы обеспечиваем поиск Cursor, Cognition, HubSpot и более 400 000 разработчиков и привлекли 350 миллионов долларов от Lightspeed, Benchmark и a16z.
Наша конечная цель — создать идеальный поиск по всей мировой информации, выходящий далеко за рамки Google. Если вы хотите создать крупномасштабные системы машинного обучения, которые определят, как новый мир ИИ потребляет информацию, это место для вас.
Команда платформы знаний создает механизм знаний Exa. Мы постоянно синтезируем информацию из Интернета и за его пределами в один из крупнейших в мире графов знаний в открытом доступе, содержащий сотни миллиардов подтвержденных фактами утверждений. Работа состоит из двух частей: конвейеры построения, которые решают, чему доверять, и поисковые системы, которые решают, как лучше всего это искать. Наша цель — дать агентам ответы на любой фактический вопрос о мире с беспрецедентной точностью и полнотой.
В этой роли вы будете владеть механизмом запросов, который ищет сотни миллиардов заявок в различных поисковых системах, от базы данных распределенных графов до векторных, полнотекстовых индексов, индексов временных рядов и геопространственных индексов.
Это новая работа с огромным размахом. Ни одна готовая система не отвечает на точные вопросы по сотням миллиардов подтвержденных фактами заявлений со скоростью агента, поэтому вы будете принимать фундаментальные решения, от структуры хранилища и индексации между механизмами до языка запросов и планировщика, который маршрутизирует работу между ними, от которого зависит каждый запрос.

Что ты будешь делать

• Собственное хранилище и индексирование на всех серверных компонентах: расположение данных, секционирование и индексирование для графического, векторного, полнотекстового, временного и геопространственного извлечения, с массовым построением снимков и оперативной загрузкой, которая никогда не приводит к сбою системы.

• Решите, как лучше всего искать: планирование на основе затрат на основе оценок количества элементов, которое для каждого вопроса выбирает, какие серверные части использовать, в каком порядке и как объединить их результаты, выполняемые как обходы, поиски, фильтры и агрегации в одном плане.

• Сделайте это быстро в масштабе: обслуживайте тысячи запросов в секунду, профилируя и сокращая задержку p50/p99, объем памяти и стоимость запроса при высокой одновременной нагрузке, от размещения на диске до разветвления сети.

• Обеспечьте единообразие ответов во время сходимости данных: граф одновременно получает обновления в реальном времени и массовые снимки и в конечном итоге является согласованным по дизайну, поэтому вы будете владеть тем, что может видеть запрос во время сходимости: последовательное продвижение снимков, упорядоченное применение динамических обновлений и стабильная нумерация страниц в разных версиях.

• Измерение точности и полноты: сквозные проверки, которые должно пройти каждое развертывание, а также оценки и метрики, которые показывают, когда план возвращает неправильные результаты или пропускает те, которые он должен был найти.

Что мы ищем

• Вы работали глубоко внутри распределенной базы данных, системы запросов, поисковой системы или системы хранения.

• Хорошее понимание индексации, планирования и оптимизации запросов, а также форматов хранения.

• Уверенное понимание основ распределенных систем: консенсус, репликация, сегментирование и отказоустойчивость.

• Уверенное владение системным языком (Go, Rust или C++).

• Прежде чем приступить к оптимизации, вы выполняете профилирование и добились измеренного снижения задержки в рабочей среде.

• Вы зациклены на правильности, надежности и качестве данных не меньше, чем на масштабе.

Бонус

• Графические базы данных или объединение векторного, полнотекстового, временного и геопространственного поиска.

• Компиляторы, разработка языка запросов или оптимизаторы на основе затрат.

Примеры проектов

• Создайте систему, которая извлекает и анализирует все, что известно о любой компании или человеке в мире, точно и полно отвечая на любой фактический вопрос.

• Отвечайте на точные многоэтапные вопросы по сотням миллиардов заявок и тысячам запросов в секунду с интерактивной задержкой.

• Создайте планировщик, который подберет правильное сочетание графического, векторного, полнотекстового и геопространственного поиска для любого вопроса и докажет, что он выбран правильно.

• Сделайте новые знания доступными для запроса через несколько секунд после их синтеза, никогда не выдавая противоречивых результатов.

Логистика

• Местоположение: Это возможность лично в Цюрихе.

• Визы: мы рады спонсировать международных кандидатов (например, STEM OPT, OPT, H1B, O1, E3). Хотя мы не можем гарантировать получение визы, мы исторически успешно спонсируем кандидатов со всего мира. Если вы получите предложение, наша команда приложит все усилия, чтобы получить вам визу.

• Льготы: мы предлагаем премиальные медицинские льготы (медицинские, стоматологические, офтальмологические), пособия по рождаемости, 16 недель полностью оплачиваемого отпуска по уходу за ребенком для всех молодых родителей и ежемесячную стипендию на здоровье всем нашим сотрудникам.

Exa — работодатель, предоставляющий равные возможности. Все квалифицированные кандидаты будут получать вознаграждение за трудоустройство независимо от расы, вероисповедания, цвета кожи, религии, пола, сексуальной ориентации, гендерной идентичности или самовыражения, национального происхождения, инвалидности, возраста, статуса ветерана, семейного положения, беременности или связанных с этим состояний, криминального прошлого, соответствующего действующему законодательству, или любого другого основания, защищаемого действующим законодательством.
Exa — работодатель, предоставляющий равные возможности. Все квалифицированные кандидаты будут получать вознаграждение за трудоустройство независимо от расы, вероисповедания, цвета кожи, религии, пола, сексуальной ориентации, гендерной идентичности или самовыражения, национального происхождения, инвалидности, возраста, статуса ветерана, семейного положения, беременности или связанных с этим состояний, криминального прошлого, соответствующего действующему законодательству, или любого другого основания, защищаемого действующим законодательством.
Найдите больше англоговорящих вакансий в Швейцарии на Arbeitnow

Источник: Arbeitnow (https://www.arbeitnow.ch/jobs/companies/exa/software-engineer-knowledge-engine-query-engine-zurich-49685)