Менеджер программы обеспечения качества ИИ

Менеджер программы обеспечения качества искусственного интеллекта I Tripadvisor

О Tripadvisor

Группа Tripadvisor объединяет людей с опытом, которым стоит поделиться, и стремится стать самым надежным в мире источником путешествий и впечатлений. Мы используем наши бренды, технологии и возможности, чтобы связать нашу глобальную аудиторию с партнерами с помощью богатого контента, рекомендаций для туристов и двусторонних рынков для впечатлений, размещения, ресторанов и других категорий путешествий. Дочерние компании Tripadvisor, Inc. (Nasdaq: TRIP) включают портфель туристических брендов и предприятий, включая Tripadvisor, Viator и TheFork.

Менеджер программы обеспечения качества искусственного интеллекта гарантирует, что все системы искусственного интеллекта в рамках программы Tripadvisor Travel Experience работают надежно, точно и соответствуют бизнес-целям. Позиционируя себя на стыке производительности искусственного интеллекта, удовлетворенности путешественников и разработки продуктов, вы создадите системы тестирования, проведете аудит результатов искусственного интеллекта и превратите результаты качества в практические оперативные идеи. Вы будете управлять отслеживанием производительности, разблокировать межфункциональные команды и регулярно сообщать высшему руководству о точности искусственного интеллекта, показателях успеха и планах улучшения.

Место работы: Гибрид

Эта должность представляет собой гибридную должность, требующую 2–3 дней в неделю/месяц в нашем лондонском офисе.

Ключевые обязанности

•
Определите стратегию качества эпохи искусственного интеллекта. Создайте комплексную структуру качества для агентов-людей и агентов искусственного интеллекта, развивая контроль качества от традиционного аудита на основе выборки к непрерывному управлению качеством с использованием искусственного интеллекта.

•
Создайте системы качества и тестирования ИИ. Разработайте и поддерживайте комплексные эталоны оценки, протоколы тестирования и рабочие процессы с участием человека (HITL) для проверки правильности работы агентов ИИ, ботов поддержки и механизмов рекомендаций.

•
Аудит результатов искусственного интеллекта и взаимодействия с путешественниками. Постоянно оценивайте результаты, генерируемые искусственным интеллектом (например, автоматические чаты поддержки, точность рекомендаций по турам и обновления бронирования) на предмет выполнения намерений, безопасности, тонуса и предотвращения галлюцинаций.

•
Получайте бизнес-обновления и аналитику: создавайте готовые для руководителей отчеты, которые преобразуют сложные данные оценки качества, показатели точности моделей и тенденции ошибок в стратегические рекомендации для бизнес-лидеров.

•
Возглавьте межфункциональные улучшения ИИ. Тесно сотрудничайте с командами по обработке данных, ИИ-инжинирингу, продуктам и CX, чтобы превратить результаты контроля качества в оперативные уточнения, точную настройку моделей и обновленные входные данные базы знаний.

•
Поддерживайте темп выпуска: отслеживайте сроки реализации проектов по развертыванию новых ИИ, управляйте графиками регрессионного тестирования QA и обеспечивайте подотчетность технических групп за соблюдение стандартов качества перед полным развертыванием путевых версий.

Квалификация

•
Опыт: 4–6 лет в управлении техническими программами, управлении качеством или эксплуатации продуктов AI/ML, ориентированных на надежность и оценку системы.

•
Опыт оценки искусственного интеллекта: глубокие практические знания методологий тестирования искусственного интеллекта/LLM, оперативной оценки, точности распознавания намерений и мер безопасности искусственного интеллекта.

•
Предоставление аналитической информации на основе данных: проверенная способность анализировать журналы искусственного интеллекта, использовать инструменты аналитики и превращать показатели качества в понятные, готовые для руководителей презентации и информационные панели.

•
Межфункциональное сотрудничество: исключительный опыт взаимодействия технических команд разработчиков искусственного интеллекта с заинтересованными сторонами бизнеса и службами поддержки путешественников.

•
Эмпатия к предметной области: глубокий интерес к онлайн-путешествиям, поведению путешественников и поддержание высокого доверия при взаимодействии с ИИ с потребителями.

Предпочтительные квалификации

•
Практический опыт работы с современными инструментами оценки LLM, платформами аннотаций или инструментами искусственного интеллекта для обслуживания клиентов (например, Zendesk AI, Intercom, Salesforce).

•
Опыт работы в сфере туристических технологий, торговых площадок электронной коммерции или быстрорастущих потребительских платформ.

Что мы предлагаем

• Конкурентные компенсационные пакеты (регулярно сравниваемые с последними отраслевыми данными), включая базовый оклад и годовые бонусы.

• «Работайте по-своему» с гибкостью, соответствующей вашему образу жизни. Группа Tripadvisor использует дистанционный подход к сотрудничеству в рамках команды по всему миру с возможностью присоединяться на месте так часто, как вам хочется или по требованию вашей команды.

• Гибкий график. Баланс между работой и личной жизнью заложен в нашей культуре изначально. Доверие и ответственность помогают этому работать.

• Согласование пожертвований. Вернуть? Дайте больше! Мы ежегодно сопоставляем соответствующие благотворительные пожертвования.

• Помощь в оплате обучения. Хотите повысить уровень своей карьеры? Нам нравится это слышать! Получайте ежегодную поддержку для сертифицированных программ.

• Пособие по образу жизни. Ежегодное пособие, которое можно потратить на себя. Используйте его в путешествиях, оздоровлении или в любых других сферах, которые вам подходят.

• Туристические льготы. Мы считаем, что путешествия — это развитие сотрудников, поэтому предоставляем скидки и многое другое.

• Программа помощи сотрудникам. Мы здесь для вас с ресурсами и программами, которые помогут вам справиться с жизненными трудностями.

• Польза для здоровья. Мы предлагаем отличное покрытие и конкурентоспособные премии.

• Щедрая реферальная схема. Помогите нам расти и получите щедрые награды за рекомендации успешных кандидатов.

Наши культурные столпы:

Путешественник в первую очередь

Мы существуем, чтобы создавать ценность для наших клиентов, путешественников. Мы даем возможность нашим поставщикам и партнерам раскрыть эту ценность. Их коллективное поведение и идеи — вот что движет нами.

Исполнение – наше преимущество

Мы действуем быстро, экспериментируем, учимся на ошибках, повторяем и совершенствуем решения завтрашнего дня во всех аспектах нашего бизнеса. Наше исполнение является гибким, управляемым данными, расставленным по приоритетам и рассчитанным на масштабирование. Мы считаем, что ни одна проблема не является проблемой кого-то другого, и завершаем то, что можно сделать сегодня, зная, что завтрашний день принесет новые проблемы.

Вместе мы добьемся успеха…

Источник: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/tripadvisor/ai-quality-assurance-program-manager-london-26852).