Аналитик-разработчик по развитию AI-агентов

Привет! Я Толя, руководитель бригады сбора корзин Нейро. Я в Яндексе с 2023 года и с тех пор работаю над развитием больших языковых и визуальных моделей (LLM и VLM) в разных проектах компании.

Наша служба занимается качеством ответов моделей, работающих под капотом Алисы и Поиска. Мы ищем талантливых аналитиков-разработчиков, которые помогут нам растить качество ответов наших технологий и тем самым улучшать пользовательский опыт общения с Алисой и работы с Поиском.

Мы работаем над LLM- и VLM-агентами — системой построения ответов в Алисе и в Поиске, умеющей обращаться в разные сервисы Яндекса для составления ответа с опорой на источники.

Одна из важных задач нашей службы — научить агентов решать сложные пользовательские сценарии и отвечать на трудные запросы, которые требуют применения многих навыков, таких как общий интеллект, достоверность, умение несколько раз обращаться к Поиску (в том числе последовательно), делать вычисления и так далее.

Какие задачи вас ждут

• Исследование пользовательских сценариев - Развитие агентов в Алисе и Поиске не может начаться без исследования типовых сценариев и задач, с которыми пользователи обращаются к этим продуктам, в том числе сценариев, при решении которых агенты дают ответы недостаточного качества.
• Сбор датасетов запросов - Для развития ключевых навыков агентов нужны примеры челенджевых запросов — таких, на которые трудно дать хороший ответ, не приложив усилия для изучения предметной области задачи, которую пользователь решает своим запросом.
• Работа с разнообразными источниками данных - Источников, из которых можно брать примеры запросов, в Яндексе и в открытом доступе существует много — они отличаются как по формату, так и по качеству данных внутри.

Почему у нас классно:

• Мы работаем с агентами — современной технологией на основе LLM и VLM — и ориентированы прежде всего на результат в продакшне.
• Мы даём сотрудникам возможность развивать как технические, так и коммуникативные и менеджерские навыки.
• Ваша работа напрямую повлияет на то, какими станут Алиса и Поиск через полгода.

Будет плюсом, если вы

• Интересуетесь продуктом, стремитесь понять, каким он должен быть и почему
• Умеете создавать точные и эффективные промпты для генеративных нейросетей

Бенефиты работы в Яндексе

• Расширенная медицинская страховка начинает работать с первого месяца в Яндексе.
• 30 дней в году оплачиваются — вы получите полную зарплату, как будто не болели.
• Плановые процедуры, профессиональная чистка и экстренная помощь за рубежом.