Аналитик-разработчик в LLM Блендер

В Поиске Яндекса, помимо обычных ссылок на веб-страницы (документов), есть множество тематических блоков: картинки, видео, ответ нейросети от Алисы, калькулятор, курс валют и др.

Мы делаем офлайн-метрику, основанную на LLM-разметке релевантности тематических блоков запросам по инструкции. Вам предстоит развивать её и делать ранжирование блоков в Яндексе ещё лучше, а количество удовлетворённых пользователей — ещё больше!

Какие задачи вас ждут

• Улучшение офлайн-метрики ранжирования тематических блоков
  Вы будете исследовать, формулировать и оцифровывать проблемы в метрике и итоговом ранжировании, придумывать и реализовывать способы исправления проблем. Результат напрямую влияет на продакшен, ведь офлайн-метрика — это таргет для модели ранжирования в Поиске.
• Сбор бенчмарка ранжирования
  Офлайн-метрика замеряет качество поиска, но нужно замерять качество и самой метрики! Именно для этого нужен бенчмарк — набор эталонных оценок ранжирования. Его сбор — во многом продуктовая задача, ведь бенчмарк задаёт эталонное ранжирование.
• Построение и поддержка аналитических моделей в оценке качества Поиска
  Команда офлайн-KPI-метрики отвечает не только за саму форму офлайн-метрики, но и за множество процессов офлайн-оценки качества поиска: приёмки новых ML-моделей ранжирования, сбор «корзин» (множества запросов для оценки качества поиска), сбор дашбордов мониторинга качества и получение по ним инсайтов о проблемных зонах и методах их устранения. Потребуется решать множество важных продуктовых и аналитических вопросов и вести сложные проекты.
• Работа с офлайн-метриками всех компонентов выдачи
  Выдача Яндекса состоит не только из ссылок на веб-страницы (так называемой органической выдачи), но и из рекламы, тематических блоков. Для каждого из этих компонентов тоже существует офлайн-сигнал. В перспективе вы будете отвечать за внедрение этих офлайн-сигналов в единую офлайн-метрику всей выдачи и улучшать как качество самих сигналов, так и процессы вокруг них.

Больше об аналитике в Яндексе — в канале Yandex for Analytics

Мы ждём, что вы

• Имеете опыт руководства или менторства в аналитике
• Умеете выстраивать стабильные и прозрачные рабочие процессы
• Обладаете глубокими знаниями математики

Будет плюсом, если вы

• Обладаете знаниями в области машинного обучения, имеете опыт внедрения моделей
• Участвовали и побеждали в олимпиадах по математике, физике, программированию
• Читаете и понимаете профильные тексты на английском языке

Бенефиты работы в Яндексе

Здоровье

Рост и развитие

Спорт

И ещё

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят:

Базовые услуги

Плановая помощь и неотложная за рубежом, страхование от несчастных случаев для любителей активного отдыха и лечение критических заболеваний.

Ментальное здоровье

Врачи в клиниках по ДМС, онлайн-консультации с психологами. А также психотерапия в офисах, где есть кабинет психотерапевта.

Ежегодные чекапы

Мы за превентивную заботу о здоровье, поэтому по ДМС можно проходить чекапы и регулярно вакцинироваться.

Больничный

30 дней в году оплачиваются — вы получите полную зарплату, как будто не болели.

Стоматология

Плановые процедуры, профессиональная чистка и экстренная помощь за рубежом.

Коррекция зрения

После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия.

Терапевты в офисах

Если почувствовали себя неважно, можно обратиться в кабинет врача-терапевта, такие есть во всех крупных офисах Яндекса.

Ведение беременности и роды

Оплачиваем ведение беременности и роды для сотрудниц и жён сотрудников, которые с нами более двух лет.

Страховка для родственников по системе 80/20: мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%. В страховку входит всё то же самое, что и у вас.

Больше о бенефитах