Мы ищем опытного специалиста в команду развития чат-бота — умного помощника, который предоставляет аналитику и отчетность по ключевым показателям компании.
Что нужно будет делать:
- Разбирать сложные пользовательские запросы через админ-панель и Langfuse (анализ всего pipeline отработки запроса).
- Выявлять ошибки бота: «галлюцинации» в цифрах, некорректную суммаризацию, циклы в диалогах, ошибки фильтрации данных.
- Дорабатывать и исправлять существующие SQL-запросы, которые бот использует для выгрузки данных.
- Формировать наборы фьюшотов (few-shots) и тестовые датасеты для замера качества ответов.
- Давать фидбек по улучшению внутренней админ-панели.
Мы ждем от тебя:
- Опыт работы разметчиком данных / контента / диалогов — от 3 лет.
- SQL на уровне Junior+ / Middle: ты не просто знаешь SELECT, а можешь разобраться в чужом запросе, поправить JOIN или условия фильтрации.
- Умение работать с инструментами мониторинга (опыт с Langfuse будет огромным плюсом).
- Структурное мышление: способность понять, почему бот выдал неверную аналитическую записку.
- Внимательность к деталям (цифры в отчетности не терпят ошибок).
Будет плюсом:
- Понимание принципов работы LLM и оценки их качества.
- Опыт работы с ML-продуктами или сложными чат-ботами.
Условия:
- Полная занятость, удаленная работа.
- Возможность работать с передовым стеком технологий в области AI.
- Подробности по графику и этапам интервью расскажем на первом созвоне.
