AI / LLM Engineer

Мы — техническая команда с опытом разработки более 15 лет. Наш SaaS-сервис использует искусственный интеллект для автоматизации клиентских процессов и интеграции с платформами недвижимости.

Сейчас мы выходим на новый уровень и ищем AI / LLM Разработчика с глубокой аналитической экспертизой. Наша главная цель — сделать так, чтобы LLM-ассистент общался с пользователями нашего продукта максимально контекстно, точно и персонализировано. Модель должна безупречно учитывать историю переписки, статус гостя, его локацию и еще кучу дополнительных параметров.

Нам нужен не просто разработчик, который умеет писать промпты, а инженер, способный настраивать пайплайны, замерять метрики, работать с архитектурой RAG и повышать качество генерации на основе данных. Мы прекрасно видим разницу между классным инженером и кандидатом, который просто бездумно копирует код из ChatGPT.

Обязанности:

• Работа над оптимизаций и улучшением взаимодействия с LLM в плане автоматических ответов (основной функционал продукта)

• Оптимизация бизнес-логики: аудит текущего детерминированного пайплайна и перенос логики на более изящные архитектурные решения.

• Трассировка и логирование: внедрение сквозного логирования — необходимо обернуть каждую рабочую ноду системы в Langfuse.

• Работа с контекстом: оптимизация формата передачи истории диалогов, внедрение алгоритмов компрессии контекста для предотвращения переполнения токенов.

• Тюнинг RAG-системы: тестирование различных эмбеддеров для поиска по Базе Знаний (ориентируясь на лидерборд MTEB / retrieval задачи), выбор оптимальных моделей и внедрение реранкеров (Rerankers).

• Тестирование и метрики: подготовка тестовых датасетов (на 50–70 эталонных пар вопрос-контекст), расчет и отслеживание метрик качества поиска (Hit@1, Hit@3, Hit@5, MRR).

• Аналитика и командная работа: плотное общение с продуктовой и технической командой для поиска «болей» LLM, подготовка датасетов и проведение экспериментов с новыми моделями.

Требования:

• Опыт коммерческой разработки ИИ-решений от уровня Middle+ / Senior.

• Обязательный и уверенный опыт работы со стеком: LangChain, Langfuse, LangGraph.

• Опыт создания сложных ИИ-агентов или чат-ботов для реальных продуктов с большим количеством динамических параметров и ограничений.

• Глубокое понимание архитектуры RAG, работы эмбеддингов, векторных баз данных и реранкинга.

• Сильные аналитические навыки: умение не просто «поиграть с промптом», а системно подойти к оценке качества выдачи через метрики.

• Обязательный опыт ответственного использования Claude Code, Cursor AI или аналогичных инструментов в ежедневной разработке (мы ценим скорость, которую дают эти инструменты в руках профессионала)

Условия:

• Удаленная работа, гибкий формат сотрудничества (part-time или full-time по договоренности).

• Проектная или долгосрочная занятость в зависимости от ваших компетенций и интересов.

• Работа в команде сильных инженеров, где понимают разницу между хорошей архитектурой и костылями.

• При необходимости мы предоставляем и оплачиваем доступы к Claude Code, Cursor AI и другим необходимым инструментам.

• Оплата обсуждается индивидуально по результатам технического интервью.

К отклику на вакансию, пожалуйста, приложите:

1. Пусть ваш отклик на вакансию начинается со слов «Я LLM спец и пипец ...» продолжи фразу

2. Опишите 1–3 ваших проекта, где вы создавали сложные LLM-системы для чат-ботов:

   • назначение системы/продукта;

   • стек технологий и LLM-инструментов;

   • с какими главными проблемами вы столкнулись и как их решили.

3. Оцените по 10 бальной шкале ваши аналитические навыки и навыки разработчика