Привет! Я Даша, руковожу командой, которая занимается применением компьютерного зрения в продуктах. Один из наших ключевых проектов — IP-камера Mike. Под капотом у неё работает VLM-модель, которая умеет отслеживать события, описанные пользователем в свободной форме, и реагировать на заданные триггеры. Но это только начало: в наших планах — кастомизированные суммаризации, распознавание лиц, персонализация ответов и множество других возможностей.
Дарья Виноградова
Руководитель подгруппы универсальных применений CV
Мы решаем задачи, связанные с применением компьютерного зрения в продуктах. Наш главный проект — IP-камера Mike на базе VLM-модели. Она позволяет отслеживать события, которые действительно важны для пользователя, и своевременно сообщать о них. С её помощью можно понять, спит ли ребенок, сколько раз за день поел кот, где в последний раз оставили ноутбук и многое другое.
Чтобы обеспечить надёжность её работы, мы постоянно повышаем качество VLM-моделей и уделяем особое внимание минимизации ложных срабатываний.
Вам предстоит строить пайплайны автоматической и асессорской разметки, обучать модели на стадиях SFT и RL, проводить эксперименты и повышать качество моделей на всех этапах. Необходимо будет подготавливать видеоданные и заносить их в обучающие выборки.
Для ответов в реальном времени важно не только высокое качество, но и скорость работы модели. Вам предстоит экспериментировать с архитектурой моделей и инструментами ускорения инференса, а также оптимизировать вычислительные затраты и обеспечивать стабильную работу моделей в продакшене даже под высокой нагрузкой.
Мы хотим, чтобы модель умела узнавать людей и домашних животных, учитывала пользовательский контекст и использовала факты, важные для конкретного человека. Вам предстоит научить модель корректно работать с пользовательскими знаниями, делать ответы более персонализированными и естественными, а также наполнять их эмпатией.
Больше об ML в Яндексе — в канале Yandex for ML
Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят:
Страховка для родственников по системе 80/20: мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%. В страховку входит всё то же самое, что и у вас.
Все интересные вам вакансии в одном профиле
Будьте осторожны: если работодатель просит войти через Google, iCloud или Госуслуги, прислать код или пароль, запустить ПО или перевести деньги — это мошенники.