Проектирование и оптимизация мультимодальных больших моделей "зрение-язык-действие" (VLA) с использованием таких методов, как линейная алгебра и теория вероятностей, для преобразования языковых инструкций в реальные действия;
Создание моделей глубокого обучения для обнаружения объектов и сегментации сцен, а также повышение робастности алгоритмов в динамических сценах с помощью математической оптимизации;
Разработка фреймворков обучения с подкреплением и функций вознаграждения для навигации и операций захвата роботов, а также сокращение разрыва между моделированием и реальной производительностью;
Интеграция обучения с подкреплением с традиционными методами управления, основанными на кинематическом и динамическом моделировании роботов, для достижения стабильного движения роботов в сложных условиях местности.
Требования:
Прочный теоретический математический фундамент и навыки программирования для проведения исследований в одной или нескольких из следующих областей: большие модели воплощенного интеллекта, алгоритмы восприятия, алгоритмы обучения с подкреплением, алгоритмы управления движением;
Свободное владение Python, навыки работы с C++ (особенно для высокопроизводительных вычислений или низкоуровневого управления);
Глубокое знание PyTorch/TensorFlow, знакомство с операционной системой для роботов ROS/ROS2;
Знакомство со средами моделирования (Isaac Sim, MuJoCo, PyBullet), а также со стандартными инструментами для глубокого обучения и обучения с подкреплением;
Междисциплинарный опыт в областях компьютерного зрения + NLP + робототехника.
Условия:
Готовность к длительным командировкам в Китай;
Работа в одной из самых динамично растущих компаний, лидирующей на российском automotive рынке, в сплоченном, профессиональном коллективе;
Полис ДМС и страхование от НС после испытательного срока;
Скидки на приобретение автомобилей и их техническое обслуживание;
Основной формат работы – оффлайн, для нас важна быстрая коммуникация;
Достойное вознаграждение: в компании действует развёрнутая система премирования.
