О компании Anthropic
Миссия Anthropic — создавать надежные, интерпретируемые и управляемые системы искусственного интеллекта. Мы хотим, чтобы ИИ был безопасным и полезным для наших пользователей и общества в целом. Наша команда — это быстрорастущая группа преданных своему делу исследователей, инженеров, экспертов по политике и бизнес-лидеров, которые работают вместе над созданием полезных систем ИИ.
Anthropic находится в авангарде исследований в области ИИ, посвящая себя разработке безопасного, этичного и мощного искусственного интеллекта. Наша миссия — обеспечить соответствие трансформирующих систем ИИ интересам человека. Мы ищем инженера-исследователя для присоединения к нашей команде предварительного обучения, ответственной за разработку следующего поколения больших языковых моделей. В этой роли вы будете работать на стыке передовых исследований и практической инженерии, внося вклад в разработку безопасных, управляемых и надежных систем ИИ.
Основные обязанности:
- Проведение исследований и внедрение решений в таких областях, как архитектура моделей, алгоритмы, обработка данных и разработка оптимизаторов
- Самостоятельное руководство небольшими исследовательскими проектами при сотрудничестве с членами команды в рамках крупных инициатив
- Проектирование, проведение и анализ научных экспериментов для углубления нашего понимания больших языковых моделей
- Оптимизация и масштабирование нашей инфраструктуры обучения для повышения эффективности и надежности
- Разработка и улучшение инструментов для разработки с целью повышения производительности команды
- Вклад во весь стек технологий — от низкоуровневой оптимизации до высокоуровневого проектирования моделей
Требования:
- Высшее образование (магистр или кандидат наук) в области компьютерных наук, машинного обучения или смежных областях
- Сильные навыки программной инженерии с подтвержденным опытом создания сложных систем
- Экспертное владение Python и опыт работы с фреймворками глубокого обучения (предпочтительно PyTorch)
- Знание масштабного машинного обучения, особенно в контексте языковых моделей
- Умение балансировать исследовательские цели с практическими инженерными ограничениями
- Сильные навыки решения проблем и ориентированность на результат
- Отличные коммуникативные навыки и способность работать в коллективной среде
- Забота о социальном воздействии своей работы
Желательный опыт:
- Работа с высокопроизводительными масштабируемыми системами машинного обучения
- Знание GPU, Kubernetes и внутреннего устройства операционных систем
- Опыт работы с языковым моделированием на основе архитектур трансформеров
- Знание методов обучения с подкреплением
- Опыт работы с масштабными процессами ETL
Примеры проектов:
- Оптимизация пропускной способности новых механизмов внимания
- Сравнение вычислительной эффективности различных вариантов трансформеров
- Подготовка масштабных наборов данных для эффективного потребления моделями
- Масштабирование распределенных обучающих заданий до тысяч GPU
- Разработка стратегий отказоустойчивости для нашей инфраструктуры обучения
- Создание интерактивных визуализаций внутренних механизмов моделей, таких как паттерны внимания
В Anthropic мы стремимся создавать разнообразную и инклюзивную рабочую среду. Мы настоятельно призываем к подаче заявок кандидатов всех слоев общества, включая представителей недостаточно представленных групп в сфере технологий.