Руководитель инженерного отдела, контроль агентов

О компании Scale

Миссия Scale — разработка надежных систем искусственного интеллекта для самых важных решений в мире. Будучи ведущей компанией по созданию данных для ИИ, мы предоставляем высококачественные данные и полнофункциональные технологии, которые питают самые передовые модели в мире — способствуя прорывам в генеративном ИИ, обороне и автономных транспортных средствах. Мы сотрудничаем с ведущими предприятиями и правительствами, чтобы внедрять ИИ в производство, который работает, когда это наиболее важно, сочетая строгую оценку с полнофункциональным развертыванием, чтобы наши клиенты могли создавать ИИ, которому можно доверять.

О команде

Applied Intelligence Systems — команда Scale, сосредоточенная на расширении границ возможностей агентных приложений. Мы создаем инфраструктуру и инструменты, которые обеспечивают работу агентного ИИ в производстве, в сочетании с прикладными исследованиями машинного обучения, дизайном и оценкой, чтобы гарантировать надежную работу этих систем в масштабах, требуемых предприятиями и правительствами. Мы быстро растем, получая все большее признание как среди коммерческих, так и государственных клиентов, и только начинаем — эта команда определит, каким должен быть надежный агентный ИИ промышленного уровня.

 

О роли

В качестве менеджера по инженерии в области контроля агентов вы будете руководить командой, создающей нашу платформу для мониторинга, оценки и улучшения агентных приложений для корпоративных и государственных клиентов. Инструменты разработки агентов пока находятся на ранней стадии развития во всей отрасли, и мы строим платформу, чтобы устранить этот пробел — охватывая развертывание, мониторинг, оценку, улучшение на основе машинного обучения и непрерывное обучение, чтобы агенты становились лучше со временем. Вы будете управлять инженерной командой, обеспечивать техническую реализацию и работать кросс-функционально с клиентами и внутренними партнерами, чтобы внедрять эти возможности в производство, с амбициями установить отраслевой стандарт того, как агентные приложения контролируются и улучшаются. Наша платформа уже поддерживает развертывания агентов для нескольких корпоративных и государственных клиентов. Это команда, базирующаяся в США, с участниками в Нью-Йорке и Сан-Франциско, и вы поможете определить и расширить команду по мере нашего роста.

Вы будете:

• Руководить многопрофильной командой инженеров программного обеспечения и специалистов по машинному обучению для обеспечения технической реализации в рамках платформы Scale Generative AI Platform (SGP)
• Отвечать за дорожную карту платформы, охватывающую развертывание, мониторинг, оценку и улучшение агентных приложений с помощью машинного обучения
• Работать кросс-функционально с клиентами, командами, работающими на местах, продуктовой командой и внутренними инженерными командами для перевода требований предприятий и правительств в возможности платформы
• Разрабатывать и выпускать функции от начала до конца — от проектирования системы до отладки и тестирования
• Проводить быстрые эксперименты для проверки и улучшения возможностей платформы на основе реального использования клиентами
• Устанавливать техническое направление, культуру и процессы для быстрорастущей команды
• Наставлять и развивать как инженеров, так и специалистов по машинному обучению, а также влиять на техническое и организационное масштабирование команды

 

Требования:

• Более 7 лет опыта в инженерии, включая более 2 лет непосредственного управления инженерами или специалистами по машинному обучению, ответственными за производственную систему на базе ML/LLM — а не просто использование стороннего ML API в рамках функции
• Практическое знакомство с архитектурами агентов — использование инструментов, планирование, оркестрация нескольких агентов — и техническая глубина для принятия обоснованных компромиссов с вашей командой
• Способность анализировать дизайн экспериментов ML или методологию оценки достаточно хорошо, чтобы задавать острые вопросы и заслуживать доверие у инженеров и ученых ML, даже если вы сами не проводите эксперименты
• Опыт владения полным жизненным циклом инфраструктуры платформенного уровня — от первоначального проектирования до масштабирования на несколько внутренних или внешних команд по мере роста использования, численности и сложности
• Опыт сотрудничества с менеджерами продуктов, инженерными командами, работающими на местах (FDE), и клиентами для перевода реальных требований в решения по приоритетам и реализованные возможности платформы
• Опыт создания и развития высокоэффективных инженерных команд — включая найм, удержание или измеримые улучшения в производительности или скорости работы команды

 

Желательные навыки:

• Опыт создания или контроля систем оценки, мониторинга или наблюдаемости для продуктов на базе ML/LLM в производстве
• Глубокое понимание полного жизненного цикла разработки ML/агентов — от экспериментов до развертывания в производстве и итераций
• Глубокое понимание современных LLM и дизайна агентных систем, включая оптимизацию на уровне подсказок и систем, а также интеграцию с внешними инструментами, API и сервисами
• Публикации, вклад в open-source проекты или патенты в области агентных систем, LLM или прикладного машинного обучения
• Способность работать в условиях неопределенности, балансируя исследовательские подходы с прагматичными продуктными ограничениями

Пакеты компенсаций в Scale для соответствующих ролей включают базовую зарплату, акции и льготы. Диапазон, указанный в каждом объявлении о вакансии, отражает минимальную и максимальную целевую зарплату для новых сотрудников на данной позиции и может включать несколько уровней карьеры в Scale; он будет определен в процессе собеседования с учетом места работы и дополнительных факторов, включая профессиональные навыки, опыт, квалификацию, результаты собеседования и соответствующее образование или обучение. Сотрудникам Scale на соответствующих ролях также предоставляются компенсации в виде акций, подлежащие одобрению Советом директоров. Ваш рекрутер сможет сообщить более подробную информацию о конкретном диапазоне зарплаты для вашего предпочтительного местоположения во время процесса найма и подтвердить, будет ли данная роль иметь право на предоставление акций. Вы также получите льготы, включая, но не ограничиваясь: комплексное медицинское, стоматологическое и офтальмологическое страхование, пенсионные льготы, стипендию на обучение и развитие, а также щедрый оплачиваемый отпуск. Кроме того, эта роль может иметь право на дополнительные льготы, такие как компенсация транспортных расходов.

Пожалуйста, обратитесь к подзаголовку объявления о вакансии, чтобы узнать, где будет расположена эта позиция. В целях прозрачности оплаты базовый диапазон зарплаты для этой полной занятости в городах Сан-Франциско, Нью-Йорк, Сиэтл составляет:248 400 $—310 500 $ США

ПРИМЕЧАНИЕ: Наша политика требует 90-дневного периода ожидания перед повторным рассмотрением кандидатов на ту же роль. Это позволяет нам обеспечить справедливую и тщательную оценку всех заявителей.

О нас:

В Scale наша миссия — разработка надежных систем ИИ для самых важных решений в мире. Наши продукты предоставляют высококачественные данные и полнофункциональные технологии, которые питают ведущие модели мира, и помогают предприятиям и правительствам создавать, внедрять и контролировать ИИ-приложения, которые приносят реальный эффект. Мы тесно сотрудничаем с лидерами отрасли, такими как Meta, Ernst & Young, Mayo Clinic, Time Inc., правительством Катара и правительственными агентствами США, включая Армию и ВВС. Мы расширяем нашу команду, чтобы ускорить разработку ИИ-приложений.

Мы считаем, что каждый должен иметь возможность быть собой на работе, поэтому гордимся тем, что являемся инклюзивным и равноправным рабочим местом. Мы привержены равным возможностям трудоустройства независимо от расы, цвета кожи, происхождения, религии, пола, национального происхождения, сексуальной ориентации, возраста, гражданства, семейного положения, инвалидности, гендерной идентичности или статуса ветерана. 

Мы обязуемся работать с кандидатами с физическими и психическими ограничениями и предоставлять разумные приспособления. Если вам нужна помощь и/или разумное приспособление в процессе подачи заявки или найма из-за инвалидности, пожалуйста, свяжитесь с нами по адресу accommodations@scale.com. Пожалуйста, ознакомьтесь с плакатом «Знайте свои права» Министерства труда США для дополнительной информации.

Мы соблюдаем положение о прозрачности оплаты труда Министерства труда США. 

ПРИМЕЧАНИЕ: Мы собираем, храним и используем персональные данные для наших профессиональных бизнес-целей, включая уведомление вас о вакансиях, которые могут вас заинтересовать, и обмен информацией с нашими аффилированными лицами. Мы ограничиваем сбор персональных данных тем, что считаем уместным и необходимым для управления потребностями кандидатов, предоставления наших услуг и соблюдения применимых законов. Любая информация, которую мы собираем в связи с вашей заявкой, будет обрабатываться в соответствии с нашими внутренними политиками и программами, направленными на защиту персональных данных. Пожалуйста, ознакомьтесь с нашей политикой конфиденциальности для дополнительной информации.