Инженер по данным

Кто мы такие:

Alpaca — это глобальный лидер с головным офисом в США, предоставляющий брокерскую инфраструктуру с приоритетом на агентов для акций, ETF, опционов, криптовалют, фиксированного дохода, торговли 24/5 и многого другого.

Среди наших дочерних компаний Alpaca является лицензированной финансовой компанией, обслуживающей сотни финансовых учреждений в 40 странах с помощью наших институциональных API. Это включает брокер-дилеров, инвестиционных консультантов, управляющих капиталом, хедж-фонды и криптобиржи, всего более 10 миллионов брокерских счетов.

Наша глобальная команда — это разнообразная группа опытных инженеров, трейдеров и профессионалов брокерской сферы, которые работают над достижением нашей миссии — открыть финансовые услуги для каждого человека на планете. Мы глубоко привержены вкладу в проекты с открытым исходным кодом и развитию живого сообщества, постоянно совершенствуя наш отмеченный наградами, удобный для разработчиков API и надежную инфраструктуру, стоящую за ним.

Alpaca с гордостью поддерживается финансированием в размере 400 миллионов долларов от ведущих мировых инвесторов, включая Portage Ventures, Spark Capital, Tribe Capital, Social Leverage, Horizons Ventures, Opera Tech Ventures, SBI Group, Derayah Financial, Unbound, Peak XV, Elefund и Y Combinator.

Наши сотрудники:

Мы — динамичная команда из более чем 400 человек, распределенных по всему миру, которые с удовольствием работают из своих любимых мест по всему миру, с коллегами из США, Канады, Японии, Венгрии, Нигерии, Бразилии, Великобритании и других стран!

Мы ищем страстных людей, желающих внести вклад в быстрый рост Alpaca. Если вы разделяете наши основные ценности — Оставайтесь любознательными, Проявляйте эмпатию и Будьте ответственными — и готовы оказать значительное влияние, мы приглашаем вас подать заявку.

Ваша роль: Мы ищем старшего инженера по данным, который поможет спроектировать и построить следующее поколение нашей платформы данных, поскольку мы продолжаем масштабироваться для крупных клиентов и новых юрисдикций. В Alpaca инженерия данных охватывает финансовые транзакции, данные клиентов, логи API, системные метрики, дополненные данные и сторонние системы, влияющие на принятие решений как для внутренних, так и для внешних заинтересованных сторон. Мы обрабатываем сотни миллионов событий ежедневно, и это число продолжает расти по мере подключения новых клиентов и продуктов. 

Мы отдаем приоритет технологиям с открытым исходным кодом в нашем стеке данных, используя Google Cloud Platform (GCP) в качестве основы нашей инфраструктуры данных. Это охватывает слои пакетного и потокового приема, трансформации и потребления для BI/отчетности, AI/агентских интерфейсов (MCP) и внешних сторонних приемников. Мы также контролируем эксперименты с данными, каталогизацию и системы мониторинга/оповещения. 

Наша команда работает полностью удаленно и распределенно. 

Обязанности:

• Проектировать, строить и развивать основную инфраструктуру платформы данных, например, распределенные движки запросов, оркестрацию, хранилища, каталогизацию и многое другое. 
• Отвечать за инфраструктуру lakehouse как код, управляя развертываниями с помощью Terraform и Ansible на Kubernetes. 
• Создавать и поддерживать низколатентные потоковые и CDC конвейеры приема данных, а также пакетные пути приема, загружаемые в Iceberg. 
• Разрабатывать и масштабировать нашу BI-ландшафт, чтобы команды и агенты получали производительный и самостоятельный доступ к данным lakehouse. 
• Обеспечивать лучшие практики надежности платформы, включая мониторинг и оповещения, дежурства, реагирование на инциденты, окна обслуживания, инструкции по эксплуатации и SLA. 
• Сотрудничать с DevOps, аналитическими инженерами и другими заинтересованными сторонами для устранения пробелов в инфраструктуре и поддержки новых требований к данным.

Обязательные требования:

• Опыт работы в инженерии данных не менее 5 лет, включая более 2 лет в создании и эксплуатации масштабируемых, низколатентных платформ данных, обрабатывающих более 100 миллионов событий в день.
• Сильный практический опыт работы с инфраструктурой данных на Kubernetes с использованием облачных инструментов, таких как Docker и Helm.
• Опыт работы в продакшене с IaC: Terraform, Ansible и ArgoCD (или аналогами).
• Глубокие знания распределенных систем (хранение, транзакции и обработка запросов) с практическим опытом эксплуатации движков запросов с открытым исходным кодом, таких как Trino или Presto.
• Сильный опыт работы с объектным хранилищем и открытыми форматами таблиц, в частности Apache Iceberg.
• Опыт работы с потоковыми и CDC системами: Kafka, Redpanda и Debezium.
• Практический опыт работы с фреймворками оркестрации (Airflow) и инструментами ELT (Airbyte).
• Хорошее знание Python и SQL для построения конвейеров и инструментов платформы. 
• Опыт работы с Google Cloud Platform и ее сервисами данных (GCS, Cloud Build, Cloud SQL, Dataproc и др.); или аналогичный опыт с другими облачными сервисами. 
• Способность успешно работать в быстро меняющейся стартап-среде и адаптировать инфраструктуру под быстро меняющиеся потребности.

 Желательные навыки:

• Опыт работы с семантическими/метрическими слоями (Cube, dbt, Looker).
• Знакомство с фреймворками трансформации (dbt).
• Знакомство с инструментами обратного ETL (Hightouch).
• Знакомство с инструментами каталогизации данных и отслеживания происхождения (OpenMetadata, Datahub).
• Опыт работы с системами контроля доступа к данным и управления ими (Apache Ranger).

Как мы заботимся о вас:

• Конкурентная зарплата и опционы на акции
• Медицинское страхование
• Настройка домашнего офиса для новых сотрудников: единовременная выплата 500 долларов США
• Ежемесячный пособие: 150 долларов США в месяц через карту Brex

Alpaca гордится тем, что является работодателем с равными возможностями, стремящимся нанимать разнообразный коллектив.

Политика конфиденциальности при наборе персонала