Ведущий инженер по данным, ценообразование и сравнительный анализ

О роли

В качестве первого инженера по данным в команде маркетплейса вы будете создавать каналы обработки данных и системы ценообразования, которые превращают непоследовательные данные о проданных объявлениях в надежные сопоставимые продажи и оценки. Ваша работа поможет обеспечить понимание пользователями и заинтересованными сторонами как цены, так и степени ее достоверности.

Что вам предстоит делать

• Создавать и поддерживать плановые каналы загрузки данных о проданных объявлениях с нескольких маркетплейсов и внешних источников.

• Проектировать системы разрешения сущностей, которые сопоставляют непоследовательные тексты объявлений и изображения с каноническими товарами.

• Разрабатывать логику оценки, которая учитывает сопоставимые продажи с учетом давности, состояния и количества доступных сравнений.

• Контролировать качество данных для выявления дрейфа, мошенничества, устаревших сравнений и других проблем целостности до того, как они повлияют на пользователей.

• Сотрудничать с коллегами из области компьютерного зрения для определения сопоставления товаров между источниками с разным уровнем детализации.

• Принимать решения о создании или покупке источников данных, лицензировании и сторонних потоках ценообразования.

Что мы ищем

• Минимум 5 лет опыта работы инженером по данным, включая создание и поддержку масштабируемых производственных ETL и каналов обработки данных.

• Опыт работы с неструктурированными, противоречивыми данными в сферах маркетплейсов, ценообразования, борьбы с мошенничеством или аналогичных шумных доменах.

• Сильные навыки SQL и опыт работы с современными инструментами для работы с данными, такими как dbt, Airflow или Dagster, а также Spark или аналогичными технологиями.

• Опыт работы со статистическими оценками или моделями ценообразования, включая базовую логику сопоставимых продаж на основе регрессии.

• Опыт проектирования систем разрешения сущностей или связывания записей в масштабе, а также мониторинга качества данных, дрейфа или аномалий в производстве.

• Опыт обработки данных из нескольких внешних источников, принятия технических решений о создании или покупке, а также коммуникации степени уверенности и неопределенности в ценообразовании для нетехнических заинтересованных сторон.

• Опыт в области ценовой аналитики, лицензирования сторонних данных или работы в стартапах на ранних стадиях будет плюсом.

Оплата и льготы

Годовая базовая зарплата: от 160 000 до 220 000 долларов США. Спонсорство визы не предоставляется.

Местоположение

Гибридный формат, Нью-Йорк, Нью-Йорк, США.