ETL разработчик

Описание вакансии

Bell Integrator – один из ведущих системных интеграторов страны.

Мы аккредитованная ИТ-компания и являемся частью большой семьи ГК Softline.

Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – крупнейшие системообразующие финансовые, телеком и ритейл компании страны.

Проект: Для построения хранилища данных с целью формирования аналитической управленческой отчетности, необходим Data Engineer / ETL-разработчик

Требования:

• Высшее техническое/математическое образование
• Опыт работы на проектах построения хранилищ данных и разработки аналитической отчетности в качестве разработчика от 3 лет
• Умение писать и оптимизировать сложные SQL-запросы – обязательно
• Опыт выстраивания зависимостей загрузки
• Опыт реализации переиспользуемых процедур: интеграции данных, формирования бизнес- и технической истории, формирования суррогатных ключей и т.д.
• Опыт практической работы со следующими инструментами: GreenPlum, Hadoop, HBase, Spark, Bash/shell
• Плюсом будут: опыт работы с ClickHouse и AirFlow, опыт Java-разработки
• Плюсом будет понимание принципов работы API, опыт работы со Swagger

Используемые технологии и инструменты

Основные технологии: GreenPlum, PostgreSQL, Hadoop, в перспективе – StarRocks

Языки программирования и инструменты: SQL, PgSQL, Spark

Системы управления кодом и CI/CD: BitBucket (Git), Jenkins

Управление задачами и документацией: Jira, Confluence

Работа по методологии Agile

Обязанности:

• Проектирование и разработка ETL-потоков
• Выстраивание зависимостей загрузок
• Реализация проверок качества загружаемых данных
• Ведение технической документации по потокам данных

Условия:

• Возможность профессионального и карьерного роста в компании, возможность поучаствовать в разных проектах;
• Опыт работы в распределенной команде профессионалов;
• Уровень заработной платы обсуждается индивидуально;
• Возможность работать в офисах Москвы и Екатеринбурга