Мы ищем опытного инженера данных для проектирования и поддержки надежной инфраструктуры данных в наших системах. В этой роли вы будете отвечать за создание масштабируемых конвейеров данных, обеспечение целостности данных и интеграцию сторонних источников данных. Ваш основной фокус будет направлен на обеспечение эффективного потока данных и поддержку аналитических возможностей по всей организации. Вы также будете участвовать в разработке нашей архитектуры данных, внедрять лучшие инженерные практики и тесно сотрудничать с кросс-функциональными командами для преобразования необработанных данных в действенные инсайты.
Обязанности
- Общение с техническими и нетехническими заинтересованными сторонами для сбора и уточнения бизнес-требований
- Анализ данных и бизнес-логики для обеспечения согласованности, точности и надежности
- Проектирование, внедрение и поддержка конвейеров данных для эффективной и масштабируемой обработки данных
- Интеграция, поддержка и сопровождение решений по данным и сторонних источников данных
- Исследование и оценка сторонних инструментов, сервисов и компонентов для потенциального использования
- Следование лучшим инженерным практикам, включая ревью кода, тестирование, рефакторинг и непрерывную доставку
- Проектирование, оптимизация и поддержка решений для хранения данных
Требования
- Более 3 лет коммерческого опыта в области инженерии данных
- Опыт сбора бизнес-требований и общения с заинтересованными сторонами
- Глубокие знания архитектуры и принципов хранилищ данных (DWH)
- Практический опыт проектирования хранилищ данных и построения ETL-конвейеров
- Глубокий практический опыт работы с Python
- Практический опыт в одной или нескольких из следующих областей: обработка данных с использованием PySpark, Apache Spark, Pandas или аналогичных фреймворков; парсинг данных; интеграция сторонних источников данных и API
- Уверенное владение SQL и реляционными базами данных, такими как PostgreSQL и MySQL
- Практический опыт работы с колоночными базами данных, такими как ClickHouse, Snowflake, Cassandra, BigQuery (множество таблиц с миллионами и более записей в каждой)
- Твердое понимание шаблонов проектирования программного обеспечения, алгоритмов и структур данных
- Средний уровень владения английским языком
Будет плюсом
- Опыт работы с платформами обмена сообщениями, такими как RabbitMQ или Kafka
- Знакомство с практиками DataOps и автоматизацией конвейеров данных
- Знакомство с CI/CD конвейерами и средами Kubernetes
- Опыт работы в сферах FinTech или трейдинга
Мы предлагаем
- Оплату налоговых расходов для частных предпринимателей в Украине
- Экспертную поддержку и консультации для украинских частных предпринимателей
- 20 оплачиваемых дней отпуска в году
- 10 оплачиваемых дней больничного в году
- Праздничные дни согласно утвержденному списку праздничных дней компании
- Медицинскую страховку
- Возможность удаленной работы
- Бюджет на профессиональное образование
- Бюджет на изучение языков
- Бюджет на оздоровление (абонемент в спортзал, спортивное снаряжение и сопутствующие расходы)
