Data Engineer

ВАКАНСИЯ С ПЕРЕЕЗДОМ В РЕСПУБЛИКУ ТАТАРСТАН

Обязанности:

• Разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
• Проектирование и поддержка схем баз данных PostgreSQL (в т.ч. PostGIS, TimescaleDB);
• Интеграция данных из различных источников (S3, RabbitMQ, внешние API, внутренние сервисы);
• Написание и оптимизация SQL-запросов;
• Разработка и поддержка дашбордов и отчётов в Apache Superset;
• Настройка и сопровождение мониторинга данных и процессов (Grafana, Loki, Alertmanager);
• Работа с контейнеризированный инфраструктурой (Docker, Portainer);
• Ведение задач и документирование решений в Jira/Wiki;
• Взаимодействие с командой разработки и аналитиками для уточнения требований к данным.

Требования:

• Уверенное владение Python (pandas, обработка и трансформация данных);
• Опыт работы с реляционными БД (PostgreSQL);
• Уверенное написание SQL-запросов (оконные функции, оптимизация, индексирование);
• Опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
• Опыт работы с объектным хранилищем S3 (или совместимыми хранилищами: MinIO и пр.);
• Базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, Opensearch или аналоги;
• Желателен опыт работы с брокерами сообщений: RabbitMQ/Kafka или аналоги;
• Понимание контейнеризации: Docker, Portainer;
• Уверенная работа с системой контроля версий Git.

• Дневная рабочая неделя 5/2 (ненормированная);
• Работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
• Транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
• Полис добровольного медицинского страхования;
• Предоставление платного жилья для иногородних;
• Гарантия профессионального роста;
• Амбициозная, проектно-ориентированная команда;
• Командные и спортивные игры, реализация нестандартных задач;
• Карьерный рост при наличии и обретении в процессе работы необходимых компетенций.