Мы приглашаем Senior Data Engineer присоединиться к нашей команде.
Задачи
Разработка и поддержка ETL-процессов: извлечение (Extract), трансформация (Transform) и загрузка (Load) данных из различных источников в DWH с использованием инструментов Airflow и Informatica PowerCenter.
Написание и оптимизация сложных SQL-запросов в Greenplum и Oracle, включая PL/SQL-скрипты для работы с таблицами объемом в десятки миллиардов записей.
Анализ и рефакторинг чужого кода ETL, а также проектирование новых пайплайнов на основе теорий СУБД и лучших практик ETL.
Интеграция Python и PySpark для обработки больших данных, автоматизации задач и повышения производительности процессов.
Мониторинг, отладка и обеспечение надежности ETL-джобов, включая обработку ошибок, валидацию данных и оптимизацию под высокие нагрузки банка.
Сотрудничество с аналитиками и бизнес-командами для понимания требований к данным и оперативного устранения проблем в DWH.
Мы ожидаем
Опыт работы разработчиком ETL — не менее 2 лет.
Отличное знание SQL, продвинутый навык разработки в Greenplum и Oracle, умение оптимизировать SQL-запросы, базовое знание PL/SQL.
Понимание теорий СУБД и ETL-процессов.
Умение разбираться в чужом коде.
Опыт работы с ETL-инструментами (Airflow, Informatica PC).
Базовый навык разработки в Airflow, Informatica PowerCenter.
Опыт работы с большим объемом данных (таблицы с десятками миллиардов записей).
Опыт работы с Python, PySpark.
Мы предлагаем
Карьерную и профессиональную возможность в стабильной, аккредитованной ИТ-компании.
Расширенный полис ДМС со стоматологией, корпоративный психолог.
Удаленную работу и гибкий график.
Необходимую технику для комфортной работы.
Обучение, сертификацию, Usetech English Club — онлайн-изучение английского.
Доступ к Корпоративной библиотеке и к Корпоративному университету.
Внутрикорпоративные профильные коммьюнити.
Заботу о детях сотрудников: корпоративные скидки, подарки, детские дни.
Геймифицированную программу лояльности: поверь, ты будешь восторге от нашего корпоративного магазина.
Корпоративную жизнь: мы много работаем и классно отдыхаем.