Разработка требований к инструментам оркестрации: описание процессов в инструментах типа Apache Airflow, dbt;
Проектирование интеграций ETL-процессов с другими компонентами платформы (Data Catalog, системы качества данных, метаданные);
Анализ источников данных: проведение детального анализа систем-источников (базы данных, API, файлы);
Разработка технических требований к пайплайнам: создание детальных спецификаций на извлечение (Extract), преобразование (Transform) и загрузку (Load) данных, включая описание бизнес-логики преобразований;
Участие в проектировании и описании структур данных в хранилище совместно с архитектором и инженерами;
Формализация бизнес-логики: описание сложных расчетов, правил агрегации, условий очистки и обогащения данных, требований к конвертации и стандартизации;
Составление технической документации: паспорта источников данных, спецификации на пайплайны, схемы потоков данных.
Требования:
Опыт работы системным или бизнес-аналитиком в области данных (DWH, ETL, BI) от 3-х лет;
Глубокое понимание принципов и методологий ETL/ELT. Знание разницы между ETL и ELT, плюсов и минусов каждого подхода;
Уверенное знание SQL для анализа источников, проектирования преобразований и написания тестовых запросов;
Понимание концепций и моделей построения DWH: звезда, снежинка, Data Vault;
Опыт работы с инструментами оркестрации: понимание принципов работы Apache Airflow (или аналогов) на уровне создания требований к DAG-ам;
Понимание форматов данных для хранения и обмена (Iceberg, Parquet, Avro, JSON, XML);
Умение читать и составлять диаграммы (ER, DFD, BPMN, UML);
Практический опыт работы с dbt (data build tool) для описания трансформаций;
Знание основ Python для анализа данных или прототипирования простых ETL-задач.
Условия:
Официальное оформление в соответствии с ТК РФ;
График работы: 5/2 с 09:00 до 18:00 (в пятницу до 16:45);
Работа в аккредитованной Минцифры ИТ-компании;
Конкурентоспособная заработная плата (обсуждается по результатам собеседования);
Соцпакет: программа ДМС со стоматологией, корпоративная мобильная связь, санаторно-курортное лечение;
Возможность расти как вертикально, так и повышать уровень своих профессиональных и деловых компетенций;
Внутреннее обучение: конференции, тренинги, мастер-классы, корпоративный университет. Внешнее обучение по направлению профессиональной деятельности;
Возможность присоединиться к нашим спортивным командам по мини-футболу, баскетболу, волейболу или чирлидингу;
Корпоративная электронная библиотека;
Комфортный офис в бизнес-центре «NordStar» с удобным расположением (5 мин пешком от метро «Беговая», МЦД-1).
