Вопросы на собеседовании для Data Engineer в Igaming

В чем разница между партицированние и шардированием

Middle

Igaming

Островок

Какие у вас сильные стороны

Igaming

Иннотех

Нужно ли хранить всю историю данных или удалять старые

Работали ли вы с CDC (Change Data Capture)

Почему выбрать модель витрин Кимбалла вместо Operational Business Table (OBT)

Что такое ретеншен данных

Как организовать хранилище данных с учетом данных из нескольких источников: бэкенд базы, кликстрим, CRM и коммуникации

Какие требования по скорости доставки данных: реалтайм или батч

Какие данные из звонилок хранятся: метаданные или аудио/видео записи

Как справляться с монотонными задачами

Нормально ли работать одному над проектом

Какой масштаб данных в базе и кликстриме

Работали ли вы с Airflow и писали DAGи

Автомакон

Igaming

Rubbles

Что вы ищете в работе

Как проверять, что данные из источника дошли до хранилища

С какой частотой должна происходить доставка данных

Работали ли вы с Great Expectations и dbt tests для проверки качества данных

В каком случае выбрать Data Vault вместо третьей нормальной формы для ядра хранилища

Как использовать Airflow для оркестрации ETL-процессов

Будут ли данные стандартизироваться и приводиться к единому виду перед загрузкой в хранилище