Инженер по данным

Level Access — ведущая компания в области цифровых решений для доступности, помогающая организациям создавать продукты, которые работают для всех. Мы консолидируем наши бизнес-системы в единую, унифицированную платформу данных для поддержки аналитики и инициатив в области искусственного интеллекта. В роли старшего инженера данных вы сыграете ключевую роль в проектировании, создании и эксплуатации инфраструктуры данных, лежащей в основе этой трансформации. Эта позиция сосредоточена на создании надежной, управляемой и масштабируемой базы данных, которая интегрирует данные из нескольких систем в платформу, готовую к использованию ИИ.

Обязанности

• Проектирование, создание и поддержка масштабируемой платформы данных на Databricks и AWS с соблюдением принципов архитектуры Medallion (Bronze/Silver/Gold).
• Разработка и управление процессами загрузки данных и ETL/ELT из основных бизнес-систем, обеспечение качества данных, надежности и производительности.
• Реализация мониторинга качества данных (свежесть, полнота, валидность, обнаружение аномалий) с автоматическим оповещением.
• Установление и поддержка разрешения идентичности Golden Record и обратной синхронизации между исходными системами.
• Управление метаданными, происхождением данных и правами доступа с использованием Databricks Unity Catalog и стандартов платформы.
• Сотрудничество с межфункциональными командами для предоставления наборов данных, готовых для аналитики и ИИ, поддерживающих бизнес-цели.
• Применение лучших практик для инфраструктуры как кода, CI/CD и контроля версий для конвейеров данных.
• Эффективное взаимодействие с заинтересованными сторонами, управление неопределенностью и достижение результатов в быстро меняющейся среде.

Требуемые квалификации:

• Более 8 лет опыта в области инженерии данных, создание производственных ETL/ELT конвейеров в масштабе.
• Глубокие знания Python (PySpark, скрипты, интеграция API, автоматизация конвейеров).
• Практический опыт работы с Databricks (ноутбуки, задания, рабочие процессы, Unity Catalog) и AWS (Lambda, ECS/Fargate, S3, Glue, Athena, DynamoDB, EventBridge, Step Functions, IAM).
• Экспертиза в моделировании данных и архитектурах lakehouse (Medallion, Delta Lake, Parquet, эволюция схем, инкрементальные upsert-операции).
• Уверенное владение SQL и dbt для создания модульных, протестированных и документированных моделей.
• Опыт интеграции REST API, разрешения сущностей и стратегий сопоставления записей.
• Знание систем контроля версий на базе Git и CI/CD для конвейеров данных.

Желательно:

• Продвинутые функции Databricks (Delta Live Tables, интеграция MLflow).
• Опыт работы с Salesforce API (Bulk API 2.0, REST API, SOQL).

Процесс подачи заявки

Если вы процветаете в динамичной среде и стремитесь оказать значительное влияние в области доступности, мы будем рады услышать вас! Это полная занятость с окладом и конкурентным пакетом льгот, включая возможности бонусов, щедрый оплачиваемый отпуск, оплачиваемые праздники и ряд программ, направленных на поддержку благополучия сотрудников и баланса между работой и личной жизнью. Хотите быть рассмотрены немедленно? Пожалуйста, отправьте свое резюме для участия в отборе на эту роль.

Level Access привержена разнообразию рабочей силы и является работодателем с равными возможностями. Мы стремимся предоставлять разумные приспособления на протяжении всего процесса найма. Level Access использует инструменты искусственного интеллекта (ИИ) для поддержки и улучшения наших процессов рекрутинга и найма. Эти инструменты могут помогать в таких действиях, как скрининг резюме, оценка навыков, планирование интервью и коммуникация. Эти инструменты предназначены для помощи нашим рекрутерам и не принимают окончательных решений о найме. Все процессы с использованием ИИ проходят проверку человеком, а информация о кандидатах обрабатывается в соответствии с нашей Политикой конфиденциальности и применимыми нормативами. Чтобы узнать больше о том, как мы собираем и используем персональные данные, пожалуйста, ознакомьтесь с нашим Заявлением о конфиденциальности (https://www.levelaccess.com/privacy-statement) и нашим Центром доверия (https://trust.levelaccess.com).