Дата-инженер (Spark)

ОДИН ИЗ ЛУЧШИХ РАБОТОДАТЕЛЕЙ РОССИИ

Мы – Neoflex. Аккредитованная IT компания. За 20 лет работы мы создали 12+ готовых решений для бизнеса, так же занимаемся заказной разработкой программного обеспечения.

Приветствуем на странице нашей компании и благодарим за интерес к вакансии. Будем рады оказаться полезны друг другу.

Сейчас мы расширяем команду, занимающуюся проектом по миграции данных из источников на единую платформу. Команда входит в Центр компетенций BDS - одно из сильнейших подразделений нашей Компании, экспертов в области работы с большими данными, построения DWH и использующих в работе современный стек BigData: Greenplum, Hadoop, NiFi, Hive, Spark/Scala, PostgreSQL, Informatica, Kafka, Apache Airflow, Apache Griffin.

ПРОЕКТ: Суть проектов связана с построением хранилищ, которые построены на различных базах данных Hadoop, GreenPlum, PosgreSQL. Работаем с витринами и занимаемся разработкой ETL процессов.

СТЕК проекта: Apache Spark (Pyspark), SQL, Airflow, Hadoop.

Что нужно делать:

• Код ревью;

• Оптимизация своего и чужого кода на Spark;

• Написание эффективного кода на SQL, Python, Spark;

• Настройка и поддержка DAG-ов в Airflow для оркестрации процессов;

• Тестирование и отладка кода, обеспечение качества данных;

• Взаимодействие с командой и заказчиком по уточнению требований.

Что мы хотели бы видеть:

•Высшее образование;

•Опыт работы со Spark (от 2-3 лет), знание Pyspark;
• Знания Spark архитектуры, и вопросов производительности;
• Глубокие знания SQL;
• Опыт работы с Airflow (написание и поддержка DAG-ов);
• Понимание принципов распределенных вычислений (умение использовать нативные инструменты Spark);
• Опыт работы с Hadoop;
• Умение работать в команде и следовать процессам заказчика;

• М/ж: Санкт-Петербург, Нижний Новгород, Саратов, Пенза, Воронеж.

Желательно:
• Знание экономики, финансов, банковской сферы;

• Опыт работы с Iceberg, StarRocks, Trino.

Что ты приобретёшь, присоединившись к нам:

• достойную оплату труда + компенсационные, стимулирующие и мотивационные выплаты, бонусы за участие в реферальной программе;
• работа в команде профессионалов готовых делиться экспертизой;
• официальное трудоустройство по ТК РФ, аккредитация IT, расширенный социальный пакет:

✔️ страховка ДМС (с 3-го месяца работы, стоматология, возможность подключения родственников, теле медицина, полис ВЗР),

✔️ сотрудникам со стажем в Neoflex более 3 месяцев при предоставлении листка нетрудоспособности устанавливается доплата до полного заработка за период болезни,

✔️ обучение детей сотрудников ИТ специальностям,

✔️ компенсация затрат на фитнес и занятия английским языком;

• обеспечиваем техникой для работы (ноутбук, наушники, мышь);
• профессиональное развитие - в Учебном Центре (курсы по работе с большими данными, видео лекции, тренажеры, карьерный коучинг, лекции, тренинги, конференции, участие в митапах);
• возможность пройти проф.сертификацию;
• прозрачную систему карьерного развития Performance Review;
• персонального куратора с первого дня работы;
• насыщенную корпоративную жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия, мотивационные награждения;
• комфортную атмосферу в филиалах компании в городах: Москва, Санкт-Петербург, Нижний Новгород, Пенза, Воронеж, Саратов, Самара, Краснодар где есть лаунж и фотозоны, вендинги в кухнях, пространство для медитаций и другие секретные места, о которых знают только наши сотрудники.

Мечты и команды работают вместе. Мы будем рады, если ты станешь частью нашей команды! Откликайся ;)

У НАС ТЫ СМОЖЕШЬ НАЙТИ: ПЕРСОНАЛЬНОГО КУРАТОРА С ПЕРВОГО ДНЯ РАБОТЫ

Мы знаем, как сложно бывает адаптироваться, поэтому, что бы снять напряжение и стресс опытные коллеги HR, Учебный центр и Вертикальный руководитель помогут, поддержат, направят, научат.

НЕПОВТОРИМУЮ КОРПОРАТИВНУЮ СТРУКТУРУ

• Команда Neoflex — семья, в которой всегда найдется время обсудить с тобой нерабочие темы за чашечкой кофе, настольной игрой, на вечеринке, тимбилдинге и шахматном клубе
• Значимые же события в жизни сотрудников подкрепляем подарками от компании и коллег, потому что ты для компании бесценный и самый лучший

НАШИ ЦЕННОСТИ

У нас необыкновенно-милые ценности в компании — БУДЬ ПРОФИ, РАЗВИВАЙСЯ, МЫ ПОДДЕРЖИМ.

На руку помощи и плечо поддержки старшего товарища здесь всегда можно рассчитывать.

ЖИЗНЬ С ПОЛЬЗОЙ ДЛЯ МИРА

• Neoflex реализовал образовательный проект, который поможет воспитанникам детских домов учиться программированию и освоить IT-навыки
• Несколько лет мы являемся активным участником движения «Добрые крышечки». Денежные средства с собранного пластика переводятся на счёт БФ «Волонтёры в помощь детям-сиротам»
• Наши сотрудники участвуют в проекте IT-Донор

ENGLISH IS EASY

С нами легко повысить уровень английского или выучить его с «0» в English Speaking Club или компактных группах с учителем. Компания поможет тебе в этом нелёгком деле!

КУДА ЖЕ БЕЗ МЕРЧА И ПРЕМИЙ? БЕЗ НИХ НЕ ТАК ВЕСЕЛО

• Компенсация спорта и большой выбор полезных брендированных вещей в «Магазине мерча». Мы получаем и копим Neocoins а потом радуем себя покупками
• Рекомендуем друга в компанию, получаем денежную премию и Neocoins. Neocoins получаем за каждый этап взаимодействия — собеседование, оффер, оформление на работу
• За стаж работы, вклад в развитие компании, развитие студентов и поддержку команды каждому начисляются Neocoins

ДОПОЛНИТЕЛЬНЫЙ ПАКЕТ МЕДИЦИНСКИХ УСЛУГ

В приложении нашего страхового партнёра помимо стандартных услуг, можно воспользоваться и такими услугами:

• Стоматологическая помощь
• Услуга страхования близких родственников
• Оказание экстренной помощи в любом регионе РФ
• Телемедицина
• Программа диагностики зрения
• Вакцинация по желанию

УЧЕБНЫЙ ЦЕНТР И ВНУТРЕННИЕ ОБРАЗОВАТЕЛЬНЫЕ ПРОГРАММЫ

• Чтобы прогресс не убегал от тебя в суете будних дней, наша команда Центра Развития Компетенций поможет развивать навыки! Удобные сервисы позволят отслеживать прогресс на базе разработанных внутренних обучающих курсов
• Совершенно бесплатно компания обучает студентов технических вузов, сертифицирует, а лучшим выдаёт offer

ВНЕШНИЕ ОБРАЗОВАТЕЛЬНЫЕ ПРОГРАММЫ И СЕРТИФИКАЦИЮ

Если на обучающей платформе не нашлось подходящих курсов, можно подобрать для себя доступные программы во вне, в том числе пройти профессиональную сертификацию.

ОБУЧЕНИЕ ДЕТЕЙ СОТРУДНИКОВ IT НАУКЕ

Для сотрудников, желающих познакомить своих детей с IT, имеются внутренние разработанные курсы по нескольким направлениям и возрастным категориям.

ПРОЗРАЧНОСТЬ КАРЬЕРНОГО РАЗВИТИЯ

• Ежегодные Performance review
• Возможность вертикального (в рамках системы грейдов) и горизонтального развития (инженерный, клиентский или менеджерский карьерный трек)
• Помощь в развитии личного бренда (публикации статей в проф.сообществах и блогах)
• Возможность стать куратором студентов и выпускников Учебного центра Neoflex

Вакансия подходит тебе и твоему другу, просто поделись этой ссылкой и нашими контактами!