Data Engineer / Hadoop

Описание вакансии

NEOFLEX создает ИТ-платформы для цифровой трансформации бизнеса, помогая заказчикам получать устойчивые конкурентные преимущества в цифровую эпоху.

Мы фокусируемся на заказной разработке программного обеспечения и внедрении сложных информационных систем, используя передовые технологии и подходы.

Стань частью команды Neoflex и получи возможность развиваться в профессиональной среде, реализуя масштабные проекты для крупнейших финансовых организаций на острие современных технологий.

Адрес офиса(работа из офиса 5/2):

• г. Москва, ул. Поклонная

• г. Санкт-Петербург, ул. Уральская

• г. Нижний Новгород, ул. Академика Сахарова

СТЕК: Hadoop, Hive, Spark, Hue, Jupyter.

ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:

Определение источников, выявление проблем с качеством данных в источниках;
Разработка схем данных конечных витрин в Hive по утвержденному проекту;
Маппинг атрибутов источников на приёмник;
Разработка ETL-процессов с помощью внутреннего фреймворка;
Реконсиляция данных, написание базовых тестов на качество данных.

ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ:

Уверенный уровень sql (в пределах стандарта, без привязки к СУБД);
Представления о java / python( иногда приходится писать фрагменты кода - как обертку над sql);
Желательно:
Опыт работы с Hive, Spark;
Опыт работы с Оozie, Airflow;
Умение работать с Confluence;
Есть представление о работе с Jira, Git.

У НАС ТЫ СМОЖЕШЬ НАЙТИ:

Официальное трудоустройство по ТК РФ;
График работы офис 5/2;
Амбициозные задачи и проекты;
Работа в команде профессионалов в доброжелательной атмосфере;
Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.), а также возможность страхования родственников по корпоративной цене;
Корпоративное обучение и развитие (портал обучения и развития удаленным доступом 24/7; собственный Центр развития компетенций);
Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.