Data Engineer

Вакансия открыта в ООО "Норникель Спутник" (аккредитованная IT - компания).

НАШИ ЗНАНИЯ - ВАШИ ВОЗМОЖНОСТИ

"НОРНИКЕЛЬ Спутник" СЕГОДНЯ:

Уникальные и интересные задачи: У нас можно участвовать в масштабных и уникальных проектах совместно с коллегами по всей России и видеть результаты своей ежедневной работы.

Поддержка коллег: У нас можно развиваться вместе с опытной командой, готовой делиться своей экспертизой и поддерживать вас при решении сложных задач.

Разносторонний опыт и развитие: У нас можно совершенствовать свои навыки и знания, которые сделают вас конкурентоспособными на рынке труда, а также иметь возможности для прозрачного карьерного роста, как вертикального, так и горизонтального.

Забота о сотрудниках: У нас можно активно участвовать в корпоративной жизни, присоединяться к волонтерским программам Группы компаний «Норникель», всегда быть в форме, участвуя в спортивных мероприятиях вместе с коллегами.

В 2020 году Норникель встал на путь цифровой трансформации, которая включает разработку собственных цифровых платформ и решений, внедрение Data Driven в технологические, производственные и бизнес-процессы. Компания ежегодно повышает собственный уровень AI операционализации. Здесь ключевую роль играет Экосистема Озера данных, которая, по сути, является цифровой сервис-площадкой для реализации всех инициатив, направленных на цифровизацию различных технологических и бизнес-процессов, например, производства на базе цифровых двойников, советчиков и аналитических отчетов.

Озеро данных спроектировано как масштабируемая платформа и в перспективе позволит хранить и анализировать данные всей группы компаний, получая синергетический эффект при обогащении новыми данными существующих на предприятии цифровых моделей.

Команда Big Data, курирующая Озеро данных, стремительно растет, масштабируется и ищет новых специалистов, в том числе на роль Data Engineer

Обязанности:

• Участие в запуске технологических, инновационных и бизнес-решений (в том числе с использованием AI/ML) в Экосистеме Озера данных;
• Разработка и реализация e2e интеграционных сценариев и решений от источников данных до Экосистемы Озера данных;
• Поддержка решений, запущенных в Экосистеме Озера данных;
• Участие в сборе, систематизации и анализе инициатив по анализу данных;
• Осуществление контроля за качеством собираемых данных, организация Data Quality;
• Оценка качества и применимости внедряемых решений и инструментов по анализу данных;
• Участие в разработке, развёртывании и развитии ИТ-инфраструктуры Экосистемы Озера данных.
• Участие в разработке и принятии проектной и сопровождающей документации к внедряемым решениям.

Требования:

• Опыт в разработке интеграционных потоков данных (Batch и Streaming Data Pipelines);
• Знание Data Lake, DWH;
• Опыт работы с Hadoop, Spark, Hive, Kafka, NiFi, Greenplum, PostgreSQL, ClickHouse;
• Опыт администрирования с использованием Jira, Confluence;
• Знание SQL, Python;
• Навыки оформления отчетных материалов, технических заданий, функционально-технических требований.

Будет преимуществом (работа в следующем технологическом окружении):

• Опыт в разработке архитектуры данных (Data Vault);
• Python Application Server;
• Jupyter Lab, Jupyter Hub;
• RedOS/ Ubuntu/ Astra Linux;
• Kubernetes/ OpenShift;
• GitLab.

Условия:

• официальное трудоустройство по ТК РФ;
• ДМС (включающий стоматологию);
• график работы с 9:00 до 18:00 (офис, гибридный режим, возможна полная удаленная работа);
• работа в стабильной, интенсивно развивающейся компании;
• карьерный и профессиональный рост;
• возможность повышения квалификации за счет работодателя.