Инженер данных

В аккредитованную ИТ компанию «Коулмэн Тех» в данный момент ведем подбор на вакансию "Инженер данных".

Наши партнёры – крупные FMCG компании.

Чем предстоит заниматься:

• проектировать и собирать витрины данных по разработанному ТЗ;
• проектировать, разрабатывать и поддерживать ETL-процессы для загрузки данных из/в Data Lake;
• писать документацию - комментировать код;
• проводить кросс-ревью кода;
• работать с data-аналитиками для создания новых и оптимизации существующих витрин.

Мы ожидаем:

• опыт на позиции инженера данных от 1,5 лет;
• разработка и поддержка ETL-пайплайнов;
• оптимизация производительности запросов (партиционирование, индексы, кеширование);
• участие в Data Governance;
• понимание основных операций СУБД и принципов DWH;
• понимание принципов ETL;
• опыт работы с Hadoop технологиями (Spark, Hive и тд);
• опыт работы с Azure/Yandex облачными платформами;
• опыт разработки и поддержки DAGs в Apache Airflow;
• уверенное владение SQL, Python, pySpark;

Будет преимуществом:

• опыт работы с базами данных PostgreSQL и ClickHouse;
• опыт работы с Trino;
• опыт работы с инструментами обеспечения качества данных (Great Expectations);

Условия, которые мы предлагаем:

• официальное трудоустройство по ТК РФ;
• работа в команде профессионалов в крупнейшей международной FMCG компании с развитыми корпоративными ценностями и стандартами;
• для работы выдаём корпоративный ноутбук;
• график работы: 5/2, сб и вс- выходные дни;
• формат работы: удалённо (в пределах РФ).