Data Engineer

О КОМПАНИИ

Мы — ведущая российская аккредитованная IT-компания с более чем 10-летним опытом. Специализируемся на автоматизации сферы тарифного регулирования в энергетике и ЖКХ:

• теплоснабжение;
• электроэнергетика;
• водоснабжение и водоотведение.

Разрабатываем уникальные технологии для электронного обмена данными, анализа и прогнозирования, автоматизации принятия решений и системной интеграции.

Наши решения используют:

• Федеральные ведомства: ФАС России, Минстрой России, Минэнерго России;
• Крупнейшие корпорации: ПАО «РусГидро», Группа «Интер РАО», «Росатом», ООО «Газпром энерго».

Более 92 000 активных пользователей, 450+ успешно реализованных проектов, 10+ продуктов в портфеле.

Чем предстоит заниматься:
Вы станете ключевым участником команды по управлению данными и будете отвечать за проектирование, развитие и поддержку аналитической инфраструктуры:

1. ETL/ELT-процессы:

• Проектирование, настройка и оптимизация пайплайнов обработки данных;
• Интеграция данных из API, файлов, баз данных;
• Обеспечение отказоустойчивости и надежности процессов загрузки
• Оркестрация с помощью Apache Airflow.

2. Хранилища данных и аналитические модели:

• Проектирование и оптимизация DWH и Data Lake;
• Миграция данных между системами, включая перенос в ClickHouse;
• Тюнинг SQL-запросов, представлений, хранимых процедур;
• Разработка и поддержка витрин данных.

3. Визуализация и аналитика:

• Создание интерактивных дашбордов и отчётов в Redash;
• Анализ данных: выявление трендов, аномалий, закономерностей;
• Подготовка регулярных и ad-hoc отчётов;
• Быстрая обработка нетиповых SQL-запросов по запросам команд.

4. Качество данных:

• Мониторинг, диагностика и исправление ошибок;
• Валидация данных после миграций и ETL-обработки;
• Разработка механизмов проверки целостности и консистентности.

5. Документация и поддержка:

• Ведение архитектурной документации по данным и ETL;
• Консультирование коллег по возможностям анализа и структуре данных;
• Автоматизация рутинных задач с помощью скриптов (Python).

Что мы ждём от кандидата:

Обязательные требования:

• Высшее техническое образование;
• Продвинутое знание SQL, умение писать и оптимизировать сложные запросы;
• Знание PL/SQL, опыт разработки и отладки хранимых процедур;
• Опыт работы с СУБД — от 2 лет, включая ClickHouse;
• Практические навыки программирования на Python (Pandas, NumPy, Requests);
• Опыт работы с системами аналитики: Яндекс Метрика, OpenTelemetry;
• Критическое мышление: способность ставить правильные вопросы и находить решения самостоятельно;
• Готовность разбираться в архитектуре систем, выявлять узкие места и участвовать в доработке компонентов, связанных с БД.

Будет плюсом:

• Опыт работы с Arenadata (LuxMus, Streaming, Catalog);
• Опыт миграции решений на ClickHouse;
• Понимание принципов визуализации данных (цвет, композиция, юзабилити дашбордов);

Личные качества:

• Системность мышления;
• Внимательность к деталям;
• Самостоятельность;
• Хорошие коммуникативные навыки.

Условия:
Гибкий график, возможность удаленной работы или в офисе в городах присутствия. Официальное трудоустройство и постоянное развитие под присмотром опытных коллег.

Почему нас стоить выбрать:
Создаем инновационные ИТ-решения и являемся лидерами отрасли. Сотни реализованных проектов. Работаем с социально значимыми проектами федерального значения, вносим вклад в технологическое развитие страны. Сильная экспертиза - возможность профессионально расти, учиться и обсудить, что уже знаешь. Идейная, сплоченная, заряженная команда.

Присоединяйтесь к нашей команде и помогите создавать информационные технологии будущего!

Этапы подбора:
Оценка резюме - общение с HR - техническое собеседование c руководителем - принятие решения - оффер.