Data Engineer

Компания #WONE IT — это компания, которая сочетает в себе любовь к самым перспективным и интересным технологиям мира и уверенность, что эти технологии должны нести лучшие из лучших : )

Наша команда – страстные фанаты и профессионалы своего дела. Непрерывное обучение и развитие являются частью нашего корпоративного ДНК. Мы сосредоточены на качестве поддержки наших клиентов и на реализации новых проектов, в результате - множество интересных и нестандартных задач и широкое поле возможностей для проявления себя!

Основные задачи:

• Проектирование и разработка новых ETL/ELT пайплайнов: от источников (S3, Postgres, Excel) до витрин в ClickHouse
• Интеграция и обработка сырых данных (паркет-файлы на S3, базы Postgres, Excel-файлы)
• Разработка и поддержка DAG-ов в Airflow
• Загрузка и агрегация данных в Greenplum, построение витрин в ClickHouse
• Восстановление и развитие бизнес-логики существующих Qliksense-отчетов на новой платформе совместно с командой аналитиков
• Документирование процессов и технических решений

Наши ожидания:

• Опыт построения ETL/ELT-процессов от источника до витрины
• Хорошее знание SQL, опыт работы с Greenplum и ClickHouse
• Навыки работы с Airflow, паркетом/S3, интеграцией Excel/CSV-файлов
• Понимание принципов построения Data Lake, Data Warehouse

Будет плюсом:

• Знание Python для создания кастомных операторов Airflow
• Навыки интеграции данных из разных источников (API, файлы, БД)
• Умение читать и переносить бизнес-логику из BI-отчетов (например, Qliksense) в пайплайны

Мы предлагаем:

Работу в аккредитованной IT компании.

• полностью белую заработную плату (оклад обсуждается с успешными кандидатами)
• гибридный или полностью удаленный график работы
• программу ДМС
• соблюдение всех норм ТК РФ
• предоставление ноутбука
• возможность обучения и развития внутри компании
• корпоративный английский язык
• перспективу профессионального, карьерного и финансового роста
• дружную, креативную, успешную команду профессионалов