Data Engineer

Centras Group – группа инновационных компаний, работающих в финансовой сфере.
В состав группы входят: «Сентрас Капитал» – головная компания Группы Сентрас; «Сентрас Секьюритиз» – брокерская компания; «Сентрас Иншуранс», «Коммеск-Өмiр» – страховые компании; SOS Medical Assistance – медицинские центры; Popeyes – сеть ресторанов быстрого обслуживания; Продуктовая команда -Alpha; Команда разработчиков - iHub.
Сейчас мы строим DataHub — централизованную платформу управления данными экосистемы Centras Group. Это «сердце» нашей IT-инфраструктуры, связующее звено между 20+ источниками (Web, Mobile, CRM, ERP) и потребителями данных (CDP, MDM, BI).

Чем предстоит заниматься:

• Архитектура и проектирование: Спроектировать структуру хранилища данных (DWH) и архитектуру баз данных DataHub.
• ETL и Интеграция: Настройка пайплайнов сбора данных из разнородных источников (Logs API, CRM, ERP, внешние API). Разработка и поддержка DAG-ов в Apache Airflow.
• Identity Resolution: Реализация алгоритмов склейки профилей (связка centr_cid, user_id, contact_hash) для обеспечения кросс-платформенного трекинга.
• Качество данных (Data Quality): Внедрение процессов очистки, дедупликации и обогащения данных перед их передачей в MDM и CDP системы.
• Аналитическая база: Подготовка витрин данных для BI-систем и создание фундамента для будущей ML-аналитики.
• Взаимодействие с командой: Постановка технических заданий бэкенд-разработчикам (например, по прокидыванию ID в события) и тесное общение с бизнес-заказчиками.

Наш стек (текущий и планируемый):

• Orchestration: Apache Airflow.
• DB/DWH: PostgreSQL, ClickHouse.
• Languages: Python (pandas, pyspark, requests), SQL.
• Tracking & Sources: Yandex Metrica (Logs API), GA4, внутренние CRM/ERP системы.

Мы ждем от вас:

• Сильный SQL: Умение писать сложные запросы, проектировать схемы БД (Star/Snowflake schema), понимание индексов и оптимизации производительности.
• Уверенный Python: Опыт написания ETL-скриптов, работа с API, парсинг данных (JSON/XML).
• Опыт с оркестраторами: Понимание принципов работы Apache Airflow (или Prefect/Dagster).
• Понимание природы веб-данных: Вы знаете, как работают cookies, user-agent, client_id, сессии и как связать веб-трекинг с бэкенд-событиями.
• Архитектурное мышление: Способность выстроить систему с чистого листа, а не просто поддерживать существующую.
• Самостоятельность: Готовность драйвить процесс — от формулировки гипотезы "как нам это склеить" до реализации в коде.
• Гибкость и командный дух: Учитывая небольшой размер и средний возраст в нашей команды (21-22 года), крайне важны открытость к обратной связи, умение быстро адаптироваться и активная коммуникация для совместного поиска лучших решений.

Условия:

• Оформление согласно трудовому законодательству РК
• Скидки на медицинское страхование в собственной клинике
• Обучение и профессиональное развитие в iHub
• Участие в конференциях (внутренние и внешние)
• Корпоративная культура: тимбилдинги (летние и зимние), различные спортивные мероприятия, интеллектуальные игры (Quizы)
• Предоставление выходного дня (адм. дни - в зависимости от стажа работы в компании) без удержания заработной платы
• Отпуск 28 календарных дней
• Начисление баллов – Сенткоинов, возможность заработать внутреннюю валюту и потратить её на разные бонусы в компании.