Tech Lead / Senior Data Engineer

Описание вакансии

О проекте

SAUDATA - аналитическая система, обрабатывающая фискальные данные от ОФД, формирующая классификации товаров, сегментации торговых точек и агрегированную аналитику по каналам продаж. Система включает полный пайплайн: от приёма и очистки данных до построения ML-моделей и визуализации аналитики. Сейчас команда развивает продукт в сторону масштабируемого решения для малого и среднего бизнеса.

Ваши задачи

Провести аудит текущей архитектуры и пайплайнов (ETL, ML, визуализация)
Проектирование и реализация стратегии автоматизации категоризации, геоаналитики и определения каналов продаж
Разработать подходы с применением ML/AI (в том числе LLM или rule-based)
Упростить и формализовать процесс работы с данными: от загрузки до BI
Настроить стандарты разработки, CI/CD, документации и мониторинга
Сопровождать интеграцию новых источников данных (ОФД)
Участвовать в сборе и управлении технической командой

Что важно

Опыт от 5 лет в роли Data Engineer / ML Engineer
Уверенное знание Apache Spark, HDFS, Airflow, SQL
Опыт работы с BI-инфраструктурой и большим объёмом транзакционных данных
Владение Python, опыт использования ML-фреймворков (LightGBM, sklearn и др.)
Понимание архитектуры хранения данных (Iceberg, Hive, MPP-базы)
Опыт проектирования ETL и построения устойчивой инфраструктуры
Навыки руководства или координации технической команды

Плюсом будет

Опыт работы с транзакционными данными
Понимание BI-инструментов (Power BI, Tableau, Qlik)
Знание казахстанского или центральноазиатского рынка ритейла
Опыт работы с геоданными и их нормализацией

Мы предлагаем

Работа с реальными данными на b2b-рынке (поток до 20 млн записей в сутки)
Гибкий график, сильная команда
Возможность собрать свою техническую команду
Прямая вовлечённость в принятие продуктовых и архитектурных решений
Долгосрочная перспектива участия в масштабируемой B2B-платформе

Будем признательны, если в сопроводительном письме вы кратко опишете один из своих проектов, близкий по духу или масштабу нашему - это поможет быстрее понять, насколько мы подходим друг другу