Описание вакансии
Мы строим платформу данных нового поколения с нуля - и ищем опытного Data Engineer, который станет ключевым участником этого процесса. У нас амбициозные цели: обеспечить надежную и масштабируемую архитектуру, построить лучшие в отрасли практики работы с данными, и внедрить современный DataOps-подход.
Если вы готовы влиять на архитектуру и процессы - присоединяйтесь.
Обязанности:
- Участвовать в проектировании и создании масштабируемой платформы данных с нуля.
- Разрабатывать надежное и высокопроизводительное хранилище данных на базе ClickHouse.
- Строить гибкие и отказоустойчивые ETL/ELT пайплайны.
- Выстраивать процессы Data Quality и обеспечивать Data Observability.
- Активно развивать и внедрять DataOps-подходы.
- Проводить менторство, код-ревью, участвовать в техническом развитии команды.
- Сотрудничать с системными аналитиками, разработчиками, DevOps-инженерами, принимая участие в архитектурных решениях
Требования:
- 5+ лет опыта в области Data Engineering.
- Экспертиза в ClickHouse (глубокое понимание архитектуры, шардинг, репликация и оптимизация).
- Отличное знание SQL, Python, опыт написания production-ready кода.
- Практический опыт работы с dbt, Kafka, Kafka Connect, Debezium.
- Уверенные навыки работы с Airflow или аналогами.
- Опыт работы с CI/CD.
- Знание и практическое применение принципов Data Observability.
- Понимание DataOps-процессов.
- Понимание методологий проектирования хранилищ данных.
- Отличные навыки коммуникации и умение работать в команде.
- Будет плюсом опыт работы с Docker, Kubernetes.
Условия:
- Гибкий формат работы: удаленно или в современном офисе в Алматы.
- Работа с современным стеком и возможность внедрять лучшие практики.
- Работа с миллионной аудиторией пользователей и большим разнообразием данных.
- Возможность внедрять лучшие индустриальные практики и видеть реальный результат своей работы.