Data Engineer

Обязанности:

• Управление командой DE. Кросс-функциональное взаимодействие с командой DS для решения задач бизнеса.
• Сопровождение и развитие S3-центричного аналитического хранилища данных для функции DataScience банка.
• Проектирование модели данных и ETL пайплайнов.
• Обеспечение контроля за качеством данных и SLA их поставки в хранилище.
• Взаимодействие с другими командами банка для организации поставки необходимых данных в хранилище.
• Аналитический контур развернут полностью в облаке Яндекс, соответственно все вышеперечисленное строится на базе предоставляемых облаком сервисов.

Требования:

• Понимание жизненного цикла моделей машинного обучения.
• Насмотренность практик работы с данными в контексте машинного обучения, умение выбрать эффективное техническое решение.
• Опыт управления небольшой командой, декомпозиция и постановка задач, контроль выполнения, code review.
• Опыт работы со следующим инструментарием: Yandex Cloud, Airflow, GitLab, Terraform, Spark (PySpark), S3, Delta Lake, MLFlow, Kafka.

Технологический стек:

• Yandex Cloud, Airflow, GitLab, Terraform, Spark (PySpark), S3, Delta Lake, Python, MLFlow, Kafka.

Мы предлагаем:

• Официальную заработную плату дважды в месяц, полное соблюдение ТК РФ.

• Удаленный формат работы.

• ДМС, оплата детского сада. Наши сотрудники имеют возможность оформить льготные кредиты и ипотеку.

• Увлекательную корпоративную жизнь: конкурсы, спортивные мероприятия, и многое другое.

• Режим работы: пятидневную рабочую неделю с 08:30 до 17:30 (может корректироваться по согласованию с руководителем).