Data Engineer

Обязанности:

• Поддержка и развитие аналитического контура, развернутого в Yandex облаке в т.ч.:
• мониторинг сервисов и инфраструктуры, контроль за выполнением SLA, решение возникающих проблем;
• управление GitLab (написание пайплайнов CI/CD);
• управление Airflow, MlFlow;
• управление интеграциями между облаком Яндекс и on-premise инфраструктурой банка.
• Поддержка и развитие хранилища данных для команды DataScience, построенного на облачном хранилище (S3), с обработкой данных в Apache Spark (PySpark).
• Создание инструментария для команды в составе DS и DE.

Требования:

• Опыт написания кода на Python. Опыт работы с библиотеками для анализа данных (pandas, NumPy).
• Опыт написания запросов SQL.
• Опыт написания пайплайнов CI/CD.
• Базовые навыки работы с Linux.
• Понимание базовых принципов построения сетей.

Технологический стек:

• Yandex Cloud, Python, S3, Spark (PySpark), Airflow, GitLab.
• Опыт работы со следующим инструментарием будет плюсом: Kafka, Terraform, Delta Lake, MLFlow.

Мы предлагаем:

• Официальную заработную плату дважды в месяц, полное соблюдение ТК РФ.

• Удаленный формат работы.

• ДМС, оплата детского сада. Наши сотрудники имеют возможность оформить льготные кредиты и ипотеку.

• Увлекательную корпоративную жизнь: конкурсы, спортивные мероприятия, и многое другое.

• Режим работы: пятидневную рабочую неделю с 08:30 до 17:30 (может корректироваться по согласованию с руководителем).