MLOps / Data-инженер (F&R)

Привет!

Мы — команда Магнит, крупнейшего офлайн-ритейлера в России.
У нас — более 26 000 магазинов, и наша задача — чтобы в каждом из них был нужный товар в нужное время. Для этого мы оптимизируем цепочки поставок, учитывая возможности логистики, распределительных центров и поставщиков.

F&R — крупный стратегический проект по оптимизации цепочек поставок: от прогноза спроса до пополнения конкретного магазина.

Мы занимаемся разработкой и сопровождением модуля прогнозирования спроса. Уже реализован сервис для прогноза промо, сейчас разрабатываем ML-платформу для поддержки всего цикла ML: от данных до продакшн-моделей.

Задачи

• Разработка, оптимизация и рефакторинг spark-приложений
• Проектирование и поддержка пайплайнов и их оркестрации (Airflow, CI/CD)
• Разработка архитектуры и оптимизация системы прогнозирования спроса
• Разработка микросервисов и унифицированных решений

Стек технологий

Python, Spark, Airflow, Git, CI/CD, Docker, k8s, kubeflow

Ожидания от кандидата

• Глубокие знания Apache Spark (разработка Pyspark приложений, оптимизация, работа с большими данными)
• Опыт оркестрации сервисов с использованием Airflow
• Опыт разработки CI - пайплайнов
• Знакомство с основными принципами Kubernetes

Что предлагаем:

— официальное оформление в аккредитованной IT-компании
— формат работы на выбор: удалёнка, гибрид или офис (Москва/СПБ/Краснодар/Иннополис)
— прозрачные процессы, минимум бюрократии
— обучение за счёт компании, участие в конференциях
— ДМС со стоматологией + льготы для семьи
— корпоративные скидки и бонусы от партнёров