Ведущий инженер больших данных DevOps

Лента — федеральный продуктовый ритейлер России.

Сейчас в поиске Ведущего инженера больших данных (DevOps) в команду домена Данные и Аналитика, для обеспечения работы инфраструктуры и извлечения ценности из большого объема данных.

• Сопровождение и развитие кластера Cloudera CDP 7.x (Cloudera Manager, HDFS, YARN, Hive, Spark, Ranger, Hue);
• Сопровождение и развитие lakehouse платформы на Kubernetes (Minio S3, Spark, Trino, Impala, StarRocks, Apache Iceberg, Ranger, Jupyter Hub, Hue);
• Оптимизация производительности компонентов платформы;
• Развертывание и сопровождение мониторинга и логирования на базе VictoriaMetrics, VictoriaLogs, Vector Автоматизация развертывания и CI/CD; Тесное сотрудничество с Data инженерами, чтобы обеспечить стабильное развертывание, версионирование и масштабирование;
• Участие в проектировании архитектуры платформы данных

• Опыт работы в роли DevOps/Platform Engineer, Cloudera CDP 7, Kubernetes; Навыки работы с инструментами Infrastructure as Code;
• Опыт настройки метрик, алертов, дашбордов и логов (Grafana, VictoriaMetrics/Prometheus, VictoriaLogs/Loki, Vector/Fluent Bit/Promtail и пр.); Опыт настройки Spark, HDFS, YARN, Ranger, Hive и других компонент;
• Умение писать CI/CD пайплайны (GitLab CI, ArgoCD).
• Опыт работы с планировщиками (Airflow, Prefect);
• Продвинутый уровень владения Linux;
• Уверенный Bash/Python;

Будет плюсом: Опыт работы с Kafka;

• Опыт работы с облачными платформами (GCP, AWS, Yandex Cloud);
• Навыки работы с хранилищами данных (ClickHouse, Greenplum, PostgreSQL, DWH-архитектуры);
• Знание подходов Data Mesh / Data Lakehouse

• активное участие в реализации значимых проектов Домена Данные и Аналитика в одной из лидирующих и успешно развивающихся розничных сетей;
• работа в позитивной команде профессионалов, занимающейся созданием отчетности для анализа эффективности коммерческой деятельности компании и оценки возможностей развития;
• активное взаимодействие с бизнес командой Коммерческой службы в поиске новых решений и внедрении изменений в процессы;
• четко выстроенный рабочий процесс взаимодействия внутри команды;
• оформление в штат аккредитованной IT-компании с первого рабочего дня;
• годовое премирование на основании результатов;
• компенсационный пакет - ДМС со стоматологией;
• официальную оплату труда;
• удаленный формат работы;
• корпоративные скидки