Lead DataMLOps (Рекламная платформа)

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя!

SberAds - команда в ИТ В2С экосистеме Сбера, мы создаем рекламную платформу на передовом стеке технологий. Размещение рекламы в интернете – это запросы для следующих лиц:

- запросы рекламодателя – увеличить прибыль или узнаваемость продаваемого продукта;

- запросы сайтов и приложений, размещающих рекламу – получить прибыль от продажи места на сайте;

- запросы пользователя – получать полезную неназойливую и релевантную рекламу.

Обязанности

Тебе предстоит:

• сопровождать проектную инфраструктуру работы с данными и машинного обучения (Managed S3 5PB, Spark-on-Kubernetes, Trino, Nessie, Datahub, Airflow, Jupyterhub, MLFlow)
• быть одним из драйверов развития архитектуры и инфраструктуры проекта
• обеспечивать целостность и развитие архитектуры DWH, а также выполнение основных технологических политик в части DWH
• участвовать в проектах по пилотированию технологий обработки данных
• быть лидером команды (+2 чел.).

Требования

• высшее образование
• опыт в аналогичной роли от 5 лет
• опыт управления командой от 1 года
• опыт в сопровождении кластеров больших данных на базе S3 или Hadoop от 1 PB
• знание принципов построения DWH и Data Lake
• глубокое понимание принципов работы и опыт в сопровождении Data Governance продуктов (Data Catalog, DQ, etc.)
• понимание принципов модели распределенных вычислений
• понимание подходов к организации разработки (CI/CD, DevOps), практический опыт работы с инструментами Gitlab, ArgoCD, Jenkins или аналогами
• понимание принципов работы протоколов безопасности (SSO, Kerberos) и основных методов и протоколов обмена данными в сети (REST, SOAP, gRPC и др.)
• практический опыт с облачными инструментами работы с данными, такими как Snowflake; Delta Lake; AWS EMR/Serverless EMR, Athena; Huawei Cloud MRS, DLI и аналоги.

Будет плюсом:

• опыт промышленной разработки Scala/Java/Python/С++/Rust
• опыт разработки data приложений и витрин данных с использованием инструментов Spark (SQL), Trino, Kafka, Hive, Datafusion и т.д.
• хорошие знания SQL, опыт работы с реляционными/аналитическими/MPP БД - Clickhouse/Vertica/Greenplum
• практический опыт построения корпоративного или проектного DWH.

Условия

• офис метро Маяковская (Оружейный переулок)
• гибридный формат работы
• конкурентная компенсация (оклад и премии по результатам деятельности)
• ДМС c первого рабочего дня, страхование от несчастных случаев и тяжелых заболеваний
• материальная помощь и социальная поддержка, корпоративная пенсионная программа
• дисконт-программы от компаний партнеров
• бесплатный фитнес на территории работодателя
• внешнее и внутреннее профессиональное обучение: семинары, тренинги, конференции, корпоративная библиотека.