Мы ищем Middle Data Engineer для реализации амбициозного проекта перехода на новую платформу кампейнига Сбера.
Наша задача – обеспечить перевод процессов на современный стек технологий, разработать решения по обработке и доставке данных, создать с 0 процессы загрузки потоков данных для задач аналитики и развить MLOps практику в команде для вывода DS моделей в пром.
Что нужно делать:
- Разрабатывать процессы сборки, обработки и поставки данных в Hadoop на Spark
- Развивать архитектуру проекта и адаптировать ее под новые требования
- Собирать и анализировать требования бизнеса по получению новых данных, оценивать наличие и качество данных
- Проводить системное, функциональное и интеграционное тестирование
- Разрабатывать и внедрять эффективные методики контроля качества данных
- Участвовать в code review и создавать инструменты для упрощения своей работы
Мы ждем, что ты:
- Имеешь опыт разработки на Spark (желательно Spark/Scala)
- Знаком с инструментами экосистемы Hadoop: Hive, Spark
- Хорошие знания SQL, опыт оптимизации запросов
- Общий стаж работы не менее 5 лет
- Высшее техническое образование
- Будешь проактивен в работе с внешними и внутренними контрагентами
Ты получишь знания и опыт работы со стеком BigData-разработки и аналитики:
- Scala, Apache Spark
- Apache Kafka, Apache Hadoop (HDFS, HBase, Hive), Apache Airflow, Python
- Инструменты DevOps
- GreenPlum
Мы предлагаем:
- Deep diving в предметную область, много разработки по задачам имеющим прямой эффект на бизнес
- Возможность привносить новые идеи и нестандартные решения
- Сообщество D-people– поддержка, развитие и возможность учиться у профессионалов
- Достойную оплату труда
- ДМС, сниженные ставки по кредитованию, программы лояльности для сотрудников
- Современный офис рядом с метро Кутузовская, бесплатный фитнес в офисе
- Возможность реализовать амбициозные проекты и инновационные технологии в одной из крупнейших компаний российского рынка банковских услуг
- Дружная команда профессионалов, поддерживающих стремление сотрудников развиваться и расти профессионально
- Конкурентоспособная заработная плата и прозрачная система мотивации
- Гибкий график работы и возможность удаленной работы
- Доступ к современным технологиям и инструментам разработки
- Регулярные образовательные мероприятия и конференции внутри компании и на внешних площадках
- Ежегодный пересмотр зарплаты, годовая премия
- Корпоративный спортзал и зоны отдыха
- Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- Ипотека для сотрудников выгоднее до 7%
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
вознаграждение за рекомендацию друзей в команду Сбера.
Приходи к нам, расти вместе с нами!