Data Engineer (Озеро Данных)

РСХБ-Интех - молодая, драйвовая IT-компания и digital-сердце Россельхозбанка. Мы разрабатываем новые банковские продукты и улучшаем текущие. Наши сервисы помогают миллионам клиентов удалённо пользоваться банковскими услугами, оформлять карты, брать кредиты и инвестировать. Мы даём возможность агропредпринимателям продавать и покупать сельскохозяйственные товары онлайн, а малому и крупному бизнесу — вести финансовые дела в надёжном и удобном онлайн-пространстве.

ЦК Озера данных и интеграционных решений - это более 30 человек, в т.ч. cистемные аналитики, разработчики Озера данных и ETL Команда в поисках системного аналитика на проект по автоматизации отчетности Операционной дирекции на данных Озера данных (ArenaData Hadoop).

Проект: Импортозамещение оперативного хранилища данных с применением концепции LakeHouse.

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

Создание ядра (загрузка, мониторинг и реконсиляция данных) для автоматизации работы оперативного хранилища данных.

Стек: Apache Hadoop, Apache Iceberg, Apache Spark, Apache Impala, Trino.

МЫ ЖДЕМ ОТ ВАС:

• Понимание SQL и NoSQL баз данных,
• уверенное владение SQL синтаксисом
• Хорошее знание и практические навыки в одном из языков программирования (Python, Java, Scala)
• Понимание принципов работы распределенных файловых систем (Apache HDFS, Minio, Apache Ozone), а так же опыт работы с одним из них как с хранилищем NoSQL базы данных
• Опыт работы с Apache Hive или c другим SQL движком, а так же табличными форматами, в частности Apache Iceberg
• Практический опыт работы с Apache Spark и понимание принципов его работы.

БУДЕТ ПЛЮСОМ:

Опыт с Trino, Apache Impala, Apache Airflow.

ЧТО МЫ ПРЕДЛАГАЕМ:

• Амбициозные, интересные задачи с возможностью проявить себя, возможность профессионального развития и карьерного роста
• Выбор направления развития, как по стеку, так и функциональным областям
• Ориентируемся на финансовые пожелания кандидата в зависимости от навыков и опыта
• Команда экспертов, сплочённый коллектив единомышленников, передача знаний
• Возможность выбрать время начала и окончания работы, а также возможность гибридного графика работы (офис/удаленка)
• Оформление согласно ТК РФ
• Полис ДМС после испытательного срока
• Комфортный, новый офис в 5 мин от ст. м. Тёплый стан.