Разработчик hadoop

О проекте:

Прикладная аналитическая платформа Сбер B2C — это решение, позволяющее создавать аналитические витрины на DataLake по различным направлениям бизнеса.
Синергия в продуктах и сервисах на основе клиентских путей, каждодневное предвосхищение потребностей клиента и формирование целостного предложения для сегментов от Сбера как экосистемы — ключевая задача нашей команды.
Стек технологий: Hadoop (Hive, Spark), Greenplum, SQL, Bitbucket, Jira.

Обязанности:

• Разрабатывать функциональные и нефункциональные требования;
• Заниматься построением прототипов витрин и согласованием с заказчиком;
• Сопровождать техническую документацию;
• Управлять изменениями в требованиях части функционала;
• Постоянно взаимодействовать с техническими специалистами и менеджерами продукта по вопросам реализации.

• Опыт работы с указанными инструментами по направлению Hadoop: HDFS, MapReduce, Yarn, Hadoop Common, Apache Tez, Apache Solr, Apache Pig, Sqoop и/или Flume, Apache Hive и/или Spark SQL, Apache Kafka, Greenplum;
• Навыки работы с реляционными БД (Oracle DB и/или PostgreSQL и/или MySQL);
• Опыт оптимизации производительности SQL запросов (план запроса, индексы, дистрибуция, full scan);
• Навыки разработки API (REST);
• Опыт участия в оптимизации процессов сбора, первичная обработка и хранение большого объема данных из различных типов источников и т.д.

• Оформление по трудовому договору;
• Офисный формат работы в г. Санкт-Петербург, Уральская, д.1
• Медицинское страхование с первого дня работы, включая стоматологию;
• Предоставление необходимой техники для работы;
• Дополнительные выплаты и поддержка от нас в важные моменты вашей жизни;
• Корпоративные скидки у наших партнеров (включая фитнес, изучение иностранных языков, курсы от Яндекс Практикум и многое другое);
• Корпоративная библиотека с доступом к книгам от Литрес.