Data Engineer (Hadoop)

Лига в поисках Data Engineer на проект крупного российского банка (ТОП-10). Проект с концепцией перехода на общие банковские справочники и избавление от локальных справочников.

Твои задачи:

• Проектировать и разрабатывать аналитические витрины данных на базе СУБД Hadoop и выводить в промышленную эксплуатацию
• Разрабатывать ETL-процессы по преобразованию и загрузке данных
• Предоставлять экспертную поддержку внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных
• Создавать инструменты для автоматизации рутинных задач, связанных с обработкой данных
• Создавать прототипы логики сборки витрины на SQL и Spark
• Проверять качество данных в источниках и бизнес-витринах

• Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов)
• Опыт работы с Hadoop, Greenplum
• Понимание специфики работы ETL инструментов

• Возможность работы в удаленном формате
• Сессия профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
• Сообщества по интересам, а также возможность организовать свое сообщество и получить поддержку от компании
• Корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды