Data Engineer Python/Spark

Ищем Разработчика Python на крупный банковский проект - миграция с DataLake/Hadoop на S3. Разработка/доработка витрин

Твои задачи:

• Переносить с HQL логику на PySpark
• Разрабатывать/дорабатывать витрины, принимать участие в тестировании, изменении алгоритма расчета показателей
• Проводить рефакторинг кода

• Знание SQL, Python, Hadoop (spark) - уровень выше среднего, умение оптимизировать код
• Знание инструментов обработки и трансформации данных (Spark, Apache Airflow)
• Знание теории баз данных

Будет плюсом:

• Знание основ банковской деятельности (продукты, риски)
• Знание Scala

• Поездки на конференции и тренинги за счет компании, внутренние семинары, внутренние митапы, мы очень любим учиться новому
• Технику для комфортной работы
• Сессия профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
• Сообщества по интересам: Лига Спорта, Лига Экспертов, Cyber Лига , а также возможность организовать свое сообщество и получить поддержку от компании
• Корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды