Data Engineer (Рекомендации)

Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.

Рекомендации - команда занимается построением хранилища данных, необходимого для обучения алгоритмов машинного обучения для решения задач рекомендательных систем, а так же поискового ранжирования и других исследовательских задач.

Вам предстоит:

• Делать пайплайны на Spark;
• участвовать в построении Lakehouse на Hadoop;
• извлекать, преобразовывать, загружать и обрабатывать данные, ETL/ELT (Python/Airflow);
• оптимизировать процессы поставки данных под бизнес требования;
• работать с большим разнообразием первоисточников данных (Kafka, Nats, другие БД, api).

Вы нам подходите, если:

• Имеете опыт программирования на Python (не менее 2-х лет);
• у вас есть уверенные знания SQL и опыт работы с базами данных и умеете оптимизировать запросы;
• имеет опыт работы с Apache Airflow, Hadoop (spark/yarn/hdfs/hive), Trino, Greenplum, Postgres;
• работали с высоко нагруженными системами и большим объёмом данных;
• понимаете концепции построения хранилищ данных (DWH).

Условия для сотрудников:

• Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
• Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
• Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
• Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
• Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
• Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.