Data Engineer (Кроссбордер)

Кроссбордер — это команда, развивающая международное направление в ВБ. Основными задачами команды являются доработка существующего и разработка нового функционала Wildberries под требования новых стран, продавцов и покупателей в этих странах. Мы работаем над финтех проектами, локализацией платформы и инструментов WB, международной доставкой товаров и т.д.

Вам предстоит:

• Настраивать ETL процессы между разными слоями данных;
• работать с данными от разных источников (kafka, hdfs, clickhouse);
• производить миграцию данных;
• делать расширение мониторинга, алертинга и контроля качества данных;

• настраивать процессы Reverse ETL для нужд команды бэкенда.

Вы нам подходите, если:

• Владеете базовыми знания python;
• имеете уверенное знание sql;
• имеете опыт работы c Airflow;
• понимаете принципы работы с колоночными БД;
• имеете базовое понимание data layer архитектуры;
• у вас есть опыт работы с Hadoop, Spark, Clickhouse.