Data Engineer в MAX

VK

Data Engineer в MAX

Метро: Аэропорт

Описание вакансии

Создаём единую коммуникационную платформу, которая станет универсальным решением для всех платформ группы по общению пользователей.

Задачи

  • Проектировать, реализовывать и оптимизировать сложные ETL-процессы (в том числе разработка DAG для автоматизации)
  • Участвовать в проработке и пилотировании нового: Data Quality, развитие собственного ETL-фреймворка, тесные интеграции с аналитическими инструментами
  • Работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до принятия решений на данных
  • Извлекать из исходных данных ценную информацию и скрупулёзно обрабатывать её для последующего анализа
  • Реализовывать стабильный расчёт бизнес-метрик вместе с командой аналитиков
  • Поддерживать и модифицировать созданные решения, обеспечивать доступность сервиса и корректность данных для принятия решени​й

Требования

  • Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов
  • Умеете проектировать DWH: слои, модели хранения данных, процессы ETL
  • Хорошо понимаете принципы работы распределённых систем Hadoop или YTsaurus, ClickHouse
  • Использовали Airflow, Luigi или другой оркестратор
  • Умеете выбирать технологии для решения конкретных задач
  • Понимаете принципы работы инструментов мониторинга и способны настраивать алерты для отслеживания состояния ETL-процессов
  • Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными
  • Эффективно общаетесь с людьми, находите общий язык с разными специалистами
Посмотреть контакты работодателя

Адрес

Похожие вакансии

Faberlic

Data Engineer

Faberlic

Полный день
  • Москва

  • Не указана

Рекомендуем
ИЦ АЙ-ТЕКО

Data Engineer

ИЦ АЙ-ТЕКО

Полный день
  • Москва

  • Не указана

Рекомендуем
Сбер Бизнес Софт
Полный день
  • Москва

  • Не указана

Рекомендуем
СБЕР
Полный день
  • Москва

  • Не указана

Атом

Data Engineer

Атом

Полный день
  • Москва

  • Не указана

СБЕР
Полный день
  • Москва

  • Не указана

Юрент

Data Engineer

Юрент

Удаленная работа
  • Москва

  • Не указана

Леста Игры
Полный день
  • Москва

  • Не указана

ИЦ АЙ-ТЕКО

Data Engineer

ИЦ АЙ-ТЕКО

Полный день
  • Москва

  • Не указана

TradingView
Полный день
  • Москва

  • Не указана

Эксперт РА
Полный день
  • Москва

  • Не указана

ТрансЛом
Удаленная работа
  • Москва

  • Не указана

Navio (ООО Автотех)

Data Engineer в команду Perception

Navio (ООО Автотех)

Полный день
  • Москва

  • Не указана

Дата Дженерейшн

Data Engineer

Дата Дженерейшн

Удаленная работа
  • Москва

  • до 250000 RUR

SSP SOFT

Data Engineer

SSP SOFT

Удаленная работа
  • Москва

  • до 250000 RUR

Flowwow
Удаленная работа
  • Москва

  • до 250000 RUR

STARTRIBE LTD
Полный день
  • Москва

  • до 250000 RUR

СБЕР

Data engineer

СБЕР

Полный день
  • Москва

  • до 250000 RUR

Медиалогия

Data Engineer (Hadoop)

Медиалогия

Удаленная работа
  • Москва

  • до 250000 RUR

Марс

Data Engineer

Марс

Полный день
  • Москва

  • до 250000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию