Москва, 2-й Южнопортовый проезд, 20Ас4
Метро: КожуховскаяВ свою команду мы ищем Data Engineer (DE), который будет заниматься:
Внедрением Каталога Данных.
Запуском проверок качества данных (Data Quality).
Контролем качества загружаемых данных из систем-источников.
Оптимизацией, рефакторингом и поддержкой существующих решений.
Обязанности:
Развертывание и интеграция Каталога Данных (готовое решение или open-source).
Анализ требований бизнес-пользователей к контролю качества данных в отчётности.
Разработка проверок качества данных совместно с Data Steward и их внедрение в системы-источники, DWH и пайплайны.
Настройка и автоматизация мониторинга проверок качества данных с системой алертинга.
Работа с потоками данных через ETL/ELT-решения.
Внедрение автоматических сверок данных из разных систем-источников.
Создание и поддержка витрин данных.
Разработка и оптимизация DWH в рамках политики Data Governance.
Организация и проведение приемо-сдаточных испытаний.
Разбор инцидентов, связанных с качеством данных.
Требования:
Опыт работы Data Engineer от 2 лет (опыт в банковском секторе — преимущество).
Опыт работы с каталогом данных и бизнес-глоссарием — преимущество.
Понимание концепции Data Quality — преимущество.
Знание принципов работы СУБД и построения современных хранилищ данных.
Владение Python и SQL (включая оконные функции, индексы), опыт работы с MS SQL, Oracle, PostgreSQL, файловыми хранилищами.
Опыт настройки мониторинга (Grafana, Zabbix, Prometheus).
Навыки создания дашбордов в BI-системах (Apache Superset, Power BI, Qlik Sense).
Понимание бизнес-процессов банка и назначения банковских информационных систем.
Условия: