Solution Architect DWH

В компанию Тера Интегро, входящую в состав Группы Аренадата, открыта позиция Архитектора решений в связи с появлением нового проекта миграции аналитических платформ заказчика на продукты Arenadata.

Что нужно делать:

• Проектирование системы, разработка и согласование архитектурных документов, разработка ETL-фреймворка и оркестратора.
• Проектирование и разработка механизмов репликации данных между ADB, S3, ADQM.
• Разработка репликации слоев данных. Миграция расчета слоя.
• Разработка механизмов внутри-системных проверок: db constraints, типов данных, технических- и бизнес-проверок, витрин, дэшбордов.
• Разработка механизмов кросс-системных сверок.
• Проектирование и разработка механизмов загрузки истории.
• Проектирование и разработка механизмов мониторинга тракта загрузки данных.
• Проектирование и разработка механизмов мониторинга ADB и ADQM.
• Загрузка истории, запуск инкрементального расчета, кросс-системные сверки и исправление ошибок по слоям.
• Тестирование интеграций и проведение ПСИ с потребителями. Подготовка документации. Разработка ПМИ, проведение ПСИ.
• Лидирование команды разработчиков. Менторинг и контроль выполнения задач.

Мы ждём, что вы:

• Опыт архитектурного проектирования хранилищ и озер данных в крупных компаниях.
• Опыт проектирования миграций сложных корпоративных аналитических платформ на отечественные продукты (платформа, оркестрация, слои данных, контроль качества данных и др). Опыт миграций (импортозамещения) с продуктов западных вендоров на Arenadata/OSS.
• Опыт написания sql скриптов, хранимых процедур Greenplum/PostgreSQL.
• Понимание особенностей ADB/Greenplum. Опыт работ с ADQM/Clickhouse.
• Опыт разработки и проектирования ETL/ELT процессов.
• Опыт оптимизаций запросов.