Big Data engineer

LIAN — системный интегратор с фокусом в аналитике и управлении данными.

Мы работаем в трех направлениях:

1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.

2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.

3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков -крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.

Обязанности:
- Участвовать в построении одного из крупнейших в России корпоративных хранилищ данных (RDBMS + Hadoop)
- Внедрять новые продукты и технологии, связанные с интеграционными решениями
- Разрабатывать интеграционные решения для корпоративного хранилища и механизмы интеграции данных внешних систем в единое информационное пространство
- Участвовать в комплексном тестировании интеграционных решений
- Участвовать в миграции хранилища с Oracle Exadata на Greenplum
- Разрабатывать и развивать слой данных для BI-систем на базе ClickHouse​​​​​​​

Требования:
- Высшее образование в области ИТ технологий
- Знание принципов проектирования и разработки хранилищ данных и ETL-процессов
- Опыт работы с большими объемами данных
- Понимание архитектуры Hadoop и опыт работы с технологиями Hadoop (Hive, Sqoop, Impala)
- Опыт проектирования и разработки интеграционных решений для промышленных СУБД (Oracle Exadata, Greenplum) от 5 лет с использованием платформы Oracle Data Integrator
- Опыт проектирования распределенных высоконагруженных систем
- Понимание подходов тестирования ETL
- Знание принципов проектирования витрин данных BI
- Опыт планирования и оценки сроков работ
- Знание устройства ClickHouse, движков и индексов
- Опыт разработки и оптимизации решений в ClickHouse
- Опыт проектирования и разработки решений на базе ClickHouse в связке с промышленными СУБД (Oracle Exadata, Greenplum) и Hadoop
- Знание SQL и опыт разработки (pg/SQL, PL/SQL)
- Опыт миграции хранилища данных с Oracle Exadata на Greenplum
- Сертификаты по разработке в Greenplum
- Сертификаты по разработке в ClickHouse​​​​​​​​​​​​​​

Условия:
- Клиент: NDA​​​​​​​
- Длительность: более года
- Занятость: полная
- Локация: РФ/РБ
- Рабочий график: по МСК
- Формат работы: удаленно
- Проекты: участие в масштабных и интересных проектах, работа в классной молодой команде
- Формат контракта: аутстаффинг, оформление по ИП/СЗ

Если вы готовы стать частью динамично развивающегося проекта, отправляйте свои резюме !