Data Engineer

LIAN — системный интегратор с фокусом в аналитике и управлении данными.

Мы работаем в трех направлениях:

1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.

2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.

3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков - крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.

Сейчас мы приглашаем Data-инженера к нам на проект.

Основные задачи:
- Проектирование, реализация и сопровождение потоков данных в Apache NiFi.
- Разработка и оптимизация сложных SQL-запросов, процедур и представлений для аналитических задач.
- Реализация ETL/ELT-пайплайнов, трансформаций и валидации данных.
- Оптимизация производительности баз данных и запросов (индексы, партиционирование, план выполнения).
- Создание мониторинга, алертинга и логирования процессов передачи данных.
- Взаимодействие с аналитиками, Data Scientists и командами разработки для формирования корректных бизнес-метрик.
- Документирование архитектуры данных и процедур сопровождения.
- Участие в расследовании инцидентов и быстром восстановлении процессов при сбоях.

Требования:
- Опыт работы с Apache NiFi (практическая реализация потоков, шаблоны, процессоры).
- Глубокие знания SQL: написание и оптимизация сложных запросов, оконные функции, агрегации, JOIN-ы, понимание планов выполнения.
- Опыт работы с реляционными СУБД (PostgreSQL, MySQL, Oracle, MS SQL или аналоги).
- Умение анализировать и устранять узкие места производительности.
- Базовые навыки работы в Linux, опыт автоматизации задач (скрипты на Bash/Python).
- Умение работать в команде, ответственность и внимание к качеству данных.

Что мы предлагаем:
-Трудоустройство по ИП/СЗ.
-Работаем удаленно на территории РФ.
-Работа с современными и передовыми технологиями.
-Широкие возможности для профессионального и карьерного роста.