Data Engineer

LIAN — системный интегратор с фокусом в аналитике и управлении данными.

Мы работаем в трех направлениях:

1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.

2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.

3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков - крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.

Сейчас мы приглашаем опытного Data Engineer'а или ETL/SQL разработчика, который умеет работать на Flink, с dbt и Trino! Будет большой плюс если есть опыт работы с SAP!

• Разработка масштабируемой системы, заменяющей функциональность концентратора данных SAP CAR.

• Проектирование архитектуры системы для работы с потоковыми данными в режиме реального времени.

• Обработка и трансформация данных из различных источников для передачи в системы-потребители.

• Реализация бизнес-сценариев и триггеров для обработки данных.

• Обязательный опыт работы с Java

• Способность писать эффективный, оптимизированный и понятный SQL-код.

• Опыт работы с распределенными системами: знание принципиальных отличий OLAP от OLTP, понимание, как выполняемый код работает в распределенной среде.
• Опыт работы с Apache Airflow для планирования и мониторинга пайплайнов.
• Опыт работы с dbt (Data Build Tool) для управления трансформациями.

• Опыт работы с Flink, Trino и S3.

• Знание Spark Core, Streaming и SQL (индексы, функции, написание запросов).

• Умение работать в команде и эффективно решать поставленные задачи

• Форма трудоустройства на ваш выбор: договору оказания услуг с ИП или самозанятым
• Участие в интересных масштабных проектах с Заказчиками федерального и международного уровня
• Работа с передовыми технологиями
• Возможности профессионального и карьерного роста
• Полностью удаленная работа
• Регулярная и достойная оплата труда

В нашей команде работают профессионалы с разносторонним опытом. Здесь ты найдешь профессиональные задачи и новые вызовы, сможешь реализовать свой потенциал.
Хочешь стать частью нашей команды? Мы ждем твоего отклика и свяжемся с тобой !