Data Engineer

BELL INTEGRATOR – крупный системный интегратор страны. Мы являемся аккредитованной ИТ– компанией.
На текущий момент с нами работает более 2500 высококлассных аналитиков, руководителей проектов, разработчиков, тестировщиков и специалистов по сопровождению крупных информационных систем. Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – ведущие системообразующие финансовые, телеком и ритейл компании страны.
Центральный офис Bell Integrator расположен в Москве, представительства – в Санкт-Петербурге, Нижнем Новгороде, Пензе, Саратове, Уфе, Барнауле, Минске (Беларусь).​​​​​​​​​​​​​​

Проект:
Мы занимаемся построением хранилища данных для внутренних нужд команды. Внедрением актуальных инструментов для работы с данными.
Автоматизацией рутинных задач. Созданием инструментов генерации кода, в том числе с применением AI.​​​​​​​​​​​​​​​​​​​​​

Требования:

• ​​​​​​​​​​​​​​Data Engineer (Инженер данных) с сильным уклоном в разработку инструментов для повышения эффективности разработки и снижения порога входа.
• Обязательно: 2+ года опыта в роли Data Engineer или в проектах, связанных с построением и поддержкой ETL/ELT пайплайнов, использованием Big Data технологий (особенно Spark).
• Python: Продвинутый уровень. Знание современных стандартов (Python 3.8+), асинхронного программирования, популярных фреймворков (FastAPI, Flask - для инструментов), библиотек для работы с данными (Pandas, NumPy - хотя бы базово), тестирования (pytest).
• SQL: Экспертный уровень. Сложные запросы, оптимизация, понимание различий в диалектах (BigQuery, PostgreSQL, Spark SQL и т.д.).
• Обработка Данных: Опыт с Apache Spark (PySpark) - обязательно. Знание концепций распределенных вычислений.
• Оркестрация: Опыт работы с Airflow (предпочтительно) или аналогичными. Умение создавать и поддерживать сложные DAG.
• Хранение Данных: Понимание различий и применение: Data Warehouses, Data Lakes, NoSQL (знание принципов, возможно опыт с MongoDB).
• Стриминг (Плюс): Базовое понимание Kafka.
• Управление зависимостями (poetry, pipenv).

Будет существенным плюсом:

• Опыт создания инструментов для автоматизации рутинных задач, шаблонизации кода, внутренних CLI, Low-Code/No-Code платформ для аналитиков или начинающих разработчиков.
• Кодогенерация: Глубокое понимание принципов метапрограммирования, шаблонизации (Jinja2, Mako), AST (Abstract Syntax Tree) манипуляций в Python.
• Интеграция с AI/LLM (Сильное преимущество): Опыт использования API OpenAI (GPT), Anthropic Claude, локальных LLM (через Hugging Face Transformers, llama.cpp и т.д.) для создания ассистентов, автодополнения, генерации кода/тестов/документации.
  

Условия:

• ​​​​​​​​​достойный уровень заработной платы (по итогам технического интервью)
• работа в аккредитованной IT компании
• сотрудничество: ТК РФ, ИП, ГПХ
• ДМС, расширенные возможности стандартного социального пакета
• корпоративный абонемент на фитнес и курсы английского языка
• командная работа по гибким методологиям
• реферальная система «Приведи друга – получи бонус».