Дата-инженер (MLOps)

Наша команда создает информационную платформу для решения аналитических и исследовательских задач в области создания продуктов и услуг на мировых финансовых рынках: торговля валютой, ценными бумагами, производными финансовыми инструментами.
Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:
∙ Разработки витрин данных и моделей машинного обучения
∙ Поддержки регулярных бизнес-операций
∙ Проведения Ad hoc анализа
∙ Подготовки регулярной аналитической и управленческой отчетности
Разрабатываемая нами информационная платформа – высоконагруженное решение, призванное обеспечить достижение всех этих целей.

Обязанности:

• Системная разработка, поддержка и оптимизация ETL-процессов и ML-моделей (MLOps) на платформах Greenplum и Hadoop
• R&D, реализация пилотов по выбору технологий и решений
• Поддержание технической документации в актуальном состоянии

• Опыт разработки на Python от 2х лет
• Опыт работы (администрирования) с популярными РСУБД, в том числе, средствами Python (Greenplum, Teradata, Oracle, MSSQL)
• Уверенное знание SQL
• Опыт работы с экосистемой Hadoop (Spark, HDFS, Hive, Oozie)
• Желательные:

• • Понимание основ облачных технологий и технологий виртуализации и контейнеризации (Kubernetes, Openshift, Docker)
  • Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git
  • Практический опыт с автоматизацией развертывания ПО
  • Знание основ администрирования ОС Linux
  • Создание моделей машинного обучения, прохождение курсов по машинному обучению
  • Знание специфики python для ml: библиотеки (catboost, lightgbm e t.c.), понимание как обучать и оптимизировать модели

• Официальное оформление в штат.
• Мы являемся аккредитованной IT-компанией.
• Удалённый формат работы.
• ДМС со стоматологией для сотрудника, близких родственников и детей.
• Спортивные клубы, экскурсии.
• Корпоративная рабочая техника.
• Работа в команде экспертов профессионалов.
• Лучшие мировые практики разработки ПО, организации бизнес-процессов и построения команды.
• Возможности выбора проектов, развития и роста внутри компании.
• Современный подход к обучению и развитию сотрудников: индивидуальный план развития, сертификация, книги, курсы, митапы, публикации в крупнейших онлайн и оффлайн изданиях, изучение иностранных языков.