Team Lead (Java\Spark)

Наша команда занимается разработкой платформенных решений по доставке данных в хранилище. Сейчас мы в поиске java-разработчика и лида в одном лице.

Наши продукты:

• SDP – стриминговая платформа по доставке данных от внутренних поставщиков в хранилище. 15к событий в секунду, Несколько терабайт в сутки. Проект построен вокруг паттерна event-sourcing. Текущий стек: apache flink, java, kafka, kafka-streams, zookeeper, greenplum, postgres, quarkus, avro, gpfdist
• dlh-ingest – сервис доставки данных до DataLakeHouse. Наш флагманский проект, цель которого существенно оптимизировать доставку данных до хранилища. Стек: apache spark, kafka, kafka-connect, s3, java, kora, avro/parquet/iceberg

Что ожидаем от кандидата:

• Опыт управления командой
• Опыт разработки приложений на java (с использованием любого фрейморвка)
• Опыт работы с Kafka (понимание основных компонентов, понимание семантик доставки)
• Опыт (или желание ) разработки на Apache Flink / Apache Spark

Какие задачи будут стоять перед кандидатом:

• Следить за процессами и моральным духом команды
• Разрабатывать новых и доработка существующих сервисов (полный цикл от написания кода до деплоя в прод)
• Декомпозировать задач
• Участвовать в ревью и проработки архитектуры