Наша команда занимается разработкой платформенных решений по доставке данных в хранилище. Сейчас мы в поиске java-разработчика и лида в одном лице.
Наши продукты:
- SDP – стриминговая платформа по доставке данных от внутренних поставщиков в хранилище. 15к событий в секунду, Несколько терабайт в сутки. Проект построен вокруг паттерна event-sourcing. Текущий стек: apache flink, java, kafka, kafka-streams, zookeeper, greenplum, postgres, quarkus, avro, gpfdist
- dlh-ingest – сервис доставки данных до DataLakeHouse. Наш флагманский проект, цель которого существенно оптимизировать доставку данных до хранилища. Стек: apache spark, kafka, kafka-connect, s3, java, kora, avro/parquet/iceberg
Что ожидаем от кандидата:
- Опыт управления командой
- Опыт разработки приложений на java (с использованием любого фрейморвка)
- Опыт работы с Kafka (понимание основных компонентов, понимание семантик доставки)
- Опыт (или желание ) разработки на Apache Flink / Apache Spark
Какие задачи будут стоять перед кандидатом:
- Следить за процессами и моральным духом команды
- Разрабатывать новых и доработка существующих сервисов (полный цикл от написания кода до деплоя в прод)
- Декомпозировать задач
- Участвовать в ревью и проработки архитектуры