Senior Data Engineer

Привет! Это команда Real Deal.

У нас уже есть один успешный проект в ОАЭ в сегменте B2G. Он был представлен на EXPO 2020 Дубай, крупнейшей международной выставке, и был отмечен как “The best technological solution for sustainable development”. Также наш проект вошел в список лучших технологических решений Ближнего Востока и Северной Африки – “Top 10 PropTech projects in MENA 2022” по версии “PropTech Outlook”. Сейчас продукт находится на стадии внедрения в государственные структуры стран персидского залива.

Теперь мы хотим создать топовое решение в сегменте B2B – платформу для сделок с коммерческой недвижимости в Дубае (годовой объем рынка: $ 7.8 млрд). Мы уже сделали MVP и получили положительную обратную связь от рынка – проект нужен, выгода для пользователей очевидна. Закрыли pre-seed round, привлекли финансирование для развития проекта.

Сейчас наша главная цель – провести успешный запуск продукта в Дубае в 2025 году.

Мы расширяем команду и ищем Senior Data инженера, с серьезным опытом в продуктовых проектах и коммерческой разработке.

Что ты будешь делать:

• Создание архитектуры и инфраструктуры для хранения и обработки данных: С нуля разработать и внедрить архитектуру данных, выбрать и настроить инструменты и технологии для эффективного накопления, обработки и хранения больших объемов данных.

• Разработка и оптимизация ETL/ELT процессов: Создание конвейеров данных для сбора, трансформации и загрузки информации из различных источников, обеспечивая высокую производительность и надежность.

• Доставка данных до клиентских приложений: Поддержка и развитие дашбордов, аналитических витрин и API для клиентского приложения совместно с бекенд командой.

• Обеспечение качества данных: Разработка и внедрение процедур очистки, валидации, мониторинга и обогащения данных для поддержания их высокого качества, прежде чем они попадут в клиентские приложения.

• Исследование и поиск данных: Активный поиск и интеграция новых источников данных, проведение исследовательских работ для выявления ценной информации.

• Лидерство: Формирование best practices и документации для будущей команды дата анализа.

Каким должен быть твой бекграунд:

• Опыт в разработке и поддержке хранилищ данных (минимум 3-5 лет).

• Глубокое понимание принципов проектирования баз данных (Data Lake и DWH), архитектур хранения данных и опыт работы с ними.

• Экспертные навыки в построении ETL пайплайнов и оркестрации данных (AirFlow).

• Уверенное владение SQL и Python (Spark, Pandas, Numpy).

• Опыт работы с облачными платформами (AWS, YandexCloud) и их сервисами для обработки данных (S3, Redshift).

• Понимание принципов работы с геопространственными данными.

• Способность самостоятельно принимать решения, предлагать и внедрять новые подходы.

Важно:

1) Обязательно приложи сопроводительное письмо;

2) Кандидаты без высшего технического образования не рассматриваются;

3) Техническое собеседование проводится в оффлайн (!) формате.