Data Engineer

Описание вакансии

Ищем опытного инженера по данным с опытом работы в области облачных сервисов (предпочтительно AWS) и уверенным владением Python.

Обязанности:

Проектирование, создание и реализация систем сбора и обработки данных
Трансформация бизнес-требований в модели данных, которые легко понять и использовать различными специальностями в компании
Обеспечение поддержки требований бизнеса за счет архитектуры данных
Сотрудничество с другими техническими членами команды для установления лучших практик и стандартов управления данными и операциями
Проведение настройки производительности данных, устранение неполадок и оптимизация
Обеспечение соблюдения конфиденциальности и безопасности данных
Исследование новых технологий и подходов

Требования:

Высшее образование в области компьютерных наук, инженерии или смежных дисциплин
Разговорный английский
Опыт работы инженером по данным или на сходной должности не менее 5 лет
Владение языком программирования Python для обработки данных и разработки пайплайнов
Значительный опыт работы с облачными сервисами AWS, связанными с хранением, обработкой и аналитикой данных (например, S3, Glue, Lambda, Redshift, DynamoDB).
Опыт работы с SQL базами данных, включая проектирование, запросы и оптимизацию
Знакомство с моделированием данных, процессами ETL и концепциями хранилищ данных
Знание инструментов и фреймворков интеграции данных (например, Apache Airflow)
Отличные навыки решения проблем и способность работать как самостоятельно, так и в команде
Знания Agile подходов
Сильные коммуникативные навыки и способность объяснять технические концепты непрофессионалам

Технологии и языки:

Python
SQL
Terraform
AWS cloud

Желательно:

AWS Glue.
Минимум 3 года профессионального опыта в инженерии данных или смежной области. Опыт работы с Snowflake Data Warehouse и опыт работы с данными.
Apache Airflow
Linux + bash, ssh
Typescript
Работа с полным циклом разработки

Будет плюсом: