Работа с данными, включая ETL-процессы, базы данных и системы хранения данных.
Разработка и оптимизация пайплайнов данных, обеспечение их надежности и производительности.
Проектирование и разработка архитектуры данных:
Проектирование и внедрение масштабируемых и устойчивых решений для хранения и обработки данных.
Оценка и внедрение новых технологий и инструментов для улучшения процессов работы с данными.
Разработка и внедрение стандартов и процедур для обеспечения точности, целостности и безопасности данных.
Мониторинг и анализ качества данных, выявление и устранение аномалий и ошибок.
Обеспечение бесперебойной работы систем данных и своевременное решение технических проблем.
Обновление и модернизация инфраструктуры данных в соответствии с требованиями бизнеса.
Знание SQL: оконные функции, понимание принципов работы всех видов соединений, DDL, DML и т.д.
Понимание внутреннего устройства СУБД: транзакции, план выполнения запросов, блокировки, обработка null значений и т.д.
Понимание основных концепций построения хранилищ данных
Опыт формирования ТЗ на основе требований бизнес-заказчика
Опыт документирования и передачи знаний
Опыт работы с BI инструментами Qlik, metabase, grafana
Знание Python (библиотеки обработки данных, работа с api, airflow dags)