Настраивать сбор данных из разных источников: баз данных, API, логов, облачных хранилищ и сторонних сервисов
Приводить данные к нужному формату — очищать, нормализовать, устранять дубликаты, ошибки и пропуски
Проектировать и сопровождать хранилища данных: от классических реляционных систем управления базами данных (СУБД) до хранилищ data lake, где данные находятся в изначальном, необработанном виде, и облачных платформ
Автоматизировать обработку данных — строить пайплайны, которые запускаются по расписанию или в реальном времени
Контролировать качество данных — следить за стабильностью процессов, целостностью и непротиворечивостью информации
Выстраивать взаимодействие внутри компании с целью определения требований к данным и построению архитектуры - аналитиками данных, разработчиками и менеджерами
Требования:
Знание и понимание инструментов и технологий:
ETL- и ELT-платформы (Apache Airflow, Luigi),
хранилища данных (Greenplum, ClickHouse, Hadoop, S3),
облачные платформы,
инструменты мониторинга и логирования (Prometheus, Grafana),
брокеры сообщений (Apache Kafka и RabbitMQ),
контейнеризация и оркестрация (Docker, Kubernetes)
Условия:
Работа в стабильной компании с интересными проектами
Бесплатное питание (услуги питания предоставляются в трех собственных столовых, расположенных на территории завода)
Спорт за счет предприятия (бассейн, йога, танцы, футбол, волейбол, хоккей и др.)
Доставка сотрудников (автобус Среднеуральск-Верхняя Пышма-УТЗ, по 111 маршруту, Академический-УТЗ, Березовский-УТЗ)
ДМС (предоставляется после испытательного срока)
Медпункт на территории завода
Возможность получить новые знания
Официальное трудоустройство с первого рабочего дня согласно ТК РФ;
Зарплата выплачивается на карту два раза в месяц (уровень - рассматриваются ожидания кандидатов)
Финансовое развитие (13-ая зарплата; ежегодная индексация)
График работы: с 8.00 до 16.40 (пятидневка), обед с 12.00 до 12.40. Место работы: ул. Фронтовых бригад, д. 18 Как добраться: ост. "Турбинный завод" (трамвай № 2, 7, 14, 24; троллейбус №33), ост. "Фронтовых бригад" (автобус № 41, 80), станция метро "Машиностроителей"