Senior Machine Learning Engineer (RL/Reinforcement Learning) в Центр робототехники Сбера

Мы команда Центра Робототехники Сбера. Прямо сейчас мы существенно расширили количество амбициозных задач, одна из которых связана с обучением шагающих роботов, роботов-манипуляторов при помощи обучения с подкреплением в рамках проекта по созданию собственного антропоморфного робота от Сбера.

Обязанности

• Обучать роботов новым навыкам: ходить, бегать, манипулировать объектами, делать сальто и т.д. Важно делать это устойчиво и для широкой области применения.
• Разрабатывать на PyTorch модели агентов, тренировать их с помощью Reinforcement Learning и/или Imitation Learning, в симуляторе и на реальном железе.
• Читать научные статьи в поисках путей улучшения текущих алгоритмов применительно к роботам.
• Интеграция моделей в общий программный стек.
• Писать документацию, проводить код-ревью, участвовать в планировании исполнения проекта.

Требования

Мы ищем единомышленников, которые разделяют нашу страсть к робототехнике и обладают навыками обучения и исследования нейросетевых моделей и алгоритмов.

Полезные навыки, которые могут быть у кандидатов:

• Знание различных алгоритмов Reinforcement Learning: PPO, TRPO, A3C и др.
• Опыт обучения агентов с помощью (хотя бы одним из методов): Reinforcement Learning, Imitation Learning, Behaviour Cloning, Inverse Reinforcement Learning.
• Опыт работы с физическими симуляторами: NVIDIA Isaac Sim, MuJoCo.
• Уверенная разработка на Python: PyTorch, Docker, MLOps, написание тестов, CI/CD.
• Хорошая подготовка по линейной алгебре.

Хотя мы ожидаем, что потенциальные кандидаты будут обладать некоторыми из перечисленных качеств, мы также открыты для тех, кто может дополнить нашу команду другими ценными навыками и качествами.

Также плюсом будет:

• Успешный опыт участия в соревнованиях.
• Опыт доведения исследований до продакшена.
• Опыт в робототехнике; в сборе и курировании разметки данных; в решении задач Computer Vision.
• Open-source проекты.
• Опыт работы с ROS2.

Условия

• Дружный и высококвалифицированный коллектив
• Уникальные масштабные проекты, работа в приоритетном направлении
• Достойная заработная плата (оклад + годовая премия)
• Современные рабочие места и программное обеспечение
• ДМС, корпоративная пенсионная программа, страхование от несчастных случаев, социальные гарантии, корпоративные мероприятия
• Высокий уровень корпоративной культуры
• Работа в офисе (г. Москва)