Junior/Middle, Machine Learning Engineer, Reinforcement Learning

Обязанности

Мы команда Центра Робототехники Сбера. Прямо сейчас мы существенно расширили количество амбициозных задач, одна из которых связана с обучением шагающих роботов, роботов-манипуляторов при помощи обучения с подкреплением в рамках проекта по созданию собственного антропоморфного робота от Сбера. Обязанности Обучать роботов новым навыкам: ходить, бегать, манипулировать объектами, делать сальто и т.д. Важно делать это устойчиво и для широкой области применения. Разрабатывать на PyTorch модели агентов, тренировать их с помощью Reinforcement Learning и/или Imitation Learning, в симуляторе и на реальном железе. Читать научные статьи в поисках путей улучшения текущих алгоритмов применительно к роботам. Интеграция моделей в общий программный стек. Писать документацию, проводить код-ревью, участвовать в планировании исполнения проекта. Требования Мы ищем единомышленников, которые разделяют нашу страсть к робототехнике и обладают навыками обучения и исследования нейросетевых моделей и алгоритмов. Полезные навыки, которые могут быть у кандидатов: Знание различных алгоритмов Reinforcement Learning: PPO, TRPO, A3C и др. Опыт обучения агентов с помощью (хотя бы одним из методов): Reinforcement Learning, Imitation Learning, Behaviour Cloning, Inverse Reinforcement Learning. Опыт работы с физическими симуляторами: NVIDIA Isaac Sim, MuJoCo. Уверенная разработка на Python: PyTorch, Docker, MLOps, написание тестов, CI/CD. Хорошая подготовка по линейной алгебре. Хотя мы ожидаем, что потенциальные кандидаты будут обладать некоторыми из перечисленных качеств, мы также открыты для тех, кто может дополнить нашу команду другими ценными навыками и качествами. Также плюсом будет: Успешный опыт участия в соревнованиях. Опыт доведения исследований до продакшена. Опыт в робототехнике; в сборе и курировании разметки данных; в решении задач Computer Vision. Open-source проекты. Опыт работы с ROS2. Условия В Центре Робототехники Сбера собрана уникальная команда экспертов, которые обладают глубокими знаниями как в мобильной, так и в манипуляционной робототехнике. В нашей команде собраны лучшие робототехники страны, мы регулярно побеждаем на мировых соревнованиях и публикуем свои научные работы на топовых робототехнических конференциях - IROS и ICRA. Мы обладаем экспертизой, охватывающей различные аспекты робототехники: Computer Vision Reinforcement Learning Trajectory Prediction SLAM Motion Trajectory Planning Control Локация: г. Москва, башня Сбера на Кутузовском к32, работаем из офиса. Плюшки: Годовые бонусы до нескольких окладов, ДМС после трехмесячного испытательного срока, корпоративный спорт-зал, печеньки, роботы :).