RL Разработчик

Институт ИИ МФТИ – ведущий институт по искусственному интеллекту в России. В состав Института входят сильнейшие ученые и ключевые лаборатории Физтеха по направлениям: оптимизация для ИИ, Робототехника, Генеративный ИИ, Компьютерное зрение и Математическое моделирование. Цель Института - создание прорывных научных исследований и прикладных разработок для ключевых отраслей экономики страны.

Немного о нас в цифрах:

1-е место среди технических вузов России в международных рейтинге THE и CWUR (2025);

1-е место в предметном рейтинге RAEX по направлению "Информационные технологии" (2025);

1-е место в рейтинге передовых инженерных школ (2025);

1-е место в рейтинге вузов России по качеству приёма (2024);

1-е место в рейтинге вузов по качеству подготовки специалистов в области искусственного интеллекта (2024).

Работа в МФТИ это:

• работа в лучшем техническом вузе страны в команде с выдающимися учеными мирового уровня, талантливыми и мотивированными студентами и высококвалифицированными специалистами;
• непрерывный профессиональный рост во время работы над амбициозными задачами и уникальными проектами на стыке образования, науки и индустрии, возможность внести свой вклад в развитие образования и науки в России.

Центр когнитивного моделирования Института ИИ МФТИ — одна из ведущих российских научно-инженерных групп в области робототехники, ИИ и когнитивных систем. Центр разрабатывает прикладные и исследовательские решения в сфере манипуляции, автономных робототехнических систем и управления сложными объектами. Результаты регулярно публикуются в ведущих журналах (Neurocomputing, RA-L, EAAI, IEEE Transactions on ITS и др.) и на международных конференциях (ICRA, IROS, CoRL, ICCV и т.д.).

ЦКМ ищет специалиста для проекта, связанного с автоматизацией манипуляционных операций в сложной и вариативной среде, включающих работу с множеством объектов различной формы и свойств.

Чем тебе предстоит заниматься:

• Разработка алгоритмов RL, в т.ч.:
  - проектирование, реализация и оптимизация алгоритмов обучения с подкреплением (PPO, SAC, TD3 и др.)
  - создание обучающих пайплайнов для online и offline RL: генерация траекторий, формирование и анализ Replay Buffer
  - разработка инструментов мониторинга экспериментов, анализа поведения политик и управления качеством данных.
• Работа с симуляцией (IsaacSim):
  - построение физически реалистичных симуляций объектов и манипуляторов, включая настройку параметров массы, трения, инерции, контактов
  - генерация обучающих данных с использованием домен-рандомизации и крупных наборов 3D-моделей.
  - разработка и интеграция кастомных симуляционных сред для RL-обучения.
• Работа с реальными роботами:
  - адаптация и отладка политик на реальном манипуляторе
  - дообучение моделей на реальных данных (Sim2Real adaptation)
  - анализ ошибок и повышение устойчивости поведения при переносе «симуляция-реальность».
• Интеграция управления:
  - реализация архитектуры «RL+классическое управление» (PID, MPC, LQR и др.)
  - интеграция компонентов в ROS-пайплайны и системные модули управления роботом.
• Инженерные задачи и разработка инструментов:
  - написание чистого, поддерживаемого кода (ООП, документация, тестирование)
  - участие в разработке архитектуры внутренних библиотек и инфраструктуры
  - оптимизация вычислительных пайплайнов, ускорение симуляционных циклов.

• Обязательное наличие оконченного высшего технического образования.
• Уверенное владение языком Python, желательный опыт промышленной разработки
• Опыт работы с фреймворком PyTorch
• Наличие практического опыта разработки алгоритмов RL (PPO, SAC, TD3 и др.)
• Опыт подготовки данных для Offline RL
• Базовые навыки компьютерного зрения в задачах управления и манипуляции (работа с RGB/RGB-D, выделение объектов, простые модели восприятия)
• Понимание кинематики и динамики манипуляторов
• Опыт разработки собственных сред или сценариев в симуляции.

• работа в ведущем техническом вузе страны, в городе Долгопрудный (рядом со станцией Новодачная МЦД-1 или 15 минут от метро Алтуфьево, Ховрино, Физтех);
• оформление в соответствии с ТК РФ;
• возможность бесплатного посещения бассейна и тренажерного зала;
• в соответствии с ТК РФ работники сферы образования обязаны предоставить справку о наличии (отсутствии) судимости и (или) факта уголовного преследования, срок изготовления которой может быть до 30 дней, просим заранее позаботиться о её получении.