ВКР: Использование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором

Содержание

Слайд 2

Актуальность


Интеллектуальные системы принятия решений в реальном времени
Решение прикладных задач
Относительно быстрая адаптация

Актуальность Интеллектуальные системы принятия решений в реальном времени Решение прикладных задач Относительно
к неизвестным средам

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором

Слайд 3

Постановка задачи


Цель: Перемещение схвата манипулятора в заданную точку рабочей зоны. Перемещение скользящих

Постановка задачи Цель: Перемещение схвата манипулятора в заданную точку рабочей зоны. Перемещение
по поверхности объектов в заданную точку плоскости.
Требования:
Вывод значений параметров системы по завершению каждой эпохи
Моделирование физических законов в среде обучения
Возможность реализации с использованием низкопроизводительной техники
Визуализация полученных результатов по завершению обучения

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором

Слайд 4

Перечень подлежащих разработке вопросов
Выбор инструментария для реализации методов машинного обучения
Анализ и выбор

Перечень подлежащих разработке вопросов Выбор инструментария для реализации методов машинного обучения Анализ
алгоритмов обучения, отвечающих поставленной задаче
Выбор среды окружения
Реализация управления манипулятором поредством алгоритмов обучения с подкреплением
Вывод, визуализация и анализ полученных результатов обучения системы

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором

Слайд 5

Инструментарий для исследований обучения с подкреплением Gym

Исхаков М.Р. Исспользование метода машинного обучения

Инструментарий для исследований обучения с подкреплением Gym Исхаков М.Р. Исспользование метода машинного
на основе Q-обучения для управления роботом-манипулятором

Слайд 6

Обучение с подкреплением. Q-обучение

Исхаков М.Р. Исспользование метода машинного обучения на основе

Обучение с подкреплением. Q-обучение Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором
Q-обучения для управления роботом-манипулятором

Слайд 7

Алгоритмы

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором

DDPG

HER

Алгоритмы Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором DDPG HER

Слайд 8

Среда окружения

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления

Среда окружения Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения для управления роботом-манипулятором FetchSlide-v1 FetchReach-v1
роботом-манипулятором

FetchSlide-v1

FetchReach-v1

Слайд 9

Вывод и анализ данных

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения

Вывод и анализ данных Исхаков М.Р. Исспользование метода машинного обучения на основе
для управления роботом-манипулятором

HER + DDPG
FetchReach-v1
100 эпизодов

Слайд 10

Вывод и анализ данных

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения

Вывод и анализ данных Исхаков М.Р. Исспользование метода машинного обучения на основе
для управления роботом-манипулятором

HER + DDPG
FetchReach-v1
100 эпизодов

Слайд 11

Вывод и анализ данных

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения

Вывод и анализ данных Исхаков М.Р. Исспользование метода машинного обучения на основе
для управления роботом-манипулятором

HER + DDPG
FetchSlide-v1
2000 эпизодов

Слайд 12

Вывод и анализ данных

Исхаков М.Р. Исспользование метода машинного обучения на основе Q-обучения

Вывод и анализ данных Исхаков М.Р. Исспользование метода машинного обучения на основе
для управления роботом-манипулятором

HER + DDPG
FetchSlide-v1
2000 эпизодов

Имя файла: ВКР:-Использование-метода-машинного-обучения-на-основе-Q-обучения-для-управления-роботом-манипулятором.pptx
Количество просмотров: 27
Количество скачиваний: 0