Практика по применению глубокого обучения с подкреплением для управления тележкой с обратным маятником на борту. Подробно рассматриваются вопросы создания твердотельной модели в Simscape Multibody, оснащение ее обучаемой системой управления движением тележки для сохранения равновесия маятника. Система управления основана на DQN (Deep Q-learning Network). В качестве наблюдаемых величин используются данные о положении и скорости тележки и маятника. Управление дискретное: усилием величиной -10, 0 или 10 Н.
0:00 Введение, общие вопросы задачи
0:08:37 Разработка модели маятника
0:29:50 Создание агента
0:34:08 Награда и условия прерывания эпизода
0:46:16 Обучение и тестирование системы управления маятником
Необходимое программное обеспечение: MATLAB 2020a и новее, Simulink, Deep Learning Toolbox, Reinforcement Learning Toolbox, Simscape, Simscape Multibody.
Материалы занятия доступны по ссылке: https://github.com/Mechanics-Mechatro...
Поделиться в:
Доступные форматы для скачивания:
Скачать видео mp4
Информация по загрузке:
Скачать аудио mp3
Похожие видео
array(10) {
[0]=>
object(stdClass)#5046 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "4JOgKuhGkSY"
["related_video_title"]=>
string(98) "КТО ЖИВЁТ ПОД ДНОМ ОКЕАНА? Семихатов, Сурдин, Осадчиев"
["posted_time"]=>
string(22) "10 дней назад"
["channelName"]=>
string(27) "Вселенная Плюс"
}
[1]=>
object(stdClass)#5019 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "KRjdQm37gR8"
["related_video_title"]=>
string(172) "Александр Васильев о возвращении на Родину и на телевидение, своей коллекции книг и эмиграции"
["posted_time"]=>
string(21) "6 дней назад"
["channelName"]=>
string(16) "Юзефович"
}
[2]=>
object(stdClass)#5044 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "7CKL_OgnSY4"
["related_video_title"]=>
string(123) "AI4MMR - Лекция 1 - Искусственный интеллект и основы машинного обучения"
["posted_time"]=>
string(21) "4 года назад"
["channelName"]=>
string(37) "Mechanics, Mechatronics, and Robotics"
}
[3]=>
object(stdClass)#5051 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "l-atdFTo7vo"
["related_video_title"]=>
string(114) "AI4MMR - Лекция 3 - Обучение без учителя и обучение с подкреплением"
["posted_time"]=>
string(21) "4 года назад"
["channelName"]=>
string(37) "Mechanics, Mechatronics, and Robotics"
}
[4]=>
object(stdClass)#5030 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "w2hbbnUmnTE"
["related_video_title"]=>
string(116) "AI4MMR - Лаб. 3 - Разработка систем диагностики с применением Raspberry Pi"
["posted_time"]=>
string(21) "4 года назад"
["channelName"]=>
string(37) "Mechanics, Mechatronics, and Robotics"
}
[5]=>
object(stdClass)#5048 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "FFQnhdVplyA"
["related_video_title"]=>
string(164) "AI4MMR - Лаб. 2 - Использование открытых баз данных для распознавания медицинских изображений"
["posted_time"]=>
string(21) "4 года назад"
["channelName"]=>
string(37) "Mechanics, Mechatronics, and Robotics"
}
[6]=>
object(stdClass)#5043 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "I36Gpgdd82M"
["related_video_title"]=>
string(172) "Непрерывное обучение в импульсных нейронных сетях с колоночной организацией (Денис Ларионов)"
["posted_time"]=>
string(21) "9 дней назад"
["channelName"]=>
string(5) "NrmAI"
}
[7]=>
object(stdClass)#5053 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "ltdKNS0FU_o"
["related_video_title"]=>
string(169) "#2 Светодиод, расчет резистора, конденсатор - самый понятный курс по электронике для новичков"
["posted_time"]=>
string(21) "3 года назад"
["channelName"]=>
string(21) "Виктор Осин"
}
[8]=>
object(stdClass)#5029 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "MiOGJ5k8EMI"
["related_video_title"]=>
string(93) "⚡️ Путин резко ответил Западу || Потеря территорий"
["posted_time"]=>
string(21) "4 часа назад"
["channelName"]=>
string(23) "Время Прядко"
}
[9]=>
object(stdClass)#5047 (5) {
["video_id"]=>
int(9999999)
["related_video_id"]=>
string(11) "BT38K6NqETE"
["related_video_title"]=>
string(125) "Эксперт по кибербезопасности о ваших паролях, вирусах и кибератаках"
["posted_time"]=>
string(27) "6 месяцев назад"
["channelName"]=>
string(22) "Раскадровка"
}
}