Исследователи из Италии и Швейцарии научили виртуального робота играть на барабанах на уровне человека.
Ученые поместили 8 тыс. виртуальных роботов Unitree G1 в «песочницу» Isaac Gym от Nvidia. Роботам давали адаптированные MIDI-партитуры реальных песен и заставляли играть их на барабанной установке, используя обучение с подкреплением.
Изначально движения были неуклюжие и роботы практически не попадали по барабанам, но за каждый верный удар алгоритм поощрял «музыкантов», а за промах — штрафовал.
В итоге андроид научилcя не только попадать в ритм, но и играть с человеческой выразительностью. Причем ИИ робота освоил приемы опытных барабанщиков — перекрестные удары, оптимальные стойки и планирование положения рук наперед. Исследователи не подсказывали, как играть, робот интуитивно пришел к эффективным движениям.
Возможности системы проверили на популярных треках Linkin Park, Nirvana, Bon Jovi и других групп. Точность воспроизведения превысила 90%, даже в сложных ритмических фрагментах.
Ученые собираются опробовать алгоритм на реальном роботе и даже хотят научить его импровизировать. По мнению авторов, такие роботы-барабанщики в будущем смогут выступать с людьми на живых концертах.
Источник: Hi, AI!
Ссылка на TG-канал: https://t.me/hiaimedia/2247
