Канадские роботы превращают музыку в световые картины

Исследователи из Университета Ватерлоо создали систему, которая позволяет людям и роботам совместно создавать художественные полотна, вдохновлённые музыкой. Несколько колёсных роботов размером с футбольный мяч передвигаются по ограниченной площадке, оставляя за собой цветные световые следы. Их движение синхронизировано с темпом и аккордами музыкального произведения, а камера фиксирует эти траектории, превращая их в визуальный образ, отражающий эмоциональное содержание мелодии.

Разработчики запрограммировали целый рой роботов, которые «слушают» музыку и передают свои впечатления через цвет, яркость и ширину световых линий, а также через скорость движения и расположение на импровизированном холсте. При этом зрители могут влиять на процесс — с помощью специальных элементов управления они меняют ширину следов и их положение, что делает каждого участника соавтором картины.

Как отмечает профессор Дженнаро Нотамиста, одна из главных задач заключалась в создании алгоритма, координирующего одновременное движение нескольких машин. Систему протестировали с двенадцатью роботами, но она масштабируется и на большее количество. Вторая сложность — выделить в музыке эмоционально значимые характеристики и перевести их в адекватные визуальные образы.

Полученные наработки могут пригодиться не только в искусстве, но и в других областях, где требуется слаженная работа множества роботов, — от мониторинга окружающей среды до точного земледелия, поисково-спасательных операций и исследования планет. В дальнейшем автор планирует привлечь профессиональных художников и музыкантов для изучения возможностей инструмента и организовать публичные выставки.