Сочиняем музыку движениями лица и тела
Современные достижения машинного зрения позволяют управлять компьютером при помощи движений тела. Многие новейшие интерфейсные технологии испытываются и откатываются на основе музыкальных экспериментов и программ для сочинения и создания музыки. Вот пара интересных прототипов решений в этой области.
Джонатан Хэммонд показал пример музыкального интерфейса на базе контроллера Kinect, распознающего движения тела.
Кайл Макдональд создал FaceOSC — инструмент для создания технических прототипов приложений, управляемых движениями лица. За основу он взял FaceTracker — API с открытым кодом, позволяющий опознавать на картинке с веб-камеры лицо и определять мимику и движения отдельных частей лица. FaceOSC можно использовать для любых программ, но в качестве демонстрации Макдональд привязал свой интерфейс к музыкальным программам: ниже представлен ролик с программой OSCulator, а по ссылке есть еще одно видео, где используется популярная программа Ableton Live.
FaceOSC JAM2 and Ableton
Поделиться:
Есть интересная ссылка? Пришли ее нам!
