Google продолжает работать над проектами в области искусственного интеллекта. В декабре компания представила новый эксперимент Semi-Conductor, созданный командой Google Creative Lab из Австралии.

Проект заключается в управлении собственным оркестром. Попробовать его можно, перейдя на официальный сайт Semi-Conductor с включённой веб-камерой. По сути, пользователю необходимо просто двигать руками, чтобы изменять темп, громкость и инструменты музыкального произведения.

На данный момент доступна только одна композиция для тестирования — «Маленькая ночная серенада» Моцарта.

Такой эксперимент использует библиотеку машинного обучения PoseNet, которая работает в браузере, чтобы определить ваши движения при помощи веб-камеры. Алгоритм подыгрывает партитуре по мере использования, используя сотни крошечных аудиофайлов записанных инструментов.