Google продолжает работать над проектами в области искусственного интеллекта. В декабре компания представила новый эксперимент Semi-Conductor, созданный командой Google Creative Lab из Австралии.
Проект заключается в управлении собственным оркестром. Попробовать его можно, перейдя на официальный сайт Semi-Conductor с включенной веб-камерой. По сути, пользователю необходимо просто двигать руками, чтобы изменять темп, громкость и инструменты музыкального произведения.
На данный момент доступна только одна композиция для тестирования – «Маленькая ночная серенада» Моцарта.
Такой эксперимент использует библиотеку машинного обучения PoseNet, которая работает в браузере, чтобы определить ваши движения с помощью веб-камеры. Алгоритм подыгрывает партитуре по мере использования, используя сотни крошечных аудиофайлов записанных инструментов.