Исследователи в области искусственного интеллекта из компании Massive Technologies хотели создать виртуального помощника для обучения игры на пианино, а в итоге у них получился настоящий виртуоз, который превосходит настоящих музыкантов и способен сыграть что угодно, да еще и сгенерировать 3D-анимацию с визуализацией процесса.
На ролике ниже абсолютно все движения рук сгенерированы нейросетью таким образом, если бы настоящий пианист играл такую же композицию — «Прелюдию до-диез минор» Сергея Рахманинова 1919 года. Выглядит потрясающе:
Для тренировки ИИ Massive Technologies приглашала в свой офис в Хельсинках настоящих пианистов, которые играли для компьютера на протяжении нескольких часов подряд. С помощью специальных сенсоров нейросеть анализировала действия людей и обучалась до тех пор пока не смогла с точностью воспроизводить мельчайшие движения.
Вот, например, наглядный пример того, как виртуальный пианист повторяет за тем, что ему «скормили»:
Теперь компания внедрит свои наработки в приложение с дополненной реальностью, где каждый пользователь сможет загрузить нужную композицию и посмотреть, как виртуальный пианист ее исполнит. Бета-версия уже доступна в App Store.