I ricercatori dell’Università di Washington hanno creato un’intelligenza artificiale in grado di riprodurre composizioni per pianoforte dopo averle precedentemente visualizzate senza suono.
Un team di ricercatori dell’Università di Washington ha creato un’intelligenza artificiale chiamata Audeo che incorpora una sorta di software intelligente precedentemente addestrato con 172.000 fotogrammi video del pianista Paul Barton che suona musica di compositori classici come Mozart o Bach.
Analizzando semplicemente un video muto, l’AI è in grado di sapere in dettaglio quali tasti vengono premuti e in quale ordine, determinando così le singole note e la loro disposizione. È anche in grado di percepire con quanta forza vengono suonati i tasti e per quanto tempo vengono tenuti premuti, consentendo così di calcolare l’intensità di ogni nota e il tempo che persiste sotto il suono delle note suonate successivamente. Come se non bastasse, l’AI è anche in grado di tenere conto delle caratteristiche acustiche distintive dei pianoforti.
I dati vengono convertiti in un formato che può essere compreso da un sintetizzatore digitale e quando quel sintetizzatore riproduce il file musicale è molto simile alla musica per pianoforte originale .
In uno dei suoi sorprendenti test, l’intelligenza artificiale è stata predisposta per suonare musica per pianoforte precedentemente appresa attraverso video muti del compositore Barton che suonava pezzi musicali distintivi.
Quindi applicazioni di riconoscimento musicale come SoundHound hanno analizzato queste produzioni realizzate dall’intelligenza artificiale, riuscendo a riconoscere il brano musicale con una precisione di circa l’86% . Per motivi di confronto, quando questa app ha analizzato l’audio del pianoforte originale, la sua precisione di riconoscimento è salita al 93%.
