Neuronet nauczył się rozpoznawać poszczególne instrumenty muzyczne i wyciągać z nich dźwięk

Neuronet nauczył się rozpoznawać poszczególne instrumenty muzyczne i wyciągać z nich dźwięk

Programiści MIT napisali sztuczną inteligencję PixelPlayer, która może znaleźć żądany instrument muzyczny na wideo i wydobyć jego dźwięk, jeśli gra ciszej niż inne.

Sieć neuronowa oferuje użytkownikowi, aby po prostu wybrać jeden z instrumentów brzmiących w filmie i uczynić go głośniejszym

PixelPlayer składa się z trzech warstw – pierwsza analizuje elementy graficzne wideo, druga – analizuje ścieżkę audio, trzecia – porównuje klatki i dźwięk i rozumie, które instrumenty brzmią ciszej niż to konieczne Qdim.

[youtube https://www.youtube.com/watch?v=2eVDLEQlKD0&w=590&h=393]

W celu szkolenia sztucznej inteligencji MIT zaoferował 714 filmów z solowymi lub orkiestrowymi występami muzyków o łącznej długości ponad 60 godzin. Zawierają 11 rodzajów instrumentów – akordeon, gitarę akustyczną, wiolonczelę, klarnet, erhu, flet, saksofon, trąbkę, tubę, skrzypce i ksylofon

Ostatnio Facebook wprowadził sztuczny intelekt, który potrafi przemienić muzykę z jednego stylu w inny. Sztuczna inteligencja jest w stanie bardzo dokładnie odtworzyć muzykę z jednego gatunku na inny za pomocą różnych instrumentów muzycznych poprzez autokodowanie. Sieć neuronowa może nagrać orkiestrę symfoniczną, którą wykonuje Bach, ale przekształcić ją w tę samą melodię, ale fortepian będzie częścią Beethovena.

Powiązane wiadomości