AI

Neuronska mreža može prepoznati melodiju kroz tjelesne pokrete muzičara

Neuronska mreža može prepoznati melodiju kroz tjelesne pokrete muzičara



We are searching data for your request:

Forums and discussions:
Manuals and reference books:
Data from registers:
Wait the end of the search in all databases.
Upon completion, a link will appear to access the found materials.

Jedno je sigurno, AI ide po mjestima. Samo zbog velike količine podataka koje neuronske mreže dubokog učenja mogu protumačiti, ovi mikro-AI su u stanju da naprave čuda

Muzika je istovremeno slušne i vizuelne iskustvo. Kada gledamo ansambl muzičara, uzimamo vizuelni znaci da nam pomognerazlikovati ko šta igra.

Istraživači iz MIT-IBM Watson AI Lab razvili su novi AI alat koji samo oponaša ovaj proces. Nadovezujući se na rad Zhao et. svi istraživači koriste uočljivo pokreti ruku i tijela snimljeno na video. A mreža za video analizu prikuplja podatke o kretanju muzičara dok mreža za audio-vizuelno razdvajanje odvaja svaki izvor zvuka uzimanjem podataka koje pruža mreža za video analizu.

Ova tehnologija se potencijalno može koristiti za miješanje zvuka koncertnog nastupa. Proizvođači zvuka mogu izolirati instrument i promijeniti njegovu jačinu zvuka, ako razmislite, to može dramatično poboljšati remastere stare snimke koncerta.

Ova tehnologija bi se takođe mogla prilagoditi rješavanju problema povezanih s ljudi istovremeno razgovaraju na video konferencijama. Mogla bi biti još jedna potencijalna upotreba roboti, kako bi ih bolje razumjeli zvukove okoline poput životinja, vozila ili ljudi.

Osnova vizuelne analize u projektu, tzv analiza ključnih točaka, takođe ima primenu u sportskom polju. Pružanje rješenja za praćenje performansi koje zahtijeva manje ljudskog unosa.

POVEZANO: ŽELITE ZNATI TKO MOŽE BITI SLJEDEĆI FUDBALER? OVO ĆU VAM REĆI

Prethodno istraživanje pokazalo je da se sistemi uparivanja vida i zvuka mogu naučiti prepoznavati i razlikovati širok spektar izvora zvuka od pada. valovi do cvrkutanja ptice.

Mnogo je potencijalnih područja na kojima ova tehnologija može naći komercijalnu upotrebu. Možemo osposobiti sigurnosni sistem da reaguje na zvuk razbijanja prozorskog stakla ili možemo osposobiti samoupravni automobil za automatsko upravljanje vozilom da predvidi put dolazeće hitne pomoći.


Pogledajte video: Neural Network Backpropagation Basics For Dummies (Avgust 2022).