Ovaj blog je posvećen zvuku i njegovim raznim oblicima. Tokom godina sam nalazio puno interesantnih stvari vezanih za zvuk, pa sam došao na ideju da sve te interesantne priče, eksperimente, instrumente, uređaje, knjige, filmove, audio zapise i događaje grupišem na jedno mesto, pre svega kao ličnu evidenciju, da ne moram više da se mučim da nađem sve te stvari, a nadam se da će i vama pomoći u boljem razumevanju zvuka. Pored zvuka kao mehaničke oscilacije, pisaću i o njegovoj upotrebi u muzici, filmu, svakodnevnom životu, itd. Trudiću se da ne kršim tuđa autorska prava, al baš ako bude negde neki propust... Ukoliko se vlasnik autorskih prava javi, skloniću sporan sadržaj. Sve predloge, pdf knjige, linkove i slično, što smatrate da bi pomoglo da se napravi jedna riznica znanja o zvuku, šaljite na danilocrni[et]yahoo[dot]com

четвртак, 19. април 2018.

Google Audio-Visual Speech Separation

Postoji veliki broj alata za odstranjivanje šuma i izolaciju određene informacije iz audio signala. Do sada je žamor bio rak rana za kvalitetnu izolaciju govora jedne osobe, ali Google Audio-Visual Speech Separation je na putu da i ovaj problem reši! Nešto što je do sada bilo nemoguće uraditi, zbog sličnog frekvencijskog spektra različitih glasova u istom snimku, sada je moguće uz pomoć vizuelne informacije. Google-ov alat ne samo da analizira različite frekvencijske spektre istovremenih govornika, već i analzira otvaranje usta u video snimku, prepoznajući na taj način šta bi od zvuka u tom trenutku moglo da bude korisno, a šta ne. Separacija, naravno, nije savršena, ali je ovo veliki korak dalje. Na žalost, ovakav postupak odstranjivanja neželjenog zvuka nije (za sad) moguć u slučajevima kada postoji samo audio, a ne i video snimak. Ovo je i dalje koncept, pa alat za sad nije dostupan za komercijalnu upotrebu.


Više informacija: https://research.googleblog.com/2018/04/looking-to-listen-audio-visual-speech.html


Нема коментара:

Постави коментар