Audio je sastavni dio mnogih IOT aplikacija, uključujući potrošačke proizvode kao što su zvučnici i slušalice, nosivi i medicinski uređaji (npr. Primjena sluha), automatizacijske i industrijske kontrolne jedinice, i automobilske infotainment jedinice.
IOT Audio se može široko kategorizirati u tri vrste: streaming (tj. Muzika, glas i podaci), prepoznavanje glasa / naredbi i bežično putem Bluetooth-a i Wi-Fi-ja (npr. Streaming višekanalnog zvuka preko Wi-Fi-ja do bežičnog računala u okviru Wi-Fi-ja do bežičnog računala). Međutim, dizajniranje visokokvalitetnog, neprekidnog akustičnog audio podsistema može biti izazovno kada se inženjeri moraju pridržavati strogih ograničenja potrebnih za IOT uređaje.
Kompleksniji dizajnirani su za uključivanje naprednih funkcija kao što su prepoznavanje glasa, poput omogućavanja upravljačkih programa za kontrolu infotainment sistema u svom automobilu na isti način bez ruku kao mobitel. Budući da je MCU u srcu svih ovih audio sistema, važno je odabrati MCU koji integrira potrebne audio tehnologije potrebne za osmišljavanje pouzdanog audio sistema bez buke. Ovaj rad istražuje audio tehnologije koje se mogu koristiti za dizajn takvih sistema.
Komponente audio podsustava
IOT Audio uključuje tri glavne aktivnosti: Parni visokokvalitetni glas / podaci, bežični prijenos i kontrolu glasovnog reorganizacije. Slika 1 prikazuje najvažnije građevne blokove u ugrađenom sistemu.

Ovaj blok dijagram prikazuje važnije građevinske blokove podsistema za obradu zvuka
Imajte na umu da se mnoge od tih značajki mogu integrirati u moderan MCUS, poput Cypress Cyw43907 s integriranim Wi-Fi 802.11n koji se koristi u ovom primjeru. Moguće su važne audio tehnologije koje mogu biti uključene u IOT-ove sustav uključene u IOT-ove sustav upletene:
Muzičke aplikacije
MCUS koji podržava audio omogućuju inženjerima da dekodiraju MP3 / 4 stream koji koriste većina popularnijih medijskih igrača i pružatelja sadržaja. Mnogi dizajni također trebaju podržati WMA i Appleov AAC dekodiranje, što zahtijeva dodatnu moć prerade. U potrošačkim audio aplikacijama, niskobudžetni audio MCUS često se mogu koristiti upravljanjem digitalnim muzičkim potocima iz audio pribora, poput digitalnih skupova zvučnika.
U tim se aplikacijama okvir PCM audio podataka (inkapsulirani u USB audio klasu) stiže svaki 1 mS putem jednog od serijskih kanala za SPI / i²5. Ovisno o izvoru, audio tok može stići u jedan od nekoliko formata (tj. Lijevo usklađen, desno usklađen, I2s, itd.). Međutim, neki niski kodeci mogu prihvatiti samo određene formate. U tim slučajevima MCU igra važnu ulogu u osiguravanju da se podaci pravilno usklađuju prije nego što se nahrani na kodek.
Budući da nisu svi audio izvori koriste istu brzinu uzorkovanja, kodek također mora prilagoditi frekvenciju uzorkovanja na izvor ili se oslanjajući na MCU kako bi pretvorio uzorkovani tok podataka na zajedničku brzinu podataka (vidi sliku 2). U tim slučajevima MCU mora upravljati potokom kako bi se izbjeglo uvjetima za podmetanje ili preopterećenje koji mogu dovesti do isključivanja, popostave i audio diskontinuiteta koji mogu uzrokovati gubitak podataka i poremetiti iskustvo slušanja podataka. Imajte na umu da se audio MCU može koristiti i za implementaciju drugih funkcija audio podsistema, poput kontrole rasvjete tokom reprodukcije audio.

Audio MCU možda će trebati izvršiti pretvorbu formata, prilagođavanje brzine uzorka i upravljanje strujom, kao i podršku audio korisničkim sučeljama.
Da bi implementirao zvuk u širokom rasponu aplikacija, audio MCUS mora podržati različite audio tehnologije. Slika 3 prikazuje primjere ovih audio tehnologija.

zvučna tehnologija
Audio kodeci
Audio kodeci su glavna prednja komponenta audio sistema. Mnogi MCUS izgrađeni za IOT aplikacije podržavaju funkcionalnost kodeka u hardveru. To omogućava sistemu da smanji veličinu digitalnih audio uzoraka za ubrzavanje bežičnog prijenosa (uštede energije) i uštede prostora za pohranu (smanjenje soja na unutarnjoj memoriji). Kodek može podržati različite audio standardne formate poput AAC-a, ac -3 i Alac. Da biste to učinili, potrebna je za dekodiranu pristupnu jedinicu (AU), koja se provodi prije bilo koje audio nakon obrade (npr. DSOLA, SOLA). Kada se koristi sa standardnim audio formatima, kao što su AAC, AC -3 i Alac, audio je kategoriziran na takav način da su sljedeći audio uzorci u propisanom formatu navedenom u stresu audio paketa. Razmak paketa također se uspijeva omogućiti minimalno poprečno trčanje i neprekinuti rad u prisustvu zagušenja. Veličina korisnog opterećenja AU omogućava izvršavanje bilo kojeg prikrivanja koje treba izvesti.
Obrada baznog pojasa
Basebanban signal je temeljna grupa frekvencija u analognom ili digitalnom obliku talasa koja se može obraditi elektroničkim krugovima. Bazeni signal može se sastojati od jedne frekvencije ili grupe frekvencija ili u digitalnoj domeni, tok podataka koji se šalju preko multipleksiranog kanala. Baseband je definiran kao osnovni pojam (signal / drugi) pomiješan sa nosačem signala za proizvodnju moduliranog signala. Imajte na umu da u MCU-u koji podržava IOT Audio, audio kodek integrira obradu osnovne pojase i RF na jednom čipu. Audio kodek se može implementirati u raznim bežičnim primopredajima za pružanje glasovnih podataka i / ili muzičke funkcionalnosti. Kodek također sadrži mono i stereo kanale za audio izlaz, kao i stereo ulaze.
Sakrivanje i replikacija paketa
Prevelika kašnjenje, gubitak paketa i visoki kašnjenje mogu narušiti kvalitet komunikacije. Verovatnoća iznenadnog gubitka paketa povećava se sa mrežnim opterećenjem i rezultira prekidima koje korisnik može čuti. Robustan audio prijenos preko Wi-Fi-ja može se poboljšati naprednim funkcijama kao što su Cypress's Tehnologija sakrivanja paketa. Izvor / prijemnik arhitekture sistema je sljedeći: Jedan izvor snima audio, višestruke podatke PCM-a putem RTP stream strukture i sinhronizira sat sa svim prijemnim prijemnicima spojenim na izvor PLC-a.
Imajte na umu da performanse komunikacijske veze ovise o kvaliteti performansi budžeta veze. Ovaj budžet veze određuje se tri faktora: prenoseći energiju, prenoseći dobitak antene i primaju pojačanje antene. Na primjer, pouzdana komunikacija preko 802.11 mreže moguća je ako je snaga staze veze minus gubitak raspoloživog prostora veći od minimalnog primljenog nivoa signala prijemnog radija (vidi sliku 4).

Performanse komunikacijske veze ovisi o kvaliteti performansi budžeta veze
Poboljšanje govornog razgovora (Sie)
Pozadinska buka u audio sistemu može smanjiti razumljivost govora. Ako buka prelazi određenu razinu, korisnik može biti teško razumjeti. Dostupnost neprekidnog prepoznavanja govora na ugrađenim uređajima zahtijeva sistem koji poboljšava razumljivost govora umanjenom od buke. Odabir MCU-a koji podržava prenos i optimizaciju obično korištenog velikog rječničkog kontinuiranog prepoznavanja govora (LVCSR) može pojednostaviti razvoj.
Otkrivanje fraze buđenja
Ova napredna funkcija omogućava korisnicima da uključi sistem bez ruku aktiviranjem uređaja svojim glasom.
Efikasan multicast za jedan ili više zvučnika
Multicasting je metoda adresiranja mreže koja se koristi za slanje poruka grupi ciljeva istovremeno koristeći najefikasniju strategiju. Poruke se isporučuju samo jednom putem svake veze u mreži, a kopije se kreiraju samo kada se sljedeća veza dijeli na više destinacija, obično na mrežnim prekidačima i usmjerivačima. Međutim, poput korisničkog datagramskog protokola (UDP), Multicast ne garantuje pružanje streama poruka, što može dovesti do poruke odbacivanja ili neorganizirane isporuke poruka. Pouzdan Multicast (RMC) osigurava priznanje za pakete za višestruki paketi (samo paketi) tako da se određeni specifični multicast paketi mogu pouzdano isporučiti. Odašiljač odabire prijemnik sa najslabijim RSSI-om da potvrdi okvir. U IOT okruženju, implementacija RMC-a znači da Wi-Fi predajnik odabere jedan od mnogih Wi-Fi prijemnika za potvrdu recepcije okvira. Odašiljač odabire prijemnik sa najslabijim RSSI-om da potvrdi okvir. Provedba koristi operativni okvir koji sadrži vlasničke RMC-ove elemente za prijavu i omogućio priznanje. Implementacija sadrži i naredbe za Wi-Fi Driver specifične za RMC za podešavanje MAC adrese MULTICAST i da bi se omogućilo i onemogućilo RMC.
Za audio i videozapis sa fiksnim i simetričnim kašnjenjem prijenosa ispunjeni su zahtjevi za sinhronizaciju vremena; Na primjer, RMC se može osloniti na vrlo precizan vremenski raspon i sinhronizaciju za glatku prijenos glasovnog, video i mobilnog podataka ćelija-do ćelije. Postizanje vrlo preciznog i preciznog vremena nije lako s tehničkog stanovišta, tako da je važno pronaći implementacije koje se mogu provjeriti kako bi se zadovoljili zahtjevi za aplikacije.
Formati za uokvirivanje, korekcija greške u naprijed i replikacija paketa
Za audio streaming kritičan je da se sat sinhronizuje sa svim Wi-Fi prijemnicima. Jedan je pristup korištenje zajedničkog sata za uređaje za izvor i prijemnika, koji se često nazivaju zidni sat ili sistemski sat (STC). Prvo, svaki prijemnik (prijemnik) sinhronizira svoj STC (zidni sat) sa STC izvornim / predajkom (glavni zidni sat). Svaki prijemnik sada može povratiti sat predajnika jer je vremenska oznaka umetnuta izvoru (dostupna u produženom zaglavlju svakog RTP paketa) odražava uzorkovani trenutak medija u odnosu na zajednički sat.
STC se zasniva na venim vrijednostima saumastera izložene u specifikaciji 802.1a. Budući da su svi uređaji za prijemnik svjesni korelacije između Media Clock-a iz izvornog uređaja (kao što se odnosi na RTP ili medijsku vremenu), svaki prijemnik može rekonstruirati kopiju RTP-ovog satova izvornog uređaja i redak izlaza u skladu s tim u skladu s tim. Prozirni sat je mjesto gdje se hardver / ukod može primati i prenijeti paketi za vremenske oznake i prenositi što je moguće bliže na Mac / Phy sučelje. Iako se ova vrijednost sata ne koristi za reprodukciju, može se koristiti za mjerenje otjecka u cijelom sustavu i izvršio potpunu analizu performansi.
Primjer pametnog domaćeg audio sistema
Da biste razumjeli IOT audio u kontekstu, razmotrite primer pametnog doma i uloga zvuka može igrati u poboljšanju ukupne funkcionalnosti pametnog domaćeg sistema. Dom postaje pametan dom kada uređaji i uređaji u njoj mogu komunicirati jedni s drugima i ljudi koji tamo žive. Povećanjem naše interkonektivnosti, pametni domovi poboljšavaju naš kvalitet života i povećavaju našu sigurnost.
Jedna od glavnih slučajeva korištenja za audio u pametnom domu sprema i dijeli audio preko Wi-Fi-ja ili Bluetooth-a. Izbor Wi-Fi-ja preko BLE-a varira po aplikaciji i ovisi o rasponu i zahtjevima za kvalitetu zvuka. Na primjer, kućni regulator može reproducirati određeni zvuk u svakoj sobi kuće ako neko zvoni na vratima na vratima, a ne samo priključivanje zvona u jednom dijelu kuće. Slično tome, kontroler može ograničiti zvuk u određene sobe, poput ne u vrtiću za bebe. Ugrađeni kontroleri pomažu u obradu ovog zvuka i učinili sustav pametnijim upravljanjem različitim funkcijama izlazne kontrole.
Reprodukcija audio sistema
Replay Audio sustavi postali su važna aplikacija na audio tržištu. Bežični audio reprodukcijski sustavi su u srcu pametnog doma, a u ime korisnika u ime korisnika uručuju mnoge različite pametne uređaje i čine inteligentne odluke u ime korisnika. Na primjer, audio sistem može kontrolirati obrasce osvjetljenja u kući na osnovu muzike koja se trenutno igra. Može koristiti i pretvorbu teksta u govor da bih čitao korisničke obavijesti ili e-poštu naglas. Korisnici također imaju mogućnost stvaranja zona u višesobni audio sustav pomoću mrežnih audio uređaja, poput bežičnih zvučnika u različitim sobama kuće. Ovaj pristup stvara čitav ekosustav kako bi se osiguralo da dom uvijek radi u vrhunci efikasnosti, dok minimizira interakcije s ljudima koji tamo žive. Da biste stvorili takav ekosustav, IOT dizajneri trebaju odabrati ugrađeni mikrokontroler s pravim performansama i audio-baziranim funkcijama koje su optimizirane za IOT aplikacije.
Efekti za obradu digitalnih signala
Obrada audio signala u digitalnoj domeni važan je dio bilo kojeg audio sistema prije nego što prenose audio podatke preko bežične veze. Ova obrada obično uključuje mjerenje, filtriranje i / ili komprimiranje audio analognog signala. Ugrađeni MCUS s integriranim DSP funkcionalnošću omogućava efekte kao što su dodavanje digitalnog miksera i podrške za funkcije daljinskog upravljača. Sa 5- ekvilajzerom za svaki kanal, reprodukcija zvuka može biti pametno integrirana sa većinom sekvencerskih aplikacija za stvaranje moćnog studijskog sistema.




