Audio on paljude asjade Interneti -rakenduste lahutamatu osa, sealhulgas tarbekaupade, näiteks kõlarid ja kõrvaklapid, kantavad ja meditsiiniseadmed (nt kuuldeaparaadid), automatiseerimis- ja tööstuskontrollirakendused, meelelahutussüsteemid ning autotööstuse infotainment.
IoT heli võib laias laastus jagada kolme tüüpi: voogesitus (st muusika, hääl ja andmed), häältuvastus/käsud ning traadita ühenduvuse kaudu traadita ühenduvuse kaudu (nt mitme kanaliga heli voogesitamine WiFi-le koduse ruumilise helisüsteemiga). Kvaliteetsete, katkematute akustiliste heli alamsüsteemide kujundamine võib siiski olla keeruline, kui insenerid peavad järgima IoT-põhiste seadmete jaoks vajalikke rangeid piiranguid.
Vaja on keerukamad disainilahendused, et lisada täiustatud funktsioonid, näiteks häältuvastus, näiteks võimaldada autojuhtidel juhtida oma autos infotainment-süsteemi samal käed-vabal viisil kui mobiiltelefon. Kuna MCU on kõigi nende helisüsteemide keskmes, on oluline valida MCU, mis integreerib usaldusväärse müravaba helisüsteemi kavandamiseks vajalikud vajalikud helitehnoloogiad. Selles artiklis uuritakse helitehnoloogiaid, mida saab kasutada selliste süsteemide kujundamiseks.
Heli alamsüsteemi komponendid
IoT heli hõlmab kolme peamist tegevusi: auru kvaliteetne hääl/andmed, traadita edastamine ja hääle ümberkorraldamise kontroll. Joonis 1 näitab manustatud süsteemi kõige olulisemaid ehitusplokke.

See plokkskeem näitab helitöötluse alamsüsteemi olulisemaid ehitusplokke
Pange tähele, et paljusid neist omadustest saab integreerida kaasaegsesse MCUS-i, näiteks Cypress CYW43907 koos integreeritud Wi-Fi 802.11n-ga, mida kasutatakse selles näites. Mõni olulistest helitehnoloogiatest, mis võivad kaasata asjade Interneti-põhisesse süsteemi, on järgmised:
Muusikarakendused
Audio-toega MCU-d võimaldavad inseneridel dekodeerida MP3/4 vooge, mida kasutavad kõige populaarsemad meediumipleierid ja sisu pakkujad. Paljud disainilahendused peavad toetama ka WMA ja Apple'i AAC dekodeerimist, mis nõuab täiendavat töötlemisvõimsust. Tarbijate helirakendustes saab odavaid heli MCUS-sid sageli kasutada digitaalse muusika voogude haldamisega sellistest heli tarvikutest, näiteks digitaalkõlarite komplektid.
Nendes rakendustes saabub PCM -i heliandmete raam (kapseldatud USB heliklassi vormingus) iga 1 ms iga protsessori SPI/I²C jadakanali kaudu. Sõltuvalt allikast võib helivoog saabuda ühes vormingus (st vasakpoolsed, parempoolsed, i2s jne). Mõned odavad koodekid saavad siiski aktsepteerida ainult teatud vorminguid. Sellistel juhtudel mängib MCU olulist rolli tagades, et andmed oleksid enne koodeki suunamist õigesti joondatud.
Kuna mitte kõik heliallikad ei kasuta sama proovivõtmise kiirust, peab koodek kohandama oma proovivõtusagedust allikaga või tuginema MCU -le, et teisendada valimitud andmevoo ühiseks andmeedastuskiiruseks (vt joonis 2). Sellistel juhtudel peab MCU haldama voogu, et vältida alakoormust või ülekoormust, mis võib põhjustada summuteid, hüppeid ja heli katkestusi, mis võivad põhjustada andmete kadumist ja häirida kasutaja kuulamise kogemust. Pange tähele, et heli MCU -d saab kasutada ka heli alamsüsteemi muude funktsioonide rakendamiseks, näiteks valgustuse kontrollimiseks heli taasesituse ajal.

Võimalik, et heli MCU -l on vaja teostada vormingu teisendamine, valimi kiiruse korrigeerimine ja voo juhtimine, samuti heli kasutajaliidesed.
Audio rakendamiseks laias valikus rakendustes peab heli MCUS toetama mitmesuguseid helitehnoloogiaid. Joonisel 3 on toodud näited nende helitehnoloogiate kohta.

helitehnoloogia
Helikoodekid
Helisüsteemi peamine esiosa on helikoodekid. Paljud IoT -rakenduste jaoks ehitatud MCU -d toetavad Codeci funktsionaalsust riistvaras. See võimaldab süsteemil vähendada digitaalsete heliproovide suurust, et kiirendada traadita edastamist (säästa võimsust) ja säästa salvestusruumi (vähendada sisemälu mahutavust). Koodek võib toetada erinevaid helistandardi vorminguid, näiteks AAC, AC -3 ja ALAC. Selleks on vaja dekodeerimisüksust (AU), mis on rakendatud enne mis tahes heli järeltöötlust (nt DSOLA, SOLA). Kui seda kasutatakse selliste standardsete helivormingutega nagu AAC, AC -3 ja ALAC, liigitatakse heli nii, et hilisemad heliproovid oleksid välja kirjutatud vormingus, mis on määratletud helipaketi andmevoos. Pakettide vahekaugusel on õnnestunud ka ummikute korral võimaldada minimaalset risti- ja katkematut toimimist. AU kandevõime suurus võimaldab täita mis tahes varjatud varjamist.
Põhiriba töötlemine
Põhiriba signaal on analoog- või digitaalse lainekuju sageduste põhirühm, mida saab töödelda elektrooniliste vooluringide abil. Põhiriba signaal võib koosneda ühest sagedusest või sageduste rühmast või digitaalses domeenis andmete voost, mis saadetakse üle multipleksideta kanali. Basepaela määratletakse kui põhiriba (signaal/sekund), mis on segatud kandesignaaliga, et saada moduleeritud signaal. Pange tähele, et IoT heli toetavas MCUS -is integreerib helikoodek baasriba töötlemise ja RF -i ühele kiibile. Helikodekit saab rakendada erinevates traadita transiiverites, et pakkuda kõneandmeid ja/või muusikafunktsioone. Koodekil on ka heliväljundi mono- ja stereokanalid, samuti stereosisendid.
Paki kaotuse varjamine ja andmete replikatsioon
Liigne latentsusaeg, pakettide kaotus ja kõrge latentsusajaga värisemine võivad kahjustada suhtluse kvaliteeti. Paketi järsu kadumise tõenäosus suureneb võrgukoormusega ja põhjustab katkestusi, mida kasutaja võib kuulda. Tugevat heliülekannet WiFi kaudu saab täiustada täiustatud funktsioonidega, näiteks Cypressi pakettkaotuse varjamistehnoloogia. Süsteemi arhitektuuri allikas/vastuvõtja on järgmine: üks allikas hõivab heli, multipleksib PCM -i andmeid RTP voo struktuuri kaudu ja sünkroonib kella kõigi PLC allikaga ühendatud vastuvõtjatega.
Pange tähele, et kommunikatsiooniühenduse jõudlus sõltub lingi eelarve jõudluse kvaliteedist. Selle lüli eelarve määravad kolm tegurit: edastage võimsus, edastage antenni võimendus ja saada antenni võimendus. Näiteks on usaldusväärne suhtlus 802.11 võrgu kaudu võimalik, kui lingi tee võimsus, millest lahutatakse saadaoleva ruumi kadumine, on suurem kui vastuvõtva raadio minimaalne vastuvõetud signaalitase (vt joonis 4).

Kommunikatsiooniühenduse toimivus sõltub lingi eelarve jõudluse kvaliteedist
Kõne arusaadavuse suurendamine (SIE)
Helisüsteemi taustmüra võib vähendada kõne arusaadavust. Kui müra ületab teatud taset, võib kasutajal seda kõnet mõista. Reaalajas pideva kõnetuvastuse kättesaadavus manustatud seadmetes nõuab süsteemi, mis suurendab mürapuudega kõne arusaadavust. MCU valimine, mis toetab tavaliselt kasutatava suure sõnavara pideva kõnetuvastuse (LVCSR) süsteemi teisaldamist ja optimeerimist, võib arengut lihtsustada.
Äratusfraaside tuvastamine
See täiustatud funktsioon võimaldab kasutajatel süsteemi käed-vabad sisse lülitada, aktiveerides seadme oma häälega.
Tõhus multisaade ühele või mitmele kõnelejale
Multisaadete tegemine on võrgu adresseerimismeetod, mida kasutatakse sõnumite saatmiseks sihtmärkide rühmale, kasutades samaaegselt kõige tõhusamat strateegiat. Sõnumeid edastatakse ainult üks kord läbi iga võrgu lingi ja koopiad luuakse ainult siis, kui järgmine link lõheneb mitmesse sihtkohta, tavaliselt võrgulülitites ja ruuterites. Nagu kasutaja andmegrammi protokoll (UDP), ei taga ka multisaadete edastamist sõnumivoo edastamist, mis võib põhjustada sõnumite äraviskamise või organiseerimata sõnumite edastamise. Usaldusväärne multisaade (RMC) pakub tunnustusi multisaate pakettide (ainult pakettide) kohta, nii et teatud konkreetseid multisaatepakette saab usaldusväärselt tarnida. Saatja valib kaadri tunnustamiseks vastuvõtja nõrgiima RSSI -ga. IoT-keskkonnas tähendab RMC rakendamine seda, et WiFi-saatja valib ühe paljudest WiFi-vastuvõtjatest, kes tunnustavad kaadri vastuvõttu. Saatja valib kaadri tunnustamiseks vastuvõtja nõrgiima RSSI -ga. Rakendamine kasutab kinnitatud RMC teabe elemente sisaldavat operatiivset raamistikku, et teatada ja lubaja lubajat. Rakendus sisaldab ka RMC-spetsiifilisi WiFi-draiveri käske, et seada multisaate MAC-aadress ning lubada ja keelata RMC.
Fikseeritud ja sümmeetrilise edastamisviivitusega heli ja video jaoks on täitunud aja sünkroonimise nõuded; Näiteks võib RMC tugineda väga täpsele ajastamisele ja sünkroonimisele, et saada rakkude ja rakkude edastamine hääle-, video- ja mobiiliandmete edastamiseks. Väga täpse ja täpse ajastuse saavutamine pole tehnilisest küljest lihtne, seetõttu on oluline leida rakendusi, mida saab rakenduse nõuete täitmiseks kontrollida.
Raamimisvormingud, vea parandamine ja pakettide replikatsioon
Heli voogesituse jaoks on kriitiline, et kell sünkroniseeritakse kõigi WiFi vastuvõtjatega. Üks lähenemisviis on kasutada ühist kella nii lähte- kui ka vastuvõtja seadmete jaoks, mida sageli nimetatakse seinakellaks või süsteemi kellaks (STC). Esiteks sünkroonib iga vastuvõtja (vastuvõtja) oma STC (seinakell) lähte-/saatja STC -ga (peaseinakell). Iga vastuvõtja saab nüüd saatja kella taastada, kuna allika sisestatud ajatempel (saadaval iga RTP -paketi laiendatud päises) kajastab meediumi valimissektori hetke võrreldes ühise kella suhtes.
STC põhineb Grandmasteri kella väärtustel, mis on kirjeldatud 802.1AS -i spetsifikatsioonis. Kuna kõik vastuvõtjaseadmed on teadlikud STC ja lähteseadme meediumikella korrelatsioonist (kuna see on seotud RTP või meediumi ajatempliga), saab iga vastuvõtja rekonstrueerida lähteseadme RTP -meediumi kella koopia ja järjestada oma väljundi vastavalt nõuetekohaseks renderdamiseks. Läbipaistev tikk on koht, kus riistvara/ucode saab ajatemplipakette vastuvõetud ja võimalikult lähedale Mac/PHY liidesele. Kuigi seda kella väärtust ei kasutata taasesitamiseks, saab seda kasutada kogu süsteemis värisemiseks ja täieliku jõudlusanalüüsi teostamiseks.
Näide nutika kodu helisüsteemist
IoT -heli kontekstis mõistmiseks kaaluge nutika kodu näidet ja rolliheli võib mängida nutika kodusüsteemi üldise funktsionaalsuse parandamisel. Kodust saab nutikas kodu, kui selles olevad seadmed ja seadmed saavad omavahel suhelda ja seal elavate inimestega suhelda. Suurendades oma seost, parandavad nutikad kodud meie elukvaliteeti ja suurendavad meie turvalisust.
Nutikas kodus heli üks peamisi kasutusjuhtumeid on heli salvestamine ja jagamine Wi-Fi või Bluetoothi kaudu. Wi-Fi valimine BLE-st varieerub rakenduste kaupa ja sõltub vahemiku ja helikvaliteedi nõuetest. Näiteks saab kodukontroller mängida maja igas toas konkreetset heli, kui keegi uksele ukselehele heliseb, selle asemel, et lihtsalt ühe maja ühes osas kellukese ühendada. Sarnaselt võib kontroller piirata heli konkreetsete tubadega, näiteks mitte imikute lasteaias. Manustatud kontrollerid aitavad seda heli töödelda ja muuta süsteem nutikamaks, haldades erinevaid väljundjuhtimisfunktsioone.
Taasesitus helisüsteemid
Kordushelisüsteemid on muutunud oluliseks rakenduseks heliturul. Traadita heli kordussüsteemid on nutika kodu keskmes, viies kodus palju erinevaid nutiteadmeid ja teeb kasutaja nimel intelligentseid otsuseid. Näiteks saab helisüsteem juhtida praegu mängiva muusika põhjal maja valgustusmustreid. See saab kasutada ka tekstkõnesse teisendamist kasutajateatiste või e-kirjade valjusti lugemiseks. Kasutajatel on ka võimalus luua mitmetoalises helisüsteemis tsoone, kasutades maja erinevates ruumides võrgutavate heliseadmeid, näiteks traadita kõlareid. See lähenemisviis loob terve ökosüsteemi, mis tagab, et kodu töötab alati tipptasemel efektiivsusega, minimeerides samal ajal suhtlemist seal elavate inimestega. Sellise ökosüsteemi loomiseks peavad Interneti-disainerid valima manustatud mikrokontrolleri, millel on õige jõudlus ja helipõhised funktsioonid, mis on optimeeritud Interneti-rakenduste jaoks.
Digitaalse signaalitöötluse efektid
Helisignaali töötlemine digitaalses domeenis on enne heliandmete edastamist traadita lingi kaudu mis tahes helisüsteemi oluline osa. See töötlemine hõlmab tavaliselt heli analoogsignaali mõõtmist, filtreerimist ja/või tihendamist. Integreeritud DSP funktsioonidega manustatud MCU -d võimaldavad efekte, näiteks digitaalse mikseri lisamist ja tugi kaugjuhtimispuldi funktsioonide jaoks. 5- riba ekvalaiseriga iga kanali jaoks saab heli taasesituse nutikalt integreerida enamiku sekveneerimisrakendustega võimsa stuudiosüsteemi loomiseks.




