隨著AI時代來臨.通話設(shè)備的環(huán)境噪音抑制也進(jìn)入AI降噪算法時代. AI神經(jīng)網(wǎng)絡(luò)降噪技術(shù)是一款革命性的語音處理技術(shù)，他突破了傳統(tǒng)單麥克風(fēng)和雙麥克風(fēng)降噪的局限性,利用采集的各種日常環(huán)境中的噪音樣本進(jìn)行訓(xùn)練學(xué)習(xí).讓降噪算法具有自適應(yīng)噪聲抑制功能，可以根據(jù)實(shí)際情況自動調(diào)整噪聲抑制等級. 降噪芯片內(nèi)置AI降噪引擎,采集數(shù)十萬種日常生活環(huán)境噪音樣本.比如極端天氣的狂風(fēng)和暴雨環(huán)境,海面的海浪和大小河流的流水,繁忙交通場景的汽車?yán)雀鞣N噪音,酒吧聚會場所的喧囂人聲.還有各種野外動物的叫聲,還有像室內(nèi)環(huán)境中的像嬰兒的哭聲,敲擊桌子,凳子突然倒地,玻璃杯打碎,裝修時的砸墻,鉆地等類似的突然發(fā)生的噪音.可以有效減少外界噪聲的干擾，可以更好地捕捉人們的聲音，從而讓語音質(zhì)量更加優(yōu)質(zhì)。
AI降噪芯片架構(gòu)
1.2 硬件功能 可編程LDO，汽車用1.0V(0.95~1.05V)，可穿戴設(shè)備用0.8V(0.75~0.85V) PLL(1MHZ~300MHz)，用于MIPS 配備512KB ROM，使Fortemedia的VIPTower基礎(chǔ)得以實(shí)現(xiàn):VOS、AIE和same 320KBIRAM(指令RAM):896KB DRAM(數(shù)據(jù)RAM) 內(nèi)置人工智能引擎，擁有32組16/32 MAC并行計算 多套音頻接口包括多達(dá)8個通道的PDM輸入，3套TDM，I2S和雙通道PDM輸出。 1.3軟件功能 VOS(語音操作系統(tǒng))以方便應(yīng)用程序進(jìn)入NR2049 內(nèi)置 HAL庫的語音流基礎(chǔ)設(shè)施，以實(shí)現(xiàn)應(yīng)用程序的可移植性多個NR2049、智能麥克風(fēng)和VID之間的芯片間通信能力可編程語音檢測和語音觸發(fā) 全面的語音處理，涵蓋波束形成、噪聲抑制和回聲消除。 ITU-TP.1100/P.1110/P.1120/P.1140/P.1150(雙向)標(biāo)準(zhǔn)合規(guī)性 1.4 高級功能 VOS VOS是一個實(shí)時固件框架，它允許輕松配置數(shù)據(jù)路徑管理，促進(jìn)內(nèi)部和第三方處理算法的集成。 人工智能引擎 AIE在NR2049上支持高達(dá)32個8位x8位的MAC(MAC代表乘積累加器)，適用于當(dāng)今高速深度神經(jīng)網(wǎng)絡(luò)(DNN)應(yīng)用。AIE還提供專有的智能深度壓縮，以節(jié)省DNN權(quán)重表中的內(nèi)存空間，在有限功耗下達(dá)到高效的高計算要求。使用AI引擎的SSA將提高區(qū)分語音和噪聲的準(zhǔn)確性，尤其是在VR性能方面。 1.5 典型應(yīng)用 智能話筒系統(tǒng)。 汽車語音輸入處理 汽車內(nèi)置免提系統(tǒng)、藍(lán)牙免提和AVN便攜式導(dǎo)航設(shè)備(PND)、平板電腦和其他移動設(shè)備的手持免提語音通信系統(tǒng)高質(zhì)量免提語音通信和識別的經(jīng)濟(jì)高效解決方案。 2.特點(diǎn) 2.1 Tensilica Fusion DSP 帶有浮點(diǎn)運(yùn)算單元約32位DSP 高達(dá)300MIPS的時鐘速率 總計IM字節(jié) I/DRAM，最小配置尺寸為64KB 負(fù)載代碼接口:從屬SPI 用于調(diào)試的JTAG接口(與從/主SPI端口共享引腳)。 3.引腳配置(TQFP-48) |
NR2049芯片腳位.jpg (150.92 KB)
