隨著(zhù)AI時(shí)代來(lái)臨.通話(huà)設備的環(huán)境噪音抑制也進(jìn)入AI降噪算法時(shí)代. AI神經(jīng)網(wǎng)絡(luò )降噪技術(shù)是一款革命性的語(yǔ)音處理技術(shù)，他突破了傳統單麥克風(fēng)和雙麥克風(fēng)降噪的局限性,利用采集的各種日常環(huán)境中的噪音樣本進(jìn)行訓練學(xué)習.讓降噪算法具有自適應噪聲抑制功能，可以根據實(shí)際情況自動(dòng)調整噪聲抑制等級. 降噪芯片內置AI降噪引擎,采集數十萬(wàn)種日常生活環(huán)境噪音樣本.比如極端天氣的狂風(fēng)和暴雨環(huán)境,海面的海浪和大小河流的流水,繁忙交通場(chǎng)景的汽車(chē)喇叭各種噪音,酒吧聚會(huì )場(chǎng)所的喧囂人聲.還有各種野外動(dòng)物的叫聲,還有像室內環(huán)境中的像嬰兒的哭聲,敲擊桌子,凳子突然倒地,玻璃杯打碎,裝修時(shí)的砸墻,鉆地等類(lèi)似的突然發(fā)生的噪音.可以有效減少外界噪聲的干擾，可以更好地捕捉人們的聲音，從而讓語(yǔ)音質(zhì)量更加優(yōu)質(zhì)。
AI降噪芯片架構
1.2 硬件功能 可編程LDO，汽車(chē)用1.0V(0.95~1.05V)，可穿戴設備用0.8V(0.75~0.85V) PLL(1MHZ~300MHz)，用于MIPS 配備512KB ROM，使Fortemedia的VIPTower基礎得以實(shí)現:VOS、AIE和same 320KBIRAM(指令RAM):896KB DRAM(數據RAM) 內置人工智能引擎，擁有32組16/32 MAC并行計算 多套音頻接口包括多達8個(gè)通道的PDM輸入，3套TDM，I2S和雙通道PDM輸出。 1.3軟件功能 VOS(語(yǔ)音操作系統)以方便應用程序進(jìn)入NR2049 內置 HAL庫的語(yǔ)音流基礎設施，以實(shí)現應用程序的可移植性多個(gè)NR2049、智能麥克風(fēng)和VID之間的芯片間通信能力可編程語(yǔ)音檢測和語(yǔ)音觸發(fā) 全面的語(yǔ)音處理，涵蓋波束形成、噪聲抑制和回聲消除。 ITU-TP.1100/P.1110/P.1120/P.1140/P.1150(雙向)標準合規性 1.4 高級功能 VOS VOS是一個(gè)實(shí)時(shí)固件框架，它允許輕松配置數據路徑管理，促進(jìn)內部和第三方處理算法的集成。 人工智能引擎 AIE在NR2049上支持高達32個(gè)8位x8位的MAC(MAC代表乘積累加器)，適用于當今高速深度神經(jīng)網(wǎng)絡(luò )(DNN)應用。AIE還提供專(zhuān)有的智能深度壓縮，以節省DNN權重表中的內存空間，在有限功耗下達到高效的高計算要求。使用AI引擎的SSA將提高區分語(yǔ)音和噪聲的準確性，尤其是在VR性能方面。 1.5 典型應用 智能話(huà)筒系統。 汽車(chē)語(yǔ)音輸入處理 汽車(chē)內置免提系統、藍牙免提和AVN便攜式導航設備(PND)、平板電腦和其他移動(dòng)設備的手持免提語(yǔ)音通信系統高質(zhì)量免提語(yǔ)音通信和識別的經(jīng)濟高效解決方案。 2.特點(diǎn) 2.1 Tensilica Fusion DSP 帶有浮點(diǎn)運算單元約32位DSP 高達300MIPS的時(shí)鐘速率 總計IM字節 I/DRAM，最小配置尺寸為64KB 負載代碼接口:從屬SPI 用于調試的JTAG接口(與從/主SPI端口共享引腳)。 3.引腳配置(TQFP-48) |
NR2049芯片腳位.jpg (150.92 KB)
