当前位置: 首页 > news >正文

采用AI神经网络降噪算法的语言降噪消回音处理芯片NR2049-P

随着AI时代来临.通话设备的环境噪音抑制也进入AI降噪算法时代.  AI神经网络降噪技术是一款革命性的语音处理技术,他突破了传统单麦克风和双麦克风降噪的局限性,利用采集的各种日常环境中的噪音样本进行训练学习.让降噪算法具有自适应噪声抑制功能,可以根据实际情况自动调整噪声抑制等级.

    降噪芯片内置AI降噪引擎,采集数十万种日常生活环境噪音样本.比如极端天气的狂风和暴雨环境,海面的海浪和大小河流的流水,繁忙交通场景的汽车喇叭各种噪音,酒吧聚会场所的喧嚣人声.还有各种野外动物的叫声,还有像室内环境中的像婴儿的哭声,敲击桌子,凳子突然倒地,玻璃杯打碎,装修时的砸墙,钻地等类似的突然发生的噪音.可以有效减少外界噪声的干扰,可以更好地捕捉人们的声音,从而让语音质量更加优质。

AI降噪芯片架构

1.2 硬件功能

内置的Tensilica DSP具有可编程MIPS(高达300 MIPS)

可编程LDO,汽车用1.0V(0.95~1.05V),可穿戴设备用0.8V(0.75~0.85V)

PLL(1MHZ~300MHz),用于MIPS

配备512KB ROM,使Fortemedia的VIPTower基础得以实现:VOS、AIE和same

320KBIRAM(指令RAM):896KB DRAM(数据RAM)

内置人工智能引擎,拥有32组16/32 MAC并行计算

多套音频接口包括多达8个通道的PDM输入,3套TDM,I2S和双通道PDM输出。

1.3软件功能

VOS(语音操作系统)以方便应用程序进入NR2049

内置 HAL库的语音流基础设施,以实现应用程序的可移植性多个NR2049、智能麦克风和VID之间的芯片间通信能力可编程语音检测和语音触发

全面的语音处理,涵盖波束形成、噪声抑制和回声消除。

ITU-TP.1100/P.1110/P.1120/P.1140/P.1150(双向)标准合规性

1.4 高级功能

VOS

VOS是一个实时固件框架,它允许轻松配置数据路径管理,促进内部和第三方处理算法的集成。

人工智能引擎

AIE在NR2049上支持高达32个8位x8位的MAC(MAC代表乘积累加器),适用于当今高速深度神经网络(DNN)应用。AIE还提供专有的智能深度压缩,以节省DNN权重表中的内存空间,在有限功耗下达到高效的高计算要求。使用AI引擎的SSA将提高区分语音和噪声的准确性,尤其是在VR性能方面。

1.5 典型应用

智能话筒系统。

汽车语音输入处理

汽车内置免提系统、蓝牙免提和AVN便携式导航设备(PND)、平板电脑和其他移动设备的手持免提语音通信系统高质量免提语音通信和识别的经济高效解决方案。

2.特点

2.1 Tensilica Fusion DSP

带有浮点运算单元约32位DSP

高达300MIPS的时钟速率

总计IM字节 I/DRAM,最小配置尺寸为64KB

负载代码接口:从属SPI

用于调试的JTAG接口(与从/主SPI端口共享引脚)。

3.引脚配置(TQFP-48)

http://www.xdnf.cn/news/433441.html

相关文章:

  • C++中的虚表和虚表指针的原理和示例
  • While语句数数字
  • SpringBoot核心注解详解:定义、用法与原理
  • MySQL 学习(八)如何打开binlog日志
  • 球球大作战游戏服务器
  • iOS设备投屏Archlinux
  • MYSQL 查询去除小数位后多余的0
  • Linux——守护进程
  • 软考架构师考试-UML图总结
  • EF Core 数据库迁移命令参考
  • KIVI: A Tuning-Free Asymmetric 2bit Quantization for KV Cache
  • 影刀RPA开发-采集爬取京东读书书籍
  • 【React中函数组件和类组件区别】
  • day 22
  • 制作一款打飞机游戏47:跳转
  • ESP32C3连接wifi
  • java架构设计
  • 笔记项目 day02
  • 蓝卓生态赋能“星链计划”火热招募中
  • CAElinux系统详解
  • 保护数据安全的关键一步-安装加密软件
  • 进程与线程:07 CPU调度策略
  • python无法导入自己的包
  • Qt 样式表qss学习
  • 6大住宅代理IP服务商测评(2025更新)
  • 【xxl-job调度器的源码分析】
  • 结构化数据处理
  • GPU服务器集群部署
  • 【越狱检测】HSF: Defending against Jailbreak Attacks with Hidden State Filtering
  • c语言第一个小游戏:贪吃蛇小游戏06