瑞萨和Syntiant开发了语音控制的多模态AI解决方案

文章：Renesas Electronics Corp.

Renesas Electronics Corp.和Syntiant Corp.共同开发了一种语音控制的多模式AI解决方案，可实现低功耗非接触式操作，用于视觉AII的IOT和边缘系统中的图像处理，例如自助结账机，安全摄像机和视频会议系统，以及机器人清洁设备等智能设备。

新解决方案结合了Renesas RZ/V系列视觉AI微处理器单元(MPU)和Syntiant NDP120神经决策处理器，提供先进的语音和图像处理能力。该联合解决方案的特点是始终开机功能，从待机模式快速语音触发激活，以执行物体识别、面部识别和其他基于视觉的任务，这是安全摄像头和其他系统的关键功能。例如，用户定义的语音提示驱动激活和系统操作，而视觉人工智能识别跟踪操作人员的行为，控制操作，或在检测到可疑行为时发出警告。

多模式架构使得更容易为基于Vision AI的系统创建非接触式用户体验。使用专用的功能高效芯片进行语音识别可降低待机功耗，同时加速系统开发，因为可以独立于视觉AI功能开发软件。

“我们预计对使用多级输入信息流的多式联运系统的需求 - 既有图像和语音一样，将增加向前发展，以改善易用性和安全性，”SoC业务高级副总裁Hiroto Nitta说在瑞萨的IOT和基础设施业务部门。“通过瑞萨之间的合作，低功率图像AI技术的领导者，语音AI技术领导者，我们将加快嵌入式系统中的低功耗，超小型智能语音AI技术，并提供新的全球客户综合解决方案。“

“基于语音的用户界面将使客户能够提供新的用户体验，从而从概念到现实中的下一代创新思想，”Syntiant Ceo Kurt Busch说。“我们已经全球发货了超过1500万我们的深度学习NDP，以便在各种消费和工业物联网应用中实现始终如一的声音。我们与瑞萨的合作提供了强大，低功耗的语音和图像解决方案，肯定会在各种设备和用例中加速全球客户群之间的牵引力。“

Vision AI的Renesas Rz / V系列MPU包括瑞萨的独家DRP-AI（动态可重新配置的处理器-AI）加速器，并结合高精度的AI推理，并在行业中最好的功率效率。这种卓越的功率性能消除了诸如散热器或冷却风扇的热分散措施的需要，这减少了材料清单（BOM）成本，并使得可以将视觉AI集成到广泛的嵌入式应用中。

Syntiant NDP120芯片集成了先进的人工智能功能，可用于实现许多高精度、免提语音功能，包括说话人识别、关键字检测、多个唤醒词和本地命令识别。与Syntiant Core 2神经网络推理引擎打包，NDP120还可以同时运行多个应用程序，同时将功耗降至1mW电池功率。

新的语音控制的多模式AI解决方案采用来自更广泛的Renesas产品组合的多个相互兼容的设备，为客户提供高架的原型平台，以便更快地推销和降低风险。新解决方案是瑞萨的胜利组合的一部分，它具有引人注目的模拟，电源和嵌入式加工产品组合，帮助客户加速其设计并更快地播放市场。万博投注网址