嵌入式视觉高峰:微小fpga上的ML感知

文章：Nitin Dahad

使用MilliWatt的电力，您可以在FPGA上实施多少人工智能？您可以在智能互联网（IOT）设备中实现有效的人工智能（AI）推断如何才能实现速度？这些是莱迪思半导体希望在本月的虚拟中寻址的问题嵌入式视觉峰会2020年9月15日至25日。

在题为“基于机器学习的微型、低功耗FPGA感知”的演讲中，Lattice Semiconductor的研发人员Hoon Choi将演示如何实现手势分类、人类检测和计数、局部人脸识别、位置特征提取、正面面向人体检测和肩冲浪检测等。

Choi将介绍Lattice Semiconductor紧凑的处理引擎结构，可以容纳不到5K的FPGA查找表，但可以支持各种规模的网络。他描述了如何选择网络，以及如何进行优化，使其适合于低功耗和低成本的边缘应用。他还谈到了如何利用FPGA的动态自重构能力，使处理引擎和神经网络序列在单个FPGA中运行。

莱迪思半导体最近宣布了其CrossLink-NX系列的第二款嵌入式视觉和处理fpga。新设备CrossLink-NX-17拥有17K逻辑单元，而之前的CrossLink-NX-40拥有39K逻辑单元，自2019年以来一直在批量发货。CrossLink-NX系列是使用Lattice Nexus平台设计的，这是一个使用28nm FD-SOI制造工艺的低功耗FPGA平台，并具有栅格设计的FPGA织物架构，优化了在小体积因子下的低功耗运行。

在嵌入式视觉峰会上的演示将包括一个执行人体存在检测和计数的CrossLink-NX FPGA，而另一个CrossLink-NX板将演示该设备的摄像头聚合能力，用于嵌入式视觉应用。此外，Lattice sensAI用户感知套件将展示一个微型、超低功耗的iCE40 UltraPlus FPGA，使用sensAI算法在计算机工作站检测和分析人类活动。

在合作伙伴演示中，Lattice将与Helion-Vision合作，将其IONOS ISP(图像信号处理)IP组合应用于Lattice CrossLink-NX和ECP5 fpga。这次演示将展示Helion-Vision的图像处理算法的质量，以及图像叠加等可选功能。Ignitarium Technology Solutions是应用人工智能技术的专家，将展示Lattice ECP5 FPGA中的ML/AI算法如何高效地执行复杂任务，比如在输送带上移动时识别缺陷产品。

根据BCC研究公司的一份报告，电脑视觉和机器视觉在日常生活中2019年，计算机和机器视觉的全球市场价值149亿美元，到2024年将增长到260亿美元。晶格说它可以帮助开发人员解决这一需求的嵌入式智能视觉应用程序和各种低功耗fpga和解决方案堆栈,使快速和容易实现的应用程序(如视频信号连接,聚合和分裂,图像处理,人工智能/毫升推断法用于列车智能视觉模型。

Peiju Chiang，格子的产品营销经理说：“与Crosslink-NX-17一起，Lattice为开发人员提供了一种更多的硬件电源和性能选择，可以选择他们设计视觉系统。”他补充说，它的MVISION解决方案堆栈通过提供模块化硬件开发板，它通过提供模块化硬件开发板进一步加速并简化了视觉系统开发，它的晶格FPGA，如Crosslink-NX，它的光发光板设计软件，嵌入式视觉IP，以及实现流行的嵌入式视觉应用所需的参考设计万博投注网址。