格子博客bob88体育登陆

分享:

格子突出了灵活的AI / ML开发,并在嵌入式愿景峰会上推出Sensai 4.0 2021

想要嵌入式愿景?得到了mipi?
由Sreepada Hegade发布05/25/2021

发布了

你肯定知道嵌入式愿景峰会(本周发生)是首先会议和博览会,专门用于实用,可部署的计算机视觉和视觉人工智能(AI)和机器学习(ML)。毫不奇怪,格子是一个普通的参展商和演示者在峰会上,它为我们提供了一个很好的机会来突出我们的最新和最大的设备,工具,技术和解决方案。

今年活动是一名发言者,并提出了灵活性AI /毫升开发流程是将产品按时,在预算范围内带到市场上的关键,并具有正确的价值主张。特别是,我专注于AI / ML管道,这些管道针对资源受限的设备,以便在互联网符合互联网符合的边缘和现实世界的接口。

大多数Edge应用都bobappios下载地址有不同类型的传感器,涉及各种电子接口和通信协议。从这些传感器获取的数据通常需要进行预处理和聚合,然后再输入AI/ML引擎进行推断。在许多情况下,需要进行传感器融合;将来自不同来源的传感器数据进行组合的过程,因为组合的信息比单独分析这些来源的不确定性更小。

类似地,神经网络AI / ML推理发动机本身需要灵活。不断介绍新的网络架构,并且新类型的运营商不断到达现场。如果开发团队的AI / ML引擎足够灵活,可以充分利用这些新的发展,然后他们的竞争对手将作为旧谚语“吃午餐”。

在推理之后,需要向目标受众呈现结果,这可能是人类和/或其他机器和系统。在所有情况下,在向其预期观众展示之前,需要在将推理结果进行后处理。

底线是,在开发管道中的每一步都需要灵活性。这就是我们创造了我们的原因晶格sensAI™解决方案堆栈。

Sensai 4.0堆栈
Sensai解决方案堆栈

此堆栈包括硬件平台,IP核心,软件工具,参考设计和演示以及定制设计服务。bob体育软件在硬件平台的情况下,开发人员可以选择各种FPGA系列,包括Lattice Ice40™UltraUplus(适用于超小型、超低功耗应用),bobappios下载地址MachXO3D™(用于平台管理和安全性),Crosslink™-NX.(对于嵌入式视觉应用)和ECP5™(用于通bobappios下载地址用应用)。

FPGA提供可编程输入/输出(I / O),可以配置为支持不同的电接口标准,从而允许它们与各种传感器接口。bob电子竞技俱乐部格子还提供硬度和软件块的聚宝盆,以支持不同的通信协议bob电子竞技俱乐部

下一步是执行预处理和数据聚合,Sensai Stack为裁剪,调整大小和缩放等任务提供了一套IP核心。可编程FPGA结构允许这些计算密集的数据处理任务以大规模平行的方式执行,从而在消耗小功率的同时提供高性能。

如前所述,神经网络本身需要很多灵活性能够支持新的网络拓扑和运营商。bob电子竞技俱乐部Sensai Stack包括一套软的IP神经网络核心和加速器,可以快速,轻松地修改,以完全解决演变的AL / ML景观。

作为灵活性的另一个例子,在sensAI堆栈的多个实现示例中有两个特别有趣。其中,AI/ML推理引擎在可编程结构中实现,从而提供了一种低功耗、高性能的解决方案,适用于高速图像处理应用。bobappios下载地址另一方面,神经网络推理引擎在RISC-V处理器内核上实现,从而为能够在后台安静运行的AI/Ml任务提供了理想的解决方案,如预测性维护应用。bobappios下载地址

引入sensAI工作室

一个真正的“热门消息”项目格子在嵌入式视觉峰会上宣布是堆栈的最新和最大版本,Sensai 4.0.包括对新格子Sensabob电子竞技俱乐部i Studio设计环境的支持,促进了端到端的AI / ML模型培训,验证和编译。

格子Sensai Studio
sensAI解决方案堆栈的新成员是Lattice sensAI Studio,这是一个基于gui的工具,用于训练、验证和编译针对Lattice fpga进行优化的ML模型。该工具可以很容易地利用迁移学习来部署ML模型。

这种基于Web的框架可以在云中或开发人员自己的服务器上托管,支持多个同时使用相同或不同项目的用户。bob电子竞技俱乐部Sensai Studio提供了一种易于使用的基于GUI的环境,允许用户选择目标FPGA,配置I / O,拖放AI / ML型号IP,以及后处理IP,并连接一切都在一起。这个新版本的Sensai还支持晶格推进设计环境,用于加速基于嵌入bob电子竞技俱乐部式RISC-V处理器的开发。

除了Tensorflow AI / ML型号外,Sensai 4.0还包括对Tensorflow Lite的支持,以降低bob电子竞技俱乐部功耗,并在AI / ML推理应用中提高数据加工性能(Tensorflow Lite在晶格FPGA上比速度更快地运行2到10倍。bobappios下载地址在ARM®Cortex-M4的MCU上进行)。此外,通过利用ML模型压缩和修剪的进步,Sensai 4.0可以通过QVGA分辨率或具有VGA分辨率的QVGA分辨率或30 FPS支持60 FP的图像处理。bob电子竞技俱乐部

Sensai Studio还支持最新和bob电子竞技俱乐部最伟大的AI / ML设计技术,例如传输学习,其中为一个任务开发的模型被重用为相关任务,或者为模型提供执行新任务的起点。转移学习对于采取您已经在一个处理器上培训的AI / ML型号,如微控制器,并将该模型转移到更小的性能,而且像格子FPGA一样更高的性能。

分享:

与大多数网站一样,我们使用cookie和类似的技术来增强您的用户体验。我们还允许第三方在我们的网站上放置Cookie。通过继续使用本网站,您同意使用cookie,如我们所述Cookie政策