格子Sensai堆栈

加速柔性、低功耗推理在边缘的集成

全功能leasticeSensai堆栈包括您需要评估,开发和部署基于FPGA的机器学习/人工智能解决方案的一切 - 模块化硬件平台,示例演示,参考设计,神经网络IP核心,开发软件工具以及定制设计bob体育软件服务。

Lattice的基于fpga的机器学习解决方案高度灵活、易于实现、低功耗(低于1w - 1w)、体积小(封装尺寸从5.5 mm开始)2)并定价高批量生产。

格子可以帮助您加快始终如一地部署On-Device AI,进入各种边缘应用,包括移动,智能家居,智能城市,智能工厂和智能汽车产品。bobappios下载地址

4.0 sensAI堆栈

跳到

视频

格子时尚sensAI展开映像

格阵感应:加速边缘低功率AI

全功能的Lattice sensAI堆栈包括开发人员评估、开发和部署基于fpga的机器学习/人工智能解决方案所需的一切——模块化硬件平台、示例演示、参考设计、神经网络IP核、开发软件工具和定制设计服务。bob体育软件

设计方法概述

sensAI框图

  • 使用Tensorflow等标准机器学习框架进行培训
  • 提供了为提供晶格设备定制的NN模型
  • bob体育软件下载或通过sensAI Studio提供的流行用例参考设计
  • 基于Verilog基于FPGA的硬件实现使用格式辐射或钻石

基于软件的方法

基于软件的方法

  • 使用TensorFlow进行培训,并转换为TF Lite
  • 使用Lattice Propel在FPGA中构建SoC,包括优化的ML加速
  • 基于c++软件的FPGA实现,使用方便
  • 提供bob体育软件了用于下载的参考设计

系统架构的例子

下面的图表是如何通常使用fpga为AI/ML解决方案供电的示例。晶格fpga为您提供了一个强大的、可扩展的AI/ML解决方案,简单、低功耗和小占用空间。向下滚动查看可以下载和评估的硬件演示。

预处理器:Crosslink-NX AI加速器

  • 优化的FPGA架构基于低功耗过程(FDSOI)
  • 灵活的接口,通过MIPI CSI-2连接高质量的图像传感器
  • 支持视频数据通过CSI-2或PCIe,支持AI加速元数据

单机:启用ECP5/iCE40 UltraPlus FPGA AI系统

  • ECP5或ICE40 UltraPlus FPGA的始终如一,集成解决方案
  • 低延迟和安全实现
  • FPGA资源可用于系统控制

Preprocessor: iCE40 UltraPlus Event Trigger

  • ICE40 UltraPlus FPGA始终接通密钥短语或物体
  • 仅在需要时唤醒高性能ASIC / ASSP,仅供进一步的分析
  • 减少整体系统功耗

预处理器:ECP5 FPGA AI处理器

  • 基于ECP5的神经网络加速可扩展性能/功率
  • 基于ECP5的I / O灵活性,可无缝接口到板载遗留设备,包括传感器
  • 低端MCU,用于灵活的系统控制

后置处理器:ECP/iCE40 UltraPlus AI Accelerator

  • 添加AI加速,而无需对系统的重大修改
  • 可扩展的性能/功率与ECP或iCE40 UltraPlus
  • ASIC / ASSP可以处理数据预处理并仅通过推理数据

bob体育软件

手势检测

参考设计

手势检测

实现基于低功耗AI的系统,以使用IR图像传感器检测手势
手势检测
关键词检测

参考设计

关键词检测

通过数字MEMS麦克风连续搜索关键短语。可以重新配置,以配合任何训练过的单词或短语。
关键词检测
人脸识别

参考设计

人脸识别

在ECP5 FPGA中使用卷积神经网络来检测人脸,并与已知的注册面匹配。可以调整与任何其他对象一起使用。
人脸识别
人体存在检测

参考设计

人体存在检测

使用格子Sensai IP不断搜索人类和报告结果的存在。可以调整以检测任何其他对象。
人体存在检测
对象计数

参考设计

对象计数

一个基于Lattice sensAI堆栈的对象计数应用示例。包括SPI, DDR IP块,ISP引擎,8个CNN引擎和一个计数/覆盖引擎
对象计数

IP核

CNN加速器IP

IP核心

CNN加速器IP

使用来自普通或自定义网络的CNN来实现AI解决方案。配置最多16位的宽度。使用点阵神经网络编译软件工具。
CNN加速器IP
CNN Compact Accelerator IP

IP核心

CNN Compact Accelerator IP

用MW范围内实现具有电力消耗的CNN或BNN的AI解决方案。使用点阵神经网络编译软件工具。
CNN Compact Accelerator IP
CNN Plus加速器IP

IP核心

CNN Plus加速器IP

利用cnn实现超低功耗AI解决方案。配置最多16位的宽度。使用点阵神经网络编译软件工具。
CNN Plus加速器IP

开发套件和董事会

嵌入式视觉开发工具包

木板

嵌入式视觉开发工具包

三板视频接口平台(VIP)模块化套件。包括2个MIPI / D-PHY相机输入,FPGA处理,HDMI输出。可提供更多输入/输出板。
嵌入式视觉开发工具包
Crosslink-NX语音和视觉机器学习板

木板

Crosslink-NX语音和视觉机器学习板

为使用Lattice sensAI和CrossLink-NX的低功耗机器学习应用bobappios下载地址而设计。包括图像传感器、麦克风、HyperRAM和扩展端口。
Crosslink-NX语音和视觉机器学习板
Crosslink-NX VIP传感器输入板

木板

Crosslink-NX VIP传感器输入板

旨在与格子嵌入式视觉开发套件一起使用。包括带有Crosslink-NX的嵌入式视频应用的4个摄像机输入和超帧bobappios下载地址
Crosslink-NX VIP传感器输入板
HM01B0 UPduino盾

木板

HM01B0 UPduino盾

一个完整的开发工具包,用于实现人工智能(AI),将视觉和声音作为感官输入,以低成本、低功耗的iCE40 UltraPlus FPGA。
HM01B0 UPduino盾
DPControl IceVision板

木板

DPControl IceVision板

高度灵活可扩展的原型平台,用于基于视觉的AI和许多其他吞吐量
DPControl IceVision板

演示

手势检测

演示

手势检测

使用小型、低功耗的iCE40 UltraPlus FPGA,使用人工智能(AI)实现手势检测算法
手势检测
人脸检测

演示

人脸检测

使用格子Sensai IP在微小的低功耗ICE40 UltraPlus FPGA上检测人的脸部在边缘实现AI。适用于检测其他物体。
人脸检测

软件工具

Lattice sensAI解决方案栈包括神经网络编译器,用于将TensorFlow、Caffe或Keras开发的网络轻松集成到Lattice fpga中,无需之前的RTL经验。

然后,可以将神经网络编译器的输出集成到标准格子FPGA开发工具流动中 - 用于ECP5的格子钻石,或用于ICE40 UltraPlus的Radiant,最后部署到系统中的FPGA。

  • 神经网络编译器- 快速分析,模拟和编译各种网络以实现晶格CNN / CNN紧凑型加速器IP核心。
  • 晶格的软件FPGA设计工具,用于设计创建,导入IP,实现,位流生成,下载位流到FPGA。bob电子竞技俱乐部支持iCE40版本的UltraPlus设备。
  • 晶格钻石软件- 针对ECP5 FPGA的FPGA设计和探索工具。
  • 格子推进软件- 软件设计,汇编和部署硬件设计中的软SOC设计,进入Lattice的FPGA。
  • 晶格sensAI工作室- 结束到终端模型动物园,数据标签,模型培训,验证和部署工具。

点阵用户在场意识工具包

具有Windows应用程序的演示套件展示了计算机愿景,使PC中的电池寿命延长。

定制设计服务

Lattice sensAI堆栈包括一个精选的全球设计服务合作伙伴生态系统,可以为一系列终端应用提供定制解决方案,包括移动、智能家居、智能城市、智能工厂和智能汽车。bobappios下载地址点击这里了解更多信息格子Sensai认证合作伙伴

文件

信息资源
标题 数量 版本 日期 格式 大小
格子Sensai Stack产品手册
I0265 7.0 5/20/2020 PDF. 1.1 MB.
标题 数量 版本 日期 格式 大小
加速边缘低功率人工智能的实施
WP-0014 1.1 11/28/2018 PDF. 1.2 MB.
人工智能的不断提升要求更高的性能解决方案
WP-0019. 1.0 2019年8月17日 PDF. 1.1 MB.
利用AI的力量:轻松从格子的敏感开始
WP-0017. 1.0 1/31/2019 PDF. 2.3 MB.

*点击“更改通知我”按钮,表示您同意接收您所选文件的更改通知。

2019年电子业大奖

物联网年度最佳产品

EDN HOT 100产品奖

工具和开发

AI突破奖

最佳基于人工智能的工程解决方案

Assodel奖2019

最佳工业和汽车相关硬件产品

中国电子市场2018年编辑的选择奖

最具竞争力的FPGA产品

与大多数网站一样,我们使用cookie和类似的技术来增强您的用户体验。我们还允许第三方在我们的网站上放置Cookie。通过继续使用本网站,您同意使用cookie,如我们所述Cookie政策