Lattice sensAI

加速网络边缘灵活、低功耗推理的集成

功能全面的Lattice sensAI包括了评估、开发和部署基于FPGA的机器学习和人工智能解决方案所需的一切——模块化硬件平台、演示示例、参考设计、神经网络IP核、软件开发工具和定制设计服务。

莱迪思基于FPGA的机器学习解决方案具有灵活、易于实现、低功耗(不足1mW-1W)、封装尺寸小(最小5.5mm2)、低价适合大批量生产等优势。

莱迪思可以帮助您将实时在线的终端AI加快部署至一系列网络边缘应用,包括移动设备、智能家居、智慧城市、智能工厂和智能汽车等。

Lattice sensAI Solution Stack

跳转到

视频

Lattice FAD sensAI放大图片

莱迪思sensAI:加速实现网络边缘低功耗AI

莱迪思sensAI集合功能全面,包括了开发人员评估、开发和部署基于FPGA的机器学习/人工智能解决方案所需的全部资源——模块化硬件平台、演示示例、参考设计、神经网络IP核、软件开发工具和定制化设计服务。

设计方法概览

sensAI Block Diagram

  • 提供端到端的解决方案,加快产品上市进程
  • 支持的神经网络模型得到优化,更好地搭配现有资源
  • 可以使用Tensorflow 等标准机器学习框架在GPU上进行训练
  • 提供样本数据集以及标记数据集的方法

系统架构示例

下列框图展示了FPGA通常是如何运用到人工智能/机器学习解决方案中的。莱迪思的FPGA能为您构建功能强大、可拓展的AI/ML解决方案,它们同时还具备简单、低功耗、小尺寸等优势。立即查看可供下载和评估的硬件演示吧!

预处理器:CrossLink-NX AI加速器

  • 优化的FPGA架构,采用低功耗工艺(FDSOI)
  • 灵活的接口,通过MIPI CSI-2连接高质量图像传感器
  • 使用AI加速元数据,可通过CSI-2或PCIe传输视频数据

单独运行:基于ECP5和iCE40 UltraPlus FPGA的AI系统

  • 基于ECP5或iCE40 UltraPlus FPGA的实时在线、集成的解决方案
  • 低延迟、更安全
  • FPGA资源可用于系统控制

独立运行的ECP5/iCE40 UltraPlus FPGA

  • iCE40 UltraPlus FPGA用于实时在线的关键词或目标检测应用
  • 只有在需要时才唤醒高性能ASIC/ASSP做进一步分析
  • 降低系统总体功耗

预处理器:ECP5 FPGA AI处理器

  • 基于ECP5的神经网络加速,性能和功耗可调节
  • ECP5 I/O灵活,可无缝连接传感器等现有板载设备
  • 低端MCU用于灵活的系统控制

后处理器:ECP/iCE40 UltraPlus AI加速器

  • 添加AI加速功能而不对系统作重大修改
  • 使用ECP或iCE40 UltraPlus实现性能/功耗可调节
  • ASIC/ASSP进行数据预处理,然后只发送推理数据

参考设计

关键词检测

Reference Design

人员侦测

Reference Design

人员侦测

使用莱迪思sensAI IP持续搜索附近是否有人存在并报告结果。可作修改用于检测其他任何物体。
人员侦测
人脸识别

Reference Design

人脸识别

在ECP5 FPGA上使用卷积神经网络检测人脸,并与已注册的人脸进行匹配。可以用于识别其他任何对象。
人脸识别
对象计数

Reference Design

对象计数

基于莱迪思sensAI的对象计数应用示例。包括SPI、DDR IP模块、ISP引擎、8个CNN引擎和一个计数/标记叠加(overlay)引擎。
对象计数

IP核

CNN Plus加速器IP

IP Core

CNN Plus加速器IP

使用CNN实现超低功耗AI解决方案。最多可配置16位位宽。可搭配莱迪思神经网络编译器软件工具。
CNN Plus加速器IP

开发套件和开发板

Himax HM01B0 UPduino Shield

Board

Himax HM01B0 UPduino Shield

Himax HM01B0 UPduino Shield是一款使用iCE40 UltraPlus™ FPGA提供低成本、低功耗人机交互解决方案的模块化AI开发平台
DPControl iCEVision开发板

Board

DPControl iCEVision开发板

iCEVision是一款专为AI视觉应用打造的快速原型设计平台
DPControl iCEVision开发板

演示示例

关键词检测

Demo

关键词检测

使用Lattice sensAI进行关键词检测
关键词检测
Human Face Identification

Demo

Human Face Identification

Register and identify faces without retraining, eliminating the need for uploading images and lengthy retraining using a GPU.
Human Face Identification
人员侦测

Demo

人员侦测

Uses an artificial intelligence (AI) algorithm to detect human presence with either the powerful ECP5 FPGA, or small, low-power iCE40 UltraPlus FPGA.
人员侦测
人脸检测

Demo

软件工具

Lattice sensAI解决方案包括了全新的神经网络编译器工具,可将使用TensorFlow、Caffe或Keras开发的网络部署到莱迪思FPGA上,而无需RTL设计经验。

随后可以把神经网络编译器的输出整合到标准的莱迪思FPGA开发工具流程中——ECP5使用Lattice Diamond,iCE40 UltraPlus则使用Radiant。最后再部署到系统中的FPGA中。

  • 神经网络编译器——快速分析、模拟和编译不同类型的网络,从而在莱迪思的CNN/轻量化CNN加速器IP核上实现。

定制设计服务

Lattice sensAI拥有来自全球的优质设计服务合作伙伴组成的生态系统,能为广泛的终端应用提供定制化的解决方案,包括移动设备、智能家居、智慧城市、智能工厂和智能汽车等领域。点击此处查看更多关于Lattice sensAI认证合作伙伴的信息。

文档

资讯资源
标题 编号 版本 日期 格式 文件大小
莱迪思sensAI产品手册
I0265 7.0 5/20/2020
标题 编号 版本 日期 格式 文件大小
加速实现网络边缘低功耗人工智能应用
WP-0014 1.1 11/28/2018
为快速增长的网络边缘 人工智能应用提供更高 性能的解决方案
WP-0019_C 1.0 8/17/2019
掌控人工智能的力量:使用 莱迪思sensAI快速上手
WP-0017C 1.0 1/31/2019


获奖情况

2019年Electronics Industry Awards

年度物联网产品

EDN Hot 100产品奖

工具&开发

AI Breakthrough奖

工程领域最佳AI解决方案

2019年度Assodel奖

工业和汽车领域最佳硬件产品奖

《中国电子商情》2018年度编辑选择奖

最具竞争力的FPGA产品

Like most websites, we use cookies and similar technologies to enhance your user experience. We also allow third parties to place cookies on our website. By continuing to use this website you consent to the use of cookies as described in our Cookie Policy.