莱迪思（LATTICE）CrossLink-NX：用于嵌入式视觉处理的FPGA 实现MIPI桥接和网络边缘AI

 

基于莱迪思Nexus平台构建——结合了28 nm FD-SOI技术和优化的FPGA架构，减少了100倍的软错误率，与同行相比功耗降低达75%，采用小尺寸封装，最小仅为4 mm x 4 mm。

 

为视觉处理应用提供业界最佳的性能——高存储与逻辑单元比，每逻辑单元高达170 bit，加速AI推理。

 

高速接口——2.5 Gbps硬核MIPI D-PHY、5 Gbps PCIe、1.5 Gbps可编程IO、1066 Mbps DDR3。支持LVDS、subLVDS、OpenLDI (OLDI)、SGMII。 FPGA架构可实现信号聚合、复制和拆分。

 

莱迪思（LATTICE）CrossLink-NX特性

 

• 瞬时配置——3 ms 内完成IO配置，器件配置最快8 ms
• FD-SOI可编程反馈偏压可针对每款器件的性能/功耗进行优化
• 两个硬核4通道MIPI D-PHY收发器，速率为10 Gbps/PHY
• 多达37个可编程可编程源同步IO对，用于连接摄像头和显示器
• 封装尺寸从4 mm x 4 mm WLCS封装（0.4 mm引脚间距）到17 mm x 17mm BGA封装（0.8毫米引脚间距）不等
• 同类产品中软错误率最低，与同行相比，可靠性提升100倍

 

实现网络边缘AI

• 将一个或多个CSI-2图像传感器桥接至处理器接口（PCIe、CMOS、CSI-2）
• 多达3 Mb的内部RAM可用于处理
• 对象检测/计数应用中承担CPU部分推理功能
• 在单个器件中集视频桥接和网络边缘AI

 

传感器聚合

• 将多达11个MIPI CSI-2图像传感器聚合到单个MIPI CSI-2输出中
• 将数据拼接到较大的水平视频帧中
• 使用外部DDR存储器将数据拼接到较大的垂直视频帧中
• 使用唯一的虚拟通道编号仲裁来自图像传感器的数据
• 扩展处理器上有限的传感器接口，连接更多传感器

 

图像传感器处理

• 将一个或多个CSI-2 图像传感器桥接至处理器接口（PCIe、CMOS、CSI-2）
• 集成了全功能通用视频处理流水线
• 使用示例：Debayer、颜色校正矩阵、RGB增益、伽玛校正等
• 承担处理器的ISP功能

 

信号拆分或复制

将CSI-2 / DSI的输入信号拆分或复制到多个视频输出（最多14个）

在注重安全的应用中为传感器数据提供冗余

轻松实现需要一个输入到多个显示输出的应用

 

Lattice代理商提供更多关于CrossLink-NX的介绍，为客户提供从专业技术支持到整体解决方案的全套服务。