优秀的 Verilog/FPGA开源项目介绍（六）- MIPI

MIPI DPHY RX实现方案

方案一

使用自带DPHY的FPGA

带有DPHY的专用FPGA。目前国内一些FPGA厂商是有的，如高云的FPGA是有自带DPHY（小蜜蜂家族），xilinx的UltraScale系列支持MIPI D-PHY接口，Altea/Intel、Lattice等最新系列FPGA也是具有这一接口的。

使用FPGA自带的DPHY好处就是可以降低电路的复杂度及提高系统稳定性。但是需要注意一点这种方案也是要看FPGA内嵌DPHY的版本及完成度，能不能达到MIPI的速度还是要看具体芯片的数据手册。

高云DPHY的介绍

xilinx的UltraScale系列DPHY说明

Lattice CrossLink系系列DPHY说明

方案二

使用专门ASSP芯片转换到LVDS

这种方案就不需要介绍了，专用ASIC（MC系列这种方案可以支持到2Gbps/Lane速率以上，只要FPGA的IO速率够用），方案不及自带DPHY的方案，但是也足够用了，综合考虑方案的成本，这种方案也是目前很多公司选用的方案。

MC系列IC的DPHY解决方案

方案三

电阻网络方案

可以参考xilinx官方文档xapp894，要求800M Hz以下，走线30mm以内。说白了只能用用而已。

电阻网络方案示意图

为什么介绍这几种方案呢？因为开源的MIPI项目的前提是你需要有DPHY。

0、MIPI Alliance (MIPI联盟)

❝https://www.mipi.org/❞

MIPI Alliance 是一个全球协作组织，为开发移动和受移动影响的设备的行业提供服务。该组织的重点是设计和推广硬件和软件接口，以简化设备内置组件的集成，从天线和调制解调器到外围设备和应用处理器。MIPI 联盟制定其所有规范以满足移动设备所需的严格操作条件：高带宽性能、低功耗和低电磁干扰 (EMI)。

PS：这两次为什么都把相关官网放到前面呢？因为每次大家都会在后台找我要XX接口的协议文档，所以后面我会先把相关官网放到前面，上面下载文档不仅免费，主要是权威和“新鲜”。

1、mipi_csi_receiver_FPGA

❝https://github.com/circuitvalley/mipi_csi_receiver_FPGA❞

这个是一个完整的项目了，实现了一个UVC摄像头，IMX219(索尼)摄像头（MIPI）进入FPGA通过FX3(USB PHY)出去，实现整个数据流，需要IP的自己可以提取，唯一的缺点是使用了Lattice平台去雁阵（不能算是缺点，只是国内用户较少），但是该项目未使用任何针对FPGA 的IP，纯HDL，因此可以轻松移植到任何 FPGA上（资源够的情况）。

项目简介

此项目包含用于通用 FPGA CSI 接收器的硬件、Verilog 源码和 USB3.0 视频设备类 (UVC) 控制器 C语言源码（固件），该项目未使用任何针对FPGA 的IP，纯HDL，因此可以轻松移植到任何 FPGA上（资源够的情况）。

支持帧率从 15 到 1000 FPS，分辨率从 640x80 到 8M 3280x2464。

1080p 60FPS 时的最大数据速率约为 2Gbps。

通过 UVC 控制帧速率和分辨率。手动曝光和手动亮度控制，饱和度控制。还可以使用映射伽马控制启用测试图案。

目前测试完成的案例：

代码语言：javascript复制

3280x2464 15FPS
1920x1080 60FPS
1920x1080 30FPS
1280x720 120FPS
1280x720 60FPS
1280x720
30FPSx 80x1080
30FPS
640PS 640PS
20 FPS 8080 30FPS 8040FPS 8080 40PS0

TODO：需要在 FPGA 端进行改进以实现自动曝光、亮度和白平衡校正。

PS：链接中有视频演示

下面的项目与此类似就不展开介绍了：

❝https://github.com/circuitvalley/USB3_MIPI_CSI2_RX_V2_Crosslink_NX❞
❝https://github.com/cudnn/USBtoMIPI❞

2、mipi-demo

❝https://github.com/hdl-util/mipi-demo❞

可以触摸的实现方案。

简介

整个方案为 Raspberry Pi Camera v1.1 (OV5647)（mipi接口，可能是最便宜的MIPI摄像头）通过 HDMI 的实时显示。

模块介绍：

hdl-util/hdmi : 通过HDMI传输视频/音频

hdl-util/mipi-ccs：使用MIPI CCS控制相机

hdl-util/i2c : I2C主控

hdl-util/mipi-csi-2：使用MIPI CSI 2 的摄像机视频接收

hdl-util/sdram-controller : SDRAM控制器

hdl-util/clock-domain-crossing : FPGA 上时钟域交叉的实用程序

hdl-util/gray-code : 任意宽度的格雷码

演示

3、MIPI_RX_ST

❝https://github.com/vidor-libraries/MIPI_RX_ST❞

该项目包含一个MIPI_RX_ST IP核，端口描述如下：

MIPI_RX_ST IP 从 MIPI CSI2 中提取 8 位原始数据并输出包含 4:4:4 RGB 视频的视频流。

视频数据专门从cMIPI_HT_RAW8（十进制42）数据包中提取，并通过二维插值将bayer转换为4:4:4:RGB；为此，我们将数据记录在行缓冲区中以存储前两行。行缓冲区有 32 位，其低 16 位包含前一行，而其高 16 位包含倒数第二行。总共有 3 行，最多可以使用 5 个像素进行插值，具体取决于数据类型。