linux-kernel - Linux在哪里调用摄像头驱动进行图像传输
问题描述
OV5640 摄像头的Linux 驱动程序提供了有限的功能。
static struct i2c_driver ov5640_i2c_driver = {
.driver = {
.name = "ov5640",
.of_match_table = ov5640_dt_ids,
},
.id_table = ov5640_id,
.probe = ov5640_probe,
.remove = ov5640_remove,
};
这些功能name
是probe
和remove
。
我对驱动程序不是很熟悉,但我找不到渲染像素的驱动程序的任何部分,因此我可以将它们存储到数组中。我也找不到任何用于读取像素的虚拟内存地址。
捕获的图像数据传输发生在代码的哪一部分?我正在寻找两个位置:一个在驱动程序中,另一个在调用驱动程序的更高级别。
解决方案
简短的回答
您可以从以下位置捕获视频帧:
- 找出你的 IPU 驱动程序在哪里并在那里嗅探数据。
- 使用 V4L2 API 编写用户空间应用程序来捕获帧。
第二个选项是首选且更容易。
详细解答
这里有三个驱动因素:
- 相机驱动程序:通过 I2C 实现控制路径(例如启动流)
示例:"ovti,ov5640"
- CSI Receiver driver(CSI-2主机控制器驱动程序):基本上是一个PHY,它将CSI-2数据格式转换为IPU的一些内部数据格式。
示例:"fsl,imx6-mipi-csi2"
- IPU(图像处理单元)驱动:实现了很多功能,例如图像DMA,视频捕获等。
示例:"fsl,imx6q-ipu"
- 捕获子系统驱动程序可以与 IPU 驱动程序分开。
示例:"fsl,imx-capture-subsystem"
- 捕获子系统驱动程序可以与 IPU 驱动程序分开。
有时 CSI RX 和 IPU 驱动程序组合成单个 IP 核(如 TI AM57xx 芯片中的视频输入端口)。有时视频捕获可以在单独的驱动程序中实现(尽管它是 IPU 的一部分)。这只是您正在处理的平台架构问题,但主要思想是相同的。
看看这张照片:
因此,如果您正在寻找一个挂钩数据的地方,它应该位于以下位置之一:
- 在您的 IPU 驱动程序中:驱动程序可能正在将 DMA 传输到 RAM,将该 RAM 位置提供给 V4L2。在那里您可以尝试嗅探图像数据。由于您没有参考您的平台,因此您需要自己找到该驱动程序。看看里面
drivers/media/platform/
和里面drivers/staging/media/
,它应该在那里的某个地方。此外,浏览您的设备树文件,ov5640
节点应在节点中引用 CSI/IPU 驱动程序port
。 - 在您的用户空间应用程序中:V4L2 用户空间界面允许您捕获视频帧;有关详细信息,请参阅此示例。
您可以尝试通过一些已知的 V4L2 常量 grepping 内核源代码树来找到您的捕获驱动程序,例如:
$ grep -lIr V4L2_BUF_TYPE_VIDEO_CAPTURE drivers/media/platform/* drivers/staging/media/*
或尝试从您的设备树文件中找到它。例如,在 iMX6 平台上,所有相关节点如下所示:
ov5640: camera@3c {
compatible = "ovti,ov5640";
port {
ov5640_to_mipi_csi2: endpoint { remote-endpoint = <&mipi_csi2_in>; };
};
};
mipi_csi: mipi@21e0000 {
compatible = "fsl,imx6-mipi-csi2";
port@0 {
mipi_csi2_in: endpoint { remote-endpoint = <&ov5640_to_mipi_csi2>; };
};
};
ipu1: ipu@2800000 {
compatible = "fsl,imx6q-ipu";
ipu1_csi0: port@0 { };
};
capture-subsystem {
compatible = "fsl,imx-capture-subsystem";
ports = <&ipu1_csi0>;
};
但我建议您尝试从用户空间应用程序捕获视频帧,就像在这里完成的那样,因为在内核驱动程序中这样做可能是一项艰巨的任务。此外,在用户空间应用程序中,将捕获的帧保存到 jpg 文件会更容易,就像在这里完成的那样。
iMX6 资源
那里有很多关于 iMX6 wrt 相机的文档:
推荐阅读
- node.js - NodeJS cloudinary search API by context
- javascript - Axios 参数不起作用,但硬编码的 url 有效?
- c# - 如何在 datagridview c#.net 中使 DataGridViewButtonColumn 的标题不可点击
- javascript - ffmpeg 的问题(不加载歌曲?) - ffmpeg 流:写 EPIPE
- java - Java:如何防止我的函数打印尾随逗号?
- angularjs - 输入和提交的内容仍然连接
- python - 从 DB 触发带有日期时间的预定事件的最佳工具是什么?
- mysql - ERROR 1356 (HY000): View 'mysql.user' references invalid table(s) or column(s) or function(s) or definitioner/invoker of view缺少使用它们的权限
- r - ggplot2:条形图中的y轴缩放问题
- java - 如何在主类中调用数组方法