首页 > 解决方案 > 需要使用 QT QOpenGLWidget 渲染 YUV 帧(来自 ffmpeg 的 AVFrame)

问题描述

我有一个来自 FFMPEG 的 YUV 格式的 AVFrame。我想使用来自 QOpenGLWidget 和 QOpenGLFunctions 的 qt 派生类来渲染它。

我是 qt 和 OpenGL 的初学者。

有人可以帮忙吗?

谢谢阿斯温

标签: qtffmpegyuvqopenglfunctions

解决方案


好吧,实际上,如果您需要实现一个真正快速渲染的播放器,您将不得不处理缓冲区优化、离屏渲染、缓冲区流——其中的一些东西。但就 Qt 新手而言,有一些简单但有效的解决方案:

  1. 试试 AV_PIX_FMT_RGBA 像素格式,将一个简单的纹理渲染成一些绘图表面矩形就足够简单了。
  2. 当我想自己尝试相同的方法时,发现了这个很棒的家伙,他在这里实现了完整的工作示例

上面链接中的 QFFmpegGLWidget 类足以让您理解。转换为 RGB 是通过片段着色器完成的,使用 GL_LUMINANCE 应用的 3 个纹理的好老技巧在那里工作。

我在自己的几乎类似的解决方案中苦苦挣扎,但是从相机(rtsp)中得到了错误、混乱的颜色。因此,请确保您在YUV420p获得帧。如果其他像素格式更适合您,请查看这些中文资源以更深入地了解它(谷歌翻译使它们易于阅读):

  1. YUV 着色器转换
  2. YUV 2 RGB 数学

祝你好运!


推荐阅读