OpenCV-Python图像转换为PyQt图像的变形及花屏无法正常显示问题研究

☞ ░ 前往老猿Python博文目录 ░

一、引言

在《PyQt转换显示Python-OpenCV图像实现图形化界面的视频播放》介绍了实现在OpenCV和PyQt之间转换并传递图像实现在PyQt上播放视频图像的功能。其中的关键函数如下：

def cvImgtoQtImg(cvImg): #定义opencv图像转PyQt图像的函数
    QtImgBuf = cv2.cvtColor(cvImg,  cv2.COLOR_BGR2BGRA)

    QtImg = QtGui.QImage(QtImgBuf.data, QtImgBuf.shape[1], QtImgBuf.shape[0], QtGui.QImage.Format_RGB32)
    
    return QtImg

但在使用该函数将一系列图像转换并用PyQt显示时，发现部分时候存在变形或花屏。下图为截取的原图样例：
在这里插入图片描述
下图是部分效果图以及老猿测试时改变转换类型时转换后展示的效果图：

相关图形处理后的结果并不非常固定。

二、问题分析结论

针对上面的问题，老猿参考相关资料，并反复测试和分析，最后得到如下结论：
1、OpenCV的图像确实是BGR类型，包括VideoCapture和imread读取图像都是，而PyQt都是RGB类型，二者需要转换，而上面函数中的转换并不是完成BGR到RGB的转换，而是BGR到BGRA的转换，所以这种处理会导致图像颜色发生变化；
2、OpenCV彩色图像到PyQt彩色图像，需要变换到四通道图像RGBA格式才能完全不变形的显示图像，这儿的原理老猿还没弄清楚，但测试效果就是这样；
3、QImage对象构建时，图像的类型不应该使用Format_RGB32，而应该选择Format_RGB888，这二者是有区别的，关于这点请参考下面介绍的参考博文。

三、优化后的代码

考虑灰度图像的支持，该函数完善后的代码如下：

def cvImgtoQtImg(cvImg,isConvertToGray=False):  # 定义opencv图像转PyQt图像的函数
    if isConvertToGray:
        QtImgBuf = cv2.cvtColor(cvImg, cv2.COLOR_BGR2GRAY)
        QtImg = QtGui.QImage(QtImgBuf.data, QtImgBuf.shape[1], QtImgBuf.shape[0], QtGui.QImage.Format_Grayscale8)
    else:        
        QtImgBuf = cv2.cvtColor(cvImg, cv2.COLOR_BGR2RGBA)
        QtImg = QtGui.QImage(QtImgBuf.data, QtImgBuf.shape[1], QtImgBuf.shape[0], QtGui.QImage.Format_RGBA8888 )
        
    return QtImg

这样优化以后，所有OpenCV的图像都能完整的在PyQt中使用，没有任何变形。

参考博文：

感谢CSDN博主"草帽小子说编程"的《QImage图像格式解读》，为本文相关测试提供了关键的帮助。

关于老猿的付费专栏

老猿的付费专栏《使用PyQt开发图形界面Python应用》专门介绍基于Python的PyQt图形界面开发基础教程，付费专栏《moviepy音视频开发专栏》详细介绍moviepy音视频剪辑合成处理的类相关方法及使用相关方法进行相关剪辑合成场景的处理，两个专栏加起来只需要19.9元，都适合有一定Python基础但无相关专利知识的小白读者学习。这2个收费专栏都有对应免费专栏，只是收费专栏的文章介绍更具体、内容更深入、案例更多。

付费专栏文章目录：《moviepy音视频开发专栏文章目录》、《使用PyQt开发图形界面Python应用专栏目录》。

关于Moviepy音视频开发的内容，请大家参考《Python音视频剪辑库MoviePy1.0.3中文教程导览及可执行工具下载》的导览式介绍。

对于缺乏Python基础的同仁，可以通过老猿的免费专栏《专栏：Python基础教程目录》从零开始学习Python。

如果有兴趣也愿意支持老猿的读者，欢迎购买付费专栏。