Python - 将matplotlib图像转换为numpy.array 或 PIL.Image

matplotlib是python图像处理中让人又爱又恨的库。最近遇到了需要获取plt图像数据的需求，本文记录了将matplotlib图像转换为numpy.array 或 PIL.Image的方法。

众所周知，这个库处理图像会出现内存泄漏的问题，原想着将plt的图转出来用opencv存就好了，然而并没有，牢骚完毕。

转换思路

总体分为两步完成目标：

• 将plt或fig对象转为argb string的对象
• 将argb string对象图像转为array 或 Image

步骤一

区分对象为plt和fig的情况，具体使用哪种根据对象类型确定

转换plt对象为argb string编码对象

代码在plt对象中构建了图像内容，生成了plt图像，但还没有savefig 和 show：

例如：

plt.figure()
plt.imshow(img)

# 引入 FigureCanvasAgg
from matplotlib.backends.backend_agg import FigureCanvasAgg
# 引入 Image
import PIL.Image as Image
# 将plt转化为numpy数据
canvas = FigureCanvasAgg(plt.gcf())
# 绘制图像
canvas.draw()
# 获取图像尺寸
w, h = canvas.get_width_height()
# 解码string 得到argb图像
buf = np.fromstring(canvas.tostring_argb(), dtype=np.uint8)

转换fig对象为argb string编码对象

以 matplotlab 的 fig 对象为目标，获取 argb string编码图像

# 引入 Image
import PIL.Image as Image
# 绘制图像
fig.canvas.draw()
# 获取图像尺寸
w, h = fig.canvas.get_width_height()
# 获取 argb 图像
buf = np.fromstring(fig.canvas.tostring_argb(), dtype=np.uint8)

步骤二

转换argb string编码对象为PIL.Image或numpy.array图像

此时的argb string不是我们常见的uint8 w h rgb的图像，还需要进一步转化

# 重构成w h 4(argb)图像
buf.shape = (w, h, 4)
# 转换为 RGBA
buf = np.roll(buf, 3, axis=2)
# 得到 Image RGBA图像对象 (需要Image对象的同学到此为止就可以了)
image = Image.frombytes("RGBA", (w, h), buf.tostring())
# 转换为numpy array rgba四通道数组
image = np.asarray(image)
# 转换为rgb图像
rgb_image = image[:, :, :3]

参考资料

• https://blog.csdn.net/aa846555831/article/details/52372884
• https://blog.csdn.net/jpc20144055069/article/details/106628889
• https://blog.csdn.net/aa846555831/article/details/52372884
• https://blog.csdn.net/jpc20144055069/article/details/106628889
• https://blog.csdn.net/guyuealian/article/details/104179723
• https://blog.csdn.net/qq_33883462/article/details/81050795

文章链接：
https://www.zywvvd.com/notes/coding/python/convert-matplotlib-figure-to-array/convert-matplotlib-figure-to-array/