使用卷积的图像处理

Question

好吧，我正在尝试在灰度图像上进行卷积，但是当我在rgb图像上搜索卷积时，找不到令人满意的解释。 如何将卷积应用于RGB图像？

Answer 1

向量的线性组合可以通过线性组合相应的向量元素来计算：

a * [x1, y1, z1] + b * [x2, y2, z2] = [a*x1+b*x2, a*y1+b*y2 , a*z1+b*z2]

由于卷积是线性运算（即，对邻域中的每个像素加权并累加结果），因此可以将卷积独立地应用于每个RGB通道（例如，使用MATLAB语法）：

img = imread(...);
img(:,:,1) = conv2(img(:,:,1),kernel);
img(:,:,2) = conv2(img(:,:,2),kernel);
img(:,:,3) = conv2(img(:,:,3),kernel);

Answer 2

您可以通过两种不同的方式进行查看：首先，您可以将彩色图像转换为具有法向矢量的强度图像。 最适用的是（.299，.587，.114），这是自然灰度转换。 要获得强度，您需要转换I = .299 * R + .587 * G + .114 * B。

如果您正在设计自己的卷积网络并打算将彩色通道保留为输入，则只需将彩色图像视为具有3个通道的4D张量即可。 例如，如果您有一个（hxw）图像，则张量大小为（1 xhxwx 3），并且您可以使用大小为（kh x kw x 3 xf）的过滤器，其中kh和kw是您的过滤器大小，f是必需的输出特征。