具有OpenCV和Python的去歪斜文本（RotatedRect，minAreaRect）

Question

我是OpenCV的新手，我想对具有倾斜文本的图像进行偏移校正。 首先，我在GrayScale中读取图像并将其二值化，然后尝试执行以下操作 ：

import cv2
import numpy as np

img = cv2.imread('m20.jpg',0)
ret,byw = cv2.threshold(img,127,255,cv2.THRESH_BINARY_INV)
_, contours, hierarchy = cv2.findContours(byw.copy(), cv2.RETR_TREE,cv2.CHAIN_APPROX_SIMPLE)
cnt = contours[0]
draw = cv2.cvtColor(byw, cv2.COLOR_GRAY2BGR)
rect = cv2.minAreaRect(cnt)
box = cv2.boxPoints(rect)
box = np.int0(box)
cv2.drawContours(draw, [box], 0, (0, 255, 0), 2)

但这是行不通的，因为findContours（）希望接收到具有身体形状的图像。 我尝试的其他方法是翻译此c ++代码：

// Read image
Mat3b img = imread("path_to_image");

// Binarize image. Text is white, background is black
Mat1b bin;
cvtColor(img, bin, COLOR_BGR2GRAY);

bin = bin < 200;

// Find all white pixels
vector<Point> pts;
findNonZero(bin, pts);

// Get rotated rect of white pixels
RotatedRect box = minAreaRect(pts);
if (box.size.width > box.size.height)
{
    swap(box.size.width, box.size.height);
    box.angle += 90.f;
}

Point2f vertices[4];
box.points(vertices);

for (int i = 0; i < 4; ++i)
{
    line(img, vertices[i], vertices[(i + 1) % 4], Scalar(0, 255, 0));
}

// Rotate the image according to the found angle
Mat1b rotated;
Mat M = getRotationMatrix2D(box.center, box.angle, 1.0);
warpAffine(bin, rotated, M, bin.size());

我有这个：

draw = cv2.cvtColor(byw, cv2.COLOR_GRAY2BGR)
data = np.array(byw)
subzero = np.nonzero(data)
subuno = np.reshape(subzero,(17345,2)) # this is because cv2.minAreaRect() receives a Nx2 numpy
rect = cv2.minAreaRect(subuno)
box = cv2.boxPoints(rect)
box = np.int0(box)
cv2.drawContours(draw,[box],0,(0,255,0),2)

但是话又说回来，结果不是预期的，矩形位置不好。

---

我也可能会尝试在C ++中实现for ，但我不知道如何从box = cv2.boxPoints(rect)获得顶点。 请帮忙！

Answer 1

也许您可以查看以下内容： http : //www.pyimagesearch.com/2014/08/25/4-point-opencv-getperspective-transform-example/

在该链接中，作者对整个文档（以及因此所包含的文本）进行偏斜或变换，但是，这取决于根据图像中的轮廓找到文档的边缘。

他在以下教程中进一步介绍了此方法： http : //www.pyimagesearch.com/2014/09/01/build-kick-ass-mobile-document-scanner-just-5-minutes/

他的解决方案之所以有效，是因为他可以根据检测到的文档的位置，方向和倾斜度来调整整个文档。 整体上调整文档的位置实际上会调整文档内发现的所有内容，包括文本。

但是，我相信您要问的是，即使不检测任何文档边缘和轮廓，也要对文本进行去歪斜。 如果是这种情况，那么我假设您需要提供其他基础或标准来使文本进行偏斜校正（即，检测图像中是否存在字母，然后检测字母是否基于您的标准偏斜） ，然后调整字母），这可能不是一个简单的练习。