python - 如何使用 python 和 opencv 从彼此中减去两个图像？

Question

这里的目标是从面部的原始图像中减去嘴巴。 现在我知道如何使用 dlib 和面部标志来裁剪嘴巴了(这就是这个脚本所做的)。

问题是如何修改原始图像，使其除了没有嘴巴外保持完全相同？基本上我想把它剪掉。

predictor_path = "/home/victor/facial-landmarks/shape_predictor_68_face_landmarks.dat"
faces_folder_path = "/home/victor/TryImage/"
detector = dlib.get_frontal_face_detector()
predictor = dlib.shape_predictor(predictor_path)
i = 0
for f in glob.glob(os.path.join(faces_folder_path, "*.jpg")):
    print("Processing file: {}".format(f))
    img = cv2.imread(f)

    dets = detector(img, 1)
    print("Number of faces detected: {}".format(len(dets)))
    for k, d in enumerate(dets):
        print("Detection {}: Left: {} Top: {} Right: {} Bottom: {}".format(
            k, d.left(), d.top(), d.right(), d.bottom()))

    shape = predictor(img, d)
    i += 1

    xmouthpoints = [shape.part(x).x for x in range(48,68)]
    ymouthpoints = [shape.part(x).y for x in range(48,68)]
    maxx = max(xmouthpoints)
    minx = min(xmouthpoints)
    maxy = max(ymouthpoints)
    miny = min(ymouthpoints)

    pad = 10

    filename = os.path.splitext(os.path.basename(f))[0]

    crop_image = img[(miny-pad):(maxy+pad),(minx-pad):(maxx+pad)]
    img = cv2.subtract(img, crop_image)
    imshow(crop_image, 1)
    imshow(new_image, 1)

    cv2.imwrite(str(filename) + '.jpg',crop_image)

使用 cv2.subtract 会产生以下错误:error: OpenCV(3.4.1)/io/opencv/modules/core/src/arithm.cpp:659: error: (-209) The operation is neither 'array op array'(其中数组具有相同的大小和相同的 channel 数)，也不是'array op scalar'，也不是函数 arithm_op 中的'scalar op array'

我也考虑过使用图像减法，这可能吗？

即使它是一些黑色或白色的框或圆圈而不是嘴巴，它也是完美的。

注意:我会使用 GIMP 或 Photoshop，但我要处理数以千计的自拍照，所以这不是一个真正的选择。

谢谢你:)

我正在使用的图像附在此处。

My selfie

Answer 1

正如您的错误所述，OpenCV subtract 需要 2 个具有相同形状的图像。在你的情况下，你给了一个大图像和一个小图像，OpenCV 如何知道要减去大图像的哪一部分？

话又说回来，看起来你想去掉嘴巴，它的位置只有黑色像素。您可以通过以下方式获得相同的结果:

cv2.rectangle(img, ((minx-pad), (miny-pad)), ((maxx-pad), (maxy-pad)), (0,0,0), -1)

甚至直接使用 numpy:

img[(miny-pad):(maxy+pad),(minx-pad):(maxx+pad)] = 0

或者如果你真的想使用减法:

crop_image = img[(miny-pad):(maxy+pad),(minx-pad):(maxx+pad)]
img[(miny-pad):(maxy+pad),(minx-pad):(maxx+pad)] = cv2.subtract(img[(miny-pad):(maxy+pad),(minx-pad):(maxx+pad)], crop_image)

在最后一个中，您要告诉减法:要减去图像的哪一部分以及完成后将结果放在哪里。我会推荐选项 2，即 numpy 直接方式。

如有疑问，请给我留言