OpenCV實現無縫克隆算法的步驟詳解

Posted on by

一、概述

借助無縫克隆算法，您可以從一張圖像中復制一個對象，然後將其粘貼到另一張圖像中，從而形成一個看起來無縫且自然的構圖。

二、函數原型

給定一個原始彩色圖像，可以無縫混合該圖像的兩個不同顏色版本。

void     cv::colorChange (InputArray src, InputArray mask, OutputArray dst, float red_mul=1.0f, float green_mul=1.0f, float blue_mul=1.0f)
src 輸入 8 位 3 通道圖像
mask 輸入 8 位 1 或 3 通道圖像
dst 輸出與 src 大小和類型相同的圖像
red_mul R 通道倍增因子
green_mul G 通道倍增因子
blue_mul B 通道倍增因子

對選區內部的梯度場應用適當的非線性變換，然後用泊松求解器積分，局部修改圖像的表觀照明。

void     cv::illuminationChange (InputArray src, InputArray mask, OutputArray dst, float alpha=0.2f, float beta=0.4f)
src 輸入 8 位 3 通道圖像
mask 輸入 8 位 1 或 3 通道圖像
dst 輸出與 src 大小和類型相同的圖像
alpha 值范圍在 0-2 之間
beta 值范圍在 0-2 之間

圖像編輯任務涉及全局變化（顏色/強度校正、過濾器、變形）或與選擇有關的局部變化。 在這裡，我們有興趣以無縫且輕松的方式實現局部更改，這些更改僅限於手動選擇的區域 (ROI)。 變化的程度從輕微的扭曲到完全被新穎的內容替代。

void     cv::seamlessClone (InputArray src, InputArray dst, InputArray mask, Point p, OutputArray blend, int flags)
src 輸入 8 位 3 通道圖像
dst 輸入 8 位 3 通道圖像
mask 輸入 8 位 1 或 3 通道圖像
p 在 dst 圖像中指向放置對象的位置
blend 輸出與 dst 大小和類型相同的圖像
flags 可以是 cv::NORMAL_CLONE、cv::MIXED_CLONE 或 cv::MONOCHROME_TRANSFER 的克隆方法

通過僅保留邊緣位置的梯度，在與泊松求解器集成之前，可以洗掉所選區域的紋理，使其內容具有平坦的外觀。 這裡使用 Canny 邊緣檢測器。

void     cv::textureFlattening (InputArray src, InputArray mask, OutputArray dst, float low_threshold=30, float high_threshold=45, int kernel_size=3)
src 輸入 8 位 3 通道圖像
mask 輸入 8 位 1 或 3 通道圖像
dst 輸出與 src 大小和類型相同的圖像
low_threshold 范圍從 0 到 100
high_threshold 值 > 100
kernel_size 要使用的 Sobel 內核的大小

三、OpenCV源碼

1、源碼路徑

opencv\modules\photo\src\seamless_cloning.cpp

2、源碼代碼

#include "precomp.hpp"
#include "opencv2/photo.hpp"
 
#include "seamless_cloning.hpp"
 
using namespace std;
using namespace cv;
 
static Mat checkMask(InputArray _mask, Size size)
{
    Mat mask = _mask.getMat();
    Mat gray;
    if (mask.channels() > 1)
        cvtColor(mask, gray, COLOR_BGRA2GRAY);
    else
    {
        if (mask.empty())
            gray = Mat(size.height, size.width, CV_8UC1, Scalar(255));
        else
            mask.copyTo(gray);
    }
 
    return gray;
}
 
void cv::seamlessClone(InputArray _src, InputArray _dst, InputArray _mask, Point p, OutputArray _blend, int flags)
{
    CV_INSTRUMENT_REGION();
 
    const Mat src  = _src.getMat();
    const Mat dest = _dst.getMat();
    Mat mask = checkMask(_mask, src.size());
    dest.copyTo(_blend);
    Mat blend = _blend.getMat();
 
    Mat mask_inner = mask(Rect(1, 1, mask.cols - 2, mask.rows - 2));
    copyMakeBorder(mask_inner, mask, 1, 1, 1, 1, BORDER_ISOLATED | BORDER_CONSTANT, Scalar(0));
 
    Rect roi_s = boundingRect(mask);
    if (roi_s.empty()) return;
    Rect roi_d(p.x - roi_s.width / 2, p.y - roi_s.height / 2, roi_s.width, roi_s.height);
 
    Mat destinationROI = dest(roi_d).clone();
 
    Mat sourceROI = Mat::zeros(roi_s.height, roi_s.width, src.type());
    src(roi_s).copyTo(sourceROI,mask(roi_s));
 
    Mat maskROI = mask(roi_s);
    Mat recoveredROI = blend(roi_d);
 
    Cloning obj;
    obj.normalClone(destinationROI,sourceROI,maskROI,recoveredROI,flags);
}
 
void cv::colorChange(InputArray _src, InputArray _mask, OutputArray _dst, float red, float green, float blue)
{
    CV_INSTRUMENT_REGION();
 
    Mat src  = _src.getMat();
    Mat mask = checkMask(_mask, src.size());
    _dst.create(src.size(), src.type());
    Mat blend = _dst.getMat();
 
    Mat cs_mask = Mat::zeros(src.size(), src.type());
    src.copyTo(cs_mask, mask);
 
    Cloning obj;
    obj.localColorChange(src, cs_mask, mask, blend, red, green, blue);
}
 
void cv::illuminationChange(InputArray _src, InputArray _mask, OutputArray _dst, float alpha, float beta)
{
    CV_INSTRUMENT_REGION();
 
    Mat src  = _src.getMat();
    Mat mask = checkMask(_mask, src.size());
    _dst.create(src.size(), src.type());
    Mat blend = _dst.getMat();
 
    Mat cs_mask = Mat::zeros(src.size(), src.type());
    src.copyTo(cs_mask, mask);
 
    Cloning obj;
    obj.illuminationChange(src, cs_mask, mask, blend, alpha, beta);
 
}
 
void cv::textureFlattening(InputArray _src, InputArray _mask, OutputArray _dst,
                           float low_threshold, float high_threshold, int kernel_size)
{
    CV_INSTRUMENT_REGION();
 
    Mat src  = _src.getMat();
    Mat mask = checkMask(_mask, src.size());
    _dst.create(src.size(), src.type());
    Mat blend = _dst.getMat();
 
    Mat cs_mask = Mat::zeros(src.size(), src.type());
    src.copyTo(cs_mask, mask);
 
    Cloning obj;
    obj.textureFlatten(src, cs_mask, mask, low_threshold, high_threshold, kernel_size, blend);
}

四、效果圖像示例

以上就是OpenCV實現無縫克隆算法的步驟詳解的詳細內容，更多關於OpenCV無縫克隆算法的資料請關註WalkonNet其它相關文章！

推薦閱讀：