如何使用OpenCV和DLIB在圖像上操作人臉?
這是一個(gè)關(guān)于如何使用OpenCV和DLIB在圖像上應(yīng)用虛擬唇膏的快速教程。同樣的原理也可以推廣到其他面部特征,比如某人的眼睛、鼻子、下巴……。為了獲得上圖所示的結(jié)果,我們需要執(zhí)行以下一系列步驟:檢測(cè)面部標(biāo)志使用由嘴標(biāo)志組成的凸多邊形創(chuàng)建掩碼使用形態(tài)學(xué)操作增強(qiáng)掩碼,并使其模糊,以獲得更好的混合效果隔離嘴唇和臉部將顏色變換應(yīng)用于嘴唇把嘴唇和臉放在一起首先要做的是檢測(cè)人臉的面部標(biāo)志。庫Dlib提供了一種方便的方法來實(shí)現(xiàn)這一點(diǎn);但是,請(qǐng)記住,被攝對(duì)象的面部需要面對(duì)攝影機(jī)。如果頭部姿勢(shì)不正確,檢測(cè)結(jié)果將不好。
在這個(gè)例子中,我們只對(duì)嘴唇的點(diǎn)感興趣。下圖顯示了Dlib返回的面部標(biāo)志點(diǎn)的索引。如你所見,我們對(duì)48點(diǎn)到60點(diǎn)(嘴唇的外部“輪廓”)感興趣。
利用這些點(diǎn),我們可以制作一個(gè)掩碼,讓我們?cè)诓挥绊懨娌空w外觀的情況下處理嘴唇的顏色。但是,等一下。在開始操作這些顏色之前,我們需要改進(jìn)掩碼。在這個(gè)例子中,一個(gè)帶有4x4矩形內(nèi)核的形態(tài)學(xué)閉合操作就足夠了。注意下面的圖片,這個(gè)步驟填補(bǔ)了由cv2生成的原始多邊形右上角的一個(gè)空白。右:使用唇部創(chuàng)建的凸多邊形/左:關(guān)閉操作后的多邊形
為了獲得自然的效果,我們還需要模糊掩碼。模糊掩碼將產(chǎn)生更好的混合效果。我們將cv2.GaussianBlur應(yīng)用于掩碼。最后,我們反轉(zhuǎn)掩碼(我們需要兩個(gè),一個(gè)用于嘴唇,一個(gè)用于面部)。右:模糊掩碼/左:模糊反向掩碼
我們將應(yīng)用這些掩碼,方法是將它們從0–255(uint8)轉(zhuǎn)換為0–1(float)范圍,然后將它們與圖像相乘。右下方的圖像是原始圖像乘以反轉(zhuǎn)掩碼。左側(cè)的圖像是原始圖像上的顏色變換乘以掩碼的結(jié)果。顏色變換由cv2.a(chǎn)pplyColorMap(im, cv2.COLORMAP_INFERNO)給出。右:原始圖像和反向模糊掩碼的位與運(yùn)算/左:顏色變換圖像和模糊掩碼的位與運(yùn)算
現(xiàn)在,剩下要做的就是將這兩個(gè)圖像相加。右:原始圖像/左:結(jié)果圖像
這是代碼。
import cv2
import dlib
import faceBlendCommon as face
import numpy as np
# 加載圖像
im = cv2.imread("cv2/girl-no-makeup.jpg")
# 檢測(cè)人臉關(guān)鍵點(diǎn)
PREDICTOR_PATH = r"C:Userselipe.cunhaDocumentsenvcv2week1-pytondatamodelsshape_predictor_68_face_landmarks.dat"
faceDetector = dlib.get_frontal_face_detector()
landmarkDetector = dlib.shape_predictor(PREDICTOR_PATH)
landmarks = face.getLandmarks(faceDetector, landmarkDetector, im)
# 為嘴唇制作一個(gè)掩碼
lipsPoints = landmarks[48:60]
mask = np.zeros((im.shape[0], im.shape[1], 3), dtype=np.float32)
cv2.fillConvexPoly(mask, np.int32(lipsPoints), (1.0, 1.0, 1.0))
mask = 255*np.uint8(mask)
# 應(yīng)用閉合操作改善掩碼
kernel = cv2.getStructuringElement(cv2.MORPH_RECT, (40,40))
mask = cv2.morphologyEx(mask, cv2.MORPH_CLOSE, kernel, 1)
# 模糊掩碼以獲得自然效果
mask = cv2.GaussianBlur(mask,(15,15),cv2.BORDER_DEFAULT)
# 計(jì)算逆掩碼
inverseMask = cv2.bitwise_not(mask)
# 將掩碼轉(zhuǎn)換為浮點(diǎn)以執(zhí)行混合
mask = mask.a(chǎn)stype(float)/255
inverseMask = inverseMask.a(chǎn)stype(float)/255
# 為嘴唇應(yīng)用顏色貼圖
lips = cv2.a(chǎn)pplyColorMap(im, cv2.COLORMAP_INFERNO)
# 將嘴唇和人臉轉(zhuǎn)換為0-1范圍
lips = lips.a(chǎn)stype(float)/255
ladyFace = im.a(chǎn)stype(float)/255
# 用掩碼調(diào)整嘴唇和臉
justLips = cv2.multiply(mask, lips)
justFace = cv2.multiply(inverseMask, ladyFace)
# 加上臉和嘴唇
result = justFace + justLips
# 顯示結(jié)果
cv2.imshow("", result)
cv2.waitKey(0)

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字
您提交的評(píng)論過于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)
最新活動(dòng)更多
-
即日-9.16點(diǎn)擊進(jìn)入 >> 【限時(shí)福利】TE 2025國際物聯(lián)網(wǎng)展·深圳站
-
10月23日火熱報(bào)名中>> 2025是德科技創(chuàng)新技術(shù)峰會(huì)
-
10月23日立即報(bào)名>> Works With 開發(fā)者大會(huì)深圳站
-
10月24日立即參評(píng)>> 【評(píng)選】維科杯·OFweek 2025(第十屆)物聯(lián)網(wǎng)行業(yè)年度評(píng)選
-
11月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
12月18日立即報(bào)名>> 【線下會(huì)議】OFweek 2025(第十屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
推薦專題
- 1 阿里首位程序員,“掃地僧”多隆已離職
- 2 先進(jìn)算力新選擇 | 2025華為算力場(chǎng)景發(fā)布會(huì)暨北京xPN伙伴大會(huì)成功舉辦
- 3 人形機(jī)器人,正狂奔在批量交付的曠野
- 4 宇樹機(jī)器人撞人事件的深度剖析:六維力傳感器如何成為人機(jī)安全的關(guān)鍵屏障
- 5 解碼特斯拉新AI芯片戰(zhàn)略 :從Dojo到AI5和AI6推理引擎
- 6 AI版“四萬億刺激”計(jì)劃來了
- 7 騰訊 Q2 財(cái)報(bào)亮眼:AI 已成第二增長曲線
- 8 2025年8月人工智能投融資觀察
- 9 10 Manus跑路,大廠掉線,只能靠DeepSeek了