三維人臉識(shí)別一般采用深度相機(jī)獲取人臉深度信息,主要包括雙目相機(jī),基于結(jié)構(gòu)光原理的RGB-D相機(jī)和基于光飛行時(shí)間原理的TOF相機(jī)。
(1)基于深度圖的人臉識(shí)別
深度圖像中三維數(shù)據(jù)的z值被投影至二維平面,形成平滑的三維曲面??墒褂脷w一化網(wǎng)絡(luò)和特征提取網(wǎng)絡(luò)實(shí)現(xiàn)深度圖人臉識(shí)別,歸一化網(wǎng)絡(luò)將輸入的深度圖像轉(zhuǎn)化為HHA圖像,再使用卷積神經(jīng)網(wǎng)絡(luò)回歸用于獲取歸一化深度圖的參數(shù),特征提取網(wǎng)絡(luò)用于獲取表征深度圖人臉的特征向量。
(2)基于RGB-3DMM的人臉識(shí)別
3DMM是指三維人臉變形統(tǒng)計(jì)模型,早期是用于解決從二維人臉圖像恢復(fù)三維形狀的問題,現(xiàn)多被用于對(duì)深度圖像或彩色圖像進(jìn)行人臉模型回歸,實(shí)現(xiàn)識(shí)別任務(wù)。
(3)基于RGB-D的人臉識(shí)別
RGB-D圖像是包含了彩色圖像和深度圖,前者是從紅、綠、藍(lán)顏色通道獲取的圖像,后者是指包含與視點(diǎn)的場(chǎng)景對(duì)象的表面的距離有關(guān)的圖像通道,兩者之間是相互配準(zhǔn)。通過對(duì)彩色圖像和多幀融合后的深度圖像分別進(jìn)行預(yù)訓(xùn)練和遷移學(xué)習(xí),在特征層進(jìn)行融合,提高人臉識(shí)別率。