2D與3D人臉識(shí)別同屬計(jì)算機(jī)視覺(jué)領(lǐng)域。由于2D圖像是三維物體在平面上的投影，2D人臉識(shí)別的性能會(huì)受到光照、姿態(tài)、表情等外界因素干擾，從而影響準(zhǔn)確性。因此，如何充分利用人臉的二維和三維信息，如何提高人臉識(shí)別的識(shí)別率，特別是在人臉遮擋、光照條件不好、拍攝角度不佳等場(chǎng)景下提高人臉識(shí)別的識(shí)別率是當(dāng)前需解決的關(guān)鍵問(wèn)題之一。為了解決上述問(wèn)題這種融合2D人臉檢測(cè)和3D人臉識(shí)別系統(tǒng)的方法包括如下步驟：
  1、通過(guò)3D深度相機(jī)采集RGB圖像和深度圖像，或采集IR圖像和深度圖像；
  2、對(duì)RGB圖像或IR圖像進(jìn)行預(yù)處理；
  3、對(duì)預(yù)處理后的RGB圖像或IR圖像，根據(jù)2D檢測(cè)方法檢測(cè)人臉，框出人臉邊界框以及鼻尖、左右眼、左右嘴角這5個(gè)人臉關(guān)鍵點(diǎn)；
  4、將所得到的5個(gè)人臉關(guān)鍵點(diǎn)映射到對(duì)應(yīng)的5個(gè)XYZ關(guān)鍵點(diǎn)的點(diǎn)云上，對(duì)XYZ點(diǎn)云數(shù)據(jù)集檢測(cè)到的三維人臉數(shù)據(jù)點(diǎn)云進(jìn)行標(biāo)準(zhǔn)化；
  5、根據(jù)標(biāo)準(zhǔn)化后的三維人臉數(shù)據(jù)點(diǎn)云，將其正交投影至指定平面，進(jìn)行網(wǎng)格擬合，網(wǎng)格擬合后將三維人臉數(shù)據(jù)點(diǎn)云轉(zhuǎn)變?yōu)槎S人臉深度圖；
  6、將二維人臉深度圖采用人臉識(shí)別方法進(jìn)行識(shí)別，得到人臉識(shí)別結(jié)果。