雖然人臉識別技術(shù)經(jīng)歷了較長的研究階段，但至今還是被認(rèn)為是生物特征識別技術(shù)中較為困難的研究課題之一，其原因在于：
1.背景環(huán)境的復(fù)雜多樣
  在進(jìn)行人臉識別前需要先對監(jiān)控場景中的人臉進(jìn)行定位，即人臉檢測。人臉檢測的正確與否直接影響人臉識別性能。當(dāng)監(jiān)控場景的背景較為復(fù)雜時，人臉檢測率也會隨之降低，因此能夠適應(yīng)復(fù)雜背景環(huán)境的人臉檢測算法是人臉識別技術(shù)的難點之一。
2. 光照條件的復(fù)雜多變
  在智能視頻監(jiān)控系統(tǒng)的實際應(yīng)用中，會由于監(jiān)控環(huán)境光線的變化造成檢測到的人臉圖像存在不同的陰暗變化。不同光照條件下人臉識別雖然在性能上比FRVT2002有顯著提高，但是還沒在根本上克服光照對識別率的影響。
3. 人臉表情的多樣性
  在實際應(yīng)用過程中，人臉的表情隨時都可能發(fā)生變化。當(dāng)人的表情發(fā)生變化時，可能會引起人臉輪廓以及紋理的變化，同時由于面部肌肉的牽引，面部的特征點的位置也會隨之改變。不同的表情引起面部的變化都不同，此外，不同的人的相同表情影響也不相同，因此很難用統(tǒng)一的標(biāo)準(zhǔn)來精確劃分各種表情對不同人的影響。
4.采集人臉的角度多樣性
  人臉的角度多樣性主要是指由于拍攝角度的不同導(dǎo)致檢測到的人臉圖像的旋轉(zhuǎn)，包括平面旋轉(zhuǎn)和深度旋轉(zhuǎn)。與表情變化對人臉圖像的影響相同，拍攝角度的變化同樣會導(dǎo)致人臉輪廓的變化，除此之外，由于角度的變化，可能會導(dǎo)致人臉的部分特征無法被正確提取，進(jìn)一步導(dǎo)致人臉的錯誤識別。
5.遮擋問題
  即使是非人為故意遮擋，在實際應(yīng)用時檢測到的人臉圖像也經(jīng)常會出現(xiàn)如帽子、眼鏡等遮擋物，除了這些，胡子以及劉海的變化也直接影響人臉的特征提取。當(dāng)人臉圖像發(fā)生遮擋時，人臉的很多信息會丟失，導(dǎo)致人臉識別算法出錯或失效。