在本教程中，您將學(xué)習(xí)如何使用OpenCV，深度學(xué)習(xí)和Python執(zhí)行年齡的自動識別/預(yù)測。

學(xué)完本教程后，您將能夠以相當(dāng)高的精確度去自動預(yù)測靜態(tài)圖像文件和實(shí)時視頻中的人物年齡。

要了解如何使用OpenCV和深度學(xué)習(xí)進(jìn)行年齡識別，請繼續(xù)閱讀！

用OpenCV和深度學(xué)習(xí)進(jìn)行年齡識別

在本教程的第一部分中，您將學(xué)習(xí)年齡識別，這包括從圖片或視頻中自動預(yù)測人的年齡需要的步驟（以及為什么應(yīng)該將年齡識別當(dāng)做分類問題而不是回歸問題）。

下面，我們將介紹這個基于深度學(xué)習(xí)的年齡識別模型，然后學(xué)習(xí)如何使用這兩種模型：

1.靜態(tài)圖像中的年齡識別

2.實(shí)時視頻中的年齡識別

然后，我們將分析我們所做的年齡預(yù)測工作的結(jié)果。

什么是年齡識別？

年齡識別是僅用人臉的照片去自動識別其年齡的過程

通常，您會看到年齡識別可分為兩個階段進(jìn)行實(shí)現(xiàn)：

1.階段1：檢測輸入圖像/視頻中的人臉

2.階段2：提取人的面部（感興趣區(qū)域，ROI），并通過年齡檢測器的算法去預(yù)測人物的年齡

對于階段1，能夠?yàn)閳D片中的人臉生成邊框的人臉檢測器都是可用的，這些檢測器包括但不限于Haar cascades，HOG+線性SVM，單桿檢測器（SSD）等。

使用哪種人臉檢測器取決于您的項(xiàng)目：

·Haar cascades速度很快，并且能夠在嵌入式設(shè)備上實(shí)時運(yùn)行，存在的問題是它們的準(zhǔn)確度較低并且極易出現(xiàn)假陽性檢測。

·HOG+線性SVM模型比Haar cascades更精確，但速度較慢。它們對遮擋（即部分面部可見）或視角變化（即面部的不同視圖）的容錯性也較低。

·基于深度學(xué)習(xí)的人臉檢測器功能最為強(qiáng)大，它提供了最高的準(zhǔn)確度，但比Haar cascades和HOG+線性SVM需要更多的計算資源。

在為您的應(yīng)用選擇人臉檢測器時，請花點(diǎn)時間考慮您的項(xiàng)目需求——速度或準(zhǔn)確性，哪個對您更加重要？我還建議對每個面部檢測器進(jìn)行一些試驗(yàn)，以便讓這些結(jié)果來指導(dǎo)您做決定。

一旦您的面部檢測器在圖像/視頻中生成了人臉的邊界框坐標(biāo)，您就可以進(jìn)入第2階段——識別人的年齡。

確定了臉部的邊界框坐標(biāo)（x，y）后，您首先提取面部ROI，而忽略圖像（幀）的其余部分。這樣做可以使年齡檢測器僅將注意力放在人臉上，而不是圖像中其他不相關(guān)的“噪點(diǎn)”。

然后將面部ROI傳遞給模型，從而得到實(shí)際的年齡預(yù)測。

年齡檢測器的算法有很多，但是最受歡迎的是基于深度學(xué)習(xí)的年齡檢測器——在本教程中，我們將使用這種基于深度學(xué)習(xí)的年齡檢測器。

我們基于深度學(xué)習(xí)的年齡檢測器模型

圖2：用深度學(xué)習(xí)進(jìn)行年齡識別是一個活躍的研究領(lǐng)域。在本教程中，我們使用由Levi和Hassner在其2015年論文中構(gòu)建和訓(xùn)練的模型（圖像來源https://talhassner.github.io/home/projects/cnn_agegender/CVPR2015_CNN_AgeGenderEstimation.pdf）。

我們在這里使用的深度學(xué)習(xí)年齡檢測器模型是Levi和Hassner在其2015年發(fā)表的《使用卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行年齡和性別分類》（https://talhassner.github.io/home/publication/2015_CVPR）中構(gòu)建和訓(xùn)練的。

在這篇論文里，作者提出了一個類似AlexNet的簡單體系，該體系總共學(xué)習(xí)了8個年齡段：

1 0-2

2 4-6

3 8-12

4 15-20

5 25-32

6 38-43

7 48-53

8 60-100

您可能會注意到這些年齡段是不連續(xù)的——這是有意而為的，因?yàn)橛糜谟?xùn)練模型的Adience數(shù)據(jù)集（https://talhassner.github.io/home/projects/Adience/Adience-data.html#agegender）定義了年齡段（我們將在下一節(jié)中介紹為什么這樣做）。

在這篇文章中，我們將使用預(yù)先訓(xùn)練的年齡檢測器模型。但是如果您有興趣學(xué)習(xí)如何從頭開始訓(xùn)練它，請務(wù)必閱讀《用Python進(jìn)行計算機(jī)視覺深度學(xué)習(xí)》（https://www.pyimagesearch.com/deep-learning-computer-vision-python-book/），在那里我將向您展示如何訓(xùn)練。

我們?yōu)槭裁床粚⒛挲g預(yù)測看做回歸問題？

圖3：用深度學(xué)習(xí)進(jìn)行年齡預(yù)測可以被歸類為回歸或分類問題。

您會在上面注意到，我們將年齡離散化為“不同的區(qū)間”，從而將年齡預(yù)測作為分類問題——為什么不將它看做回歸問題（我們在房價預(yù)測教程中所使用的方法：https://www.pyimagesearch.com/2019/01/28/keras-regression-and-cnns/）？

從技術(shù)上講，沒有理由不能將年齡預(yù)測看做回歸任務(wù)。甚至有一些模型可以通過回歸來實(shí)現(xiàn)。

問題在于年齡預(yù)測本質(zhì)上是主觀的，并且僅基于容貌。

一個五十多歲的人一生中從未吸煙，出門總是擦防曬霜，而且每天都要護(hù)理皮膚。而一個三十多歲的人一天要抽很多煙，不擦防曬霜去從事體力勞動，并且沒有適當(dāng)?shù)钠つw護(hù)理。這個五十歲的人很可能看起來比這個三十歲的人年輕。

而且不要忘記基因是衰老最重要的驅(qū)動因素——有些人就是比其他人衰老得慢。

例如，看看下面的Matthew Perry（在電視情景喜劇Friends中扮演Chandler Bing）的圖片，并將它與Jennifer Aniston（扮演Rachel Green）的圖片進(jìn)行比較：

您能猜出Matthew Perry（50歲）實(shí)際上比Jennifer Aniston（51歲）小一歲嗎？

除非您事先了解了關(guān)于這些演員的情況，否則我不會相信。

但另一方面，您能猜到這些演員在48-53歲嗎？

我愿意打賭您可能有這個能力。

雖然人類天生不擅長預(yù)測年齡的準(zhǔn)確值，但我們實(shí)際上在預(yù)測年齡段方面還是不錯的。

當(dāng)然，上面是一個示例。

Jennifer Aniston的基因近乎完美，再加上有非常優(yōu)秀的整形外科醫(yī)生，她似乎青春不老。

但這印證了我的觀點(diǎn)——人們有意掩飾自己的年齡。

而且，如果人類準(zhǔn)確地預(yù)測一個人的年齡很困難的話，那么機(jī)器肯定也會同樣困難。

一旦你將年齡預(yù)測看做回歸問題，那么對于一個模型，要準(zhǔn)確預(yù)測人的圖像中的年齡值是極困難的。

但是，如果您將其視為分類問題，為模型定義了年齡段，那么我們的年齡預(yù)測模型將更容易訓(xùn)練，通常會比基于回歸的預(yù)測提供更高的準(zhǔn)確性。

簡而言之：將年齡預(yù)測看做分類問題可以極大地“緩解”問題，使其更容易解決——通常我們不需要一個人的確切年齡；粗略的估計就足夠了。

項(xiàng)目結(jié)構(gòu)

請確保從本文的“下載”部分中獲取代碼，模型和圖片。提取文件后，您的項(xiàng)目將如下所示：

前兩個目錄由年齡預(yù)測器和面部檢測器組成。這兩個深度學(xué)習(xí)模型都基于Caffe。

我提供了三張用于年齡預(yù)測的測試圖片；您也可以添加自己的圖片。

在本教程的其余部分，我們將討論這兩個Python腳本：

·detect_age.py：圖片年齡預(yù)測

·detect_age_video.py：視頻年齡預(yù)測

這些腳本都會檢測圖片/幀中的人臉，然后使用OpenCV對它們進(jìn)行年齡預(yù)測。

運(yùn)行我們的OpenCV圖像年齡檢測器

讓我們開始在靜態(tài)圖像中使用OpenCV進(jìn)行年齡檢測。

在您的目錄中打開detect_age.py文件，讓我們開始工作：

為了啟動我們的年齡檢測器腳本，我們先導(dǎo)入NumPy和OpenCV。我建議查看我的pip install opencv教程（https://www.pyimagesearch.com/2018/09/19/pip-install-opencv/）來配置您的系統(tǒng)。

此外，我們需要導(dǎo)入Python內(nèi)置的os模塊，它可以添加模型所需的路徑。

最后，我們導(dǎo)入argparse來解析命令行參數(shù)（https://www.pyimagesearch.com/2018/03/12/python-argparse-command-line-arguments/）。

我們的腳本需要四個命令行參數(shù)：

·--圖片：提供為年齡檢測輸入圖像的路徑

·--人臉：為預(yù)先訓(xùn)練的面部檢測器模型提供路徑

·--年齡：預(yù)先訓(xùn)練的年齡探測器模型

·--置信度：最小概率閾值，以便篩除低置信檢測

如上所述，我們的年齡檢測器是一種分類器，可以根據(jù)預(yù)定義的年齡分段，通過人的面部ROI預(yù)測這個人的年齡——我們不會將其視為回歸問題?，F(xiàn)在讓我們定義這些年齡段的bucket：

我們的年齡是在預(yù)先訓(xùn)練好的年齡檢測器的bucket（即類別標(biāo)簽）中定義的。我們將使用此列表和相關(guān)的索引來獲取年齡段，從而在輸出的圖像上進(jìn)行注釋。

完成了導(dǎo)入，命令行參數(shù)和年齡段的設(shè)置，我們現(xiàn)在就可以加載兩個預(yù)先訓(xùn)練的模型：

在這里，我們加載兩個模型：

·我們的人臉檢測器可以找到并定位圖片中的人臉（第25-28行）

·年齡分類器確定特定面孔所屬的年齡范圍（第32-34行）

這些模型均使用Caffe框架進(jìn)行了訓(xùn)練。我在PyImageSearch Gurus課程（https://www.pyimagesearch.com/pyimagesearch-gurus/）中介紹了如何訓(xùn)練Caffe分類器。

現(xiàn)在我們已經(jīng)完成了所有初始化，讓我們從磁盤加載圖像并檢測面部ROI：

37-40行加載并預(yù)處理了我們輸入的圖像。我們使用OpenCV的blobFromImage方法——請?jiān)谖业慕坛蹋╤ttps://www.pyimagesearch.com/2017/11/06/deep-learning-opencvs-blobfromimage-works/）中閱讀有關(guān)blobFromImage的更多信息。

為了檢測圖片中的人臉，我們通過CNN傳送blob，得到了detections的列表?，F(xiàn)在讓我們循環(huán)面部ROI的檢測：

當(dāng)我們循環(huán)detections時，我們清除了低置信度的面部（第51-55行）。

對于滿足了最低置信度標(biāo)準(zhǔn)的面部，我們提取它們的ROI坐標(biāo)（第58-63行）?，F(xiàn)在，我們在僅包含單個面部的圖像中有了小小收獲。我們在第64-66行根據(jù)此ROI創(chuàng)建一個blob（即faceBlob）。

現(xiàn)在，我們將進(jìn)行年齡識別：

我們使用face blob進(jìn)行年齡預(yù)測（第70-74行），從而得出年齡段和年齡的置信度。我們使用這些數(shù)據(jù)點(diǎn)以及面部ROI的坐標(biāo)來注釋最初輸入的圖片（第77-86行）并顯示結(jié)果（第89和90行）。

在下一部分中，我們將分析結(jié)果。

OpenCV的年齡識別結(jié)果

讓我們運(yùn)行OpenCV年齡檢測器。

首先，從本教程的“下載”部分下載源代碼，預(yù)先訓(xùn)練的年齡檢測器模型及示例圖像。

從那里打開一個終端，然后執(zhí)行以下命令：

在這里，您可以看到我們的OpenCV年齡檢測器以57.51％的置信度預(yù)測了我的年齡為25-32歲——實(shí)際上，該年齡檢測器是正確的（我拍攝這張照片時是30歲）。

讓我們再舉一個例子，這是著名演員Neil Patrick Harris小時候的照片：

我們的年齡預(yù)測值又是正確的——拍攝這張照片時，Nat Patrick Harris看起來的確在8-12歲年齡段中的某個年齡。

讓我們嘗試另一張圖片；這張圖是Samuel L. Jackson，他是我最喜歡的演員之一：

圖7：使用OpenCV通過深度學(xué)習(xí)進(jìn)行年齡預(yù)測并不總是準(zhǔn)確的，正如Samuel L. Jackson的照片所證明的那樣。年齡預(yù)測只是一個軟件，對人類來說是主觀的。

這里我們的OpenCV年齡檢測器出錯了——Samuel L. Jackson大約71歲，這使我們的年齡預(yù)測大約有了18歲的偏差。

也就是說，僅僅看照片——Jackson先生看上去像71歲嗎？

我的猜測應(yīng)該是50到60歲左右。至少對我來說，他不像70歲多一點(diǎn)的男人。

但這恰恰印證了我在前文提出的觀點(diǎn)：

用視覺進(jìn)行年齡預(yù)測的過程很困難，當(dāng)計算機(jī)或人試圖猜測某人的年齡時，我認(rèn)為這是主觀的。

為了評估年齡檢測器，您不能依賴人的實(shí)際年齡去評價。相反，您需要衡量預(yù)測年齡和感知年齡之間的準(zhǔn)確度。

為實(shí)時視頻運(yùn)行我們的OpenCV年齡檢測器

現(xiàn)在我們可以在靜態(tài)圖像中實(shí)現(xiàn)年齡檢測，但實(shí)時視頻可以嗎？

我們可以這樣做嗎？

您應(yīng)該猜我們可以。我們的視頻腳本與圖像腳本非常相似。不同之處在于，我們需要設(shè)置視頻流并在每個幀上循環(huán)進(jìn)行年齡檢測。本文將重點(diǎn)介紹視頻功能，因此請根據(jù)需要參考上面的流程。

要了解如何在視頻中進(jìn)行年齡識別，那就來看看detect_age_video.py。

我們需要導(dǎo)入三個新的模塊：（1）VideoStream (2)imutils (3)time。這些導(dǎo)入允許我們對視頻進(jìn)行設(shè)置和使用webcam功能。

我決定定義一個快捷函數(shù)來獲取幀，定位面部并預(yù)測年齡。函數(shù)通過進(jìn)行檢測和邏輯預(yù)測，使我們的幀處理循環(huán)不會那么龐大（您也可以將此函數(shù)放到單獨(dú)的文件中）?，F(xiàn)在讓我們進(jìn)入這個程序：

我們的 detect_and_predict_age 輔助函數(shù)接受以下參數(shù)：

·frame：視頻通過webcam獲取的單個幀

·faceNet：初始化的深度學(xué)習(xí)人臉檢測器

·ageNet：初始化的深度學(xué)習(xí)年齡分類器

·minConf：篩去較差人臉識別的置信度閾值

這里的參數(shù)和我們的圖片年齡檢測器腳本的命令行參數(shù)是相似的。

我們的AGE_BUCKETS再次被定義（第12和13行）。

然后我們定義一個空列表來保存面部定位和年齡檢測的結(jié)果。

第20-26行進(jìn)行面部檢測。

接下來，我們將處理每個detections：

請看29-43行——它們循環(huán)檢測，以確保較高的置信度，然后提取出面部ROI。

第46-47行是新的——由于以下兩個原因，我們要確保視頻中的面部ROI足夠大：

·首先，我們要篩掉幀中檢測到的假陽性面部。

·其次，年齡分類結(jié)果對于遠(yuǎn)離相機(jī)的臉（即臉部很小）來說并不準(zhǔn)確。

為了完成我們的輔助功能，我們將進(jìn)行年齡識別并返回結(jié)果：

在這里，我們預(yù)測人臉的年齡并提取出年齡段和年齡置信度（第56-60行）。

第65-68行在一個字典中存儲面部定位和年齡預(yù)測。循環(huán)檢測的最后一步是將該字典放到結(jié)果列表中（第69行）。

如果所有檢測都已經(jīng)完成，并且結(jié)果都得到了，那我們將結(jié)果返回給調(diào)用者。

定義好輔助函數(shù)后，現(xiàn)在我們可以繼續(xù)處理視頻了。但我們需要先定義命令行參數(shù)：

我們的腳本需要三個命令行參數(shù)：

·--face：預(yù)先訓(xùn)練的面部檢測器模型的目錄的路徑

·--age：預(yù)先訓(xùn)練的年齡檢測器模型的目錄

·--confidence：最小概率閾值，以便篩除低置信檢測

在這里，我們將加載模型并初始化視頻：

第86-89行加載并初始化了我們的面部檢測器，而第93-95行加載了年齡檢測器。

然后，我們使用VideoStream類來初始化webcam（第99和100行）。

webcam準(zhǔn)備好后，我們將開始處理幀：

在上面的循環(huán)中，我們：

·獲取幀，并將其調(diào)整為已知寬度（第106和107行）

·通過我們的detect_and_predict_age便捷函數(shù)傳遞幀，以便（1）檢測面部（2）確定年齡（第111和112行）

·在幀上注釋結(jié)果（第115-124行）

·顯示和捕獲鍵盤輸入（第127和128行）

·如果鍵入q，那么退出并清空（第131-136行）

在下一節(jié)中，我們將啟動年齡檢測器，看看它是否有效！

使用OpenCV進(jìn)行實(shí)時年齡檢測的結(jié)果

現(xiàn)在，讓我們將OpenCV年齡檢測器應(yīng)用于實(shí)時視頻。

確保您已從本教程的“下載”部分下載源代碼和預(yù)先訓(xùn)練的年齡檢測器。

從那里打開一個終端，然后輸入以下命令：

在這里，您可以看到OpenCV年齡檢測器將我的年齡范圍準(zhǔn)確地預(yù)測為25-32歲（在寫本文時，我還是31歲）。

如何改善年齡預(yù)測結(jié)果？

由Levi和Hassner訓(xùn)練的年齡預(yù)測模型的問題之一是，它嚴(yán)重偏向25-32歲年齡組，如他們原始版本（https://talhassner.github.io/home/projects/cnn_agegender/CVPR2015_CNN_AgeGenderEstimation.pdf）中的這個混淆矩陣表所示：

圖8：Levi和Hassner的深度學(xué)習(xí)年齡檢測模型嚴(yán)重偏向25-32歲年齡段。為了在您的模型中解決此問題，請考慮收集更多的訓(xùn)練數(shù)據(jù)，使用類權(quán)重、數(shù)據(jù)擴(kuò)充和正則化技術(shù)。（圖片來源https://talhassner.github.io/home/projects/cnn_agegender/CVPR2015_CNN_AgeGenderEstimation.pdf）

不幸的是，這意味著我們的模型預(yù)測的25-32歲結(jié)果可能實(shí)際上屬于其他的年齡段——我在分析本教程的結(jié)果以及我自己的年齡預(yù)測中也遇到了幾次這樣的情況。

您可以通過以下方法消除這種偏差：

1 收集其他年齡段的額外訓(xùn)練數(shù)據(jù)以幫助平衡數(shù)據(jù)集

2 使用類權(quán)重來處理類失衡的問題

3 注意數(shù)據(jù)擴(kuò)充

4 訓(xùn)練模型時使用正則化

其次，年齡預(yù)測結(jié)果可以通過使用人臉對齊（https://www.pyimagesearch.com/2017/05/22/face-alignment-with-opencv-and-python/）來改善。

人臉對齊功能會識別人臉的幾何結(jié)構(gòu)，然后嘗試使用平移，縮放和旋轉(zhuǎn)獲得人臉的規(guī)范化。

在許多情況下（但并非總是如此），人臉對齊可以改善面部應(yīng)用的效果，包括面部識別，年齡預(yù)測等。

為簡單起見，我們在本教程中沒有使用人臉對齊功能，但是您可以按照這個教程（https://www.pyimagesearch.com/2017/05/22/face-alignment-with-opencv-and-python/）學(xué)習(xí)有關(guān)人臉對齊的更多信息，然后將其應(yīng)用于自己的年齡預(yù)測程序中。

性別預(yù)測呢？

我特意選擇不在本教程中介紹性別預(yù)測。

使用計算機(jī)視覺和深度學(xué)習(xí)來識別一個人的性別似乎是一個有趣的分類問題，但實(shí)際上這是一個道德問題。

某人在視覺上看上去怎樣，穿著什么或如何表現(xiàn)，這些都并不意味著他們可能是某種（或其他）性別。

試圖將性別劃分為兩類的軟件只會把我們束縛在對于性別的過時觀念里。因此，我鼓勵您盡可能不要在自己的程序中使用性別識別。

如果必須進(jìn)行性別識別，請確保對自己負(fù)責(zé)，并確保您不去創(chuàng)建使他人遵循性別偏見的應(yīng)用程序（例如根據(jù)感知到的性別去定義用戶體驗(yàn)）。

性別識別幾乎沒有價值，而且它引起的問題比它解決的問題還要多。請盡可能避免它。

總結(jié)

在本教程中，您學(xué)習(xí)了如何使用OpenCV通過深度學(xué)習(xí)進(jìn)行年齡識別。

為此，我們利用了Levi和Hassner在2015年出版的《使用卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行年齡和性別分類》中的預(yù)訓(xùn)練模型。該模型使我們能夠以相當(dāng)高的準(zhǔn)確度去預(yù)測八個不同的年齡段；但是，我們必須認(rèn)識到年齡預(yù)測是一個很有挑戰(zhàn)性的問題。

有很多因素可以決定一個人的視覺年齡，包括他們的生活方式，工作，吸煙習(xí)慣，最重要的是基因。其次，請記住，人們試圖掩飾自己的年齡——如果人類準(zhǔn)確地預(yù)測某人的年齡有困難的話，那么機(jī)器學(xué)習(xí)模型同樣會有困難。

因此，您必須根據(jù)感知年齡（而非實(shí)際年齡）去評估所有的年齡預(yù)測結(jié)果。在您自己的計算機(jī)視覺項(xiàng)目中進(jìn)行年齡識別時，請記住這一點(diǎn)。

編輯：黃飛

?