2022年3月18日,美國國家標準與技術研究院(NIST)公布了全球最權威的人臉識別算法測試Ongoing Face Recognition Vendor Test(FRVT)的最新排名。瑞為技術在關鍵指標――Visa-Border(出入境照片比對簽證照片)測試集項目中取得了FNMR=0.27%@FMR=0.000001的優(yōu)異成績,位列全球第5,國內(nèi)第2。(原表格中商湯005、006號算法測試成績分別第2、第1)
FRVT主要評價指標(參考)
FRVT評價指標主要包括:FNMR (false non-match rate)和FMR (false match rate)。FNMR和FMR在FRVT報告中有嚴格公式說明,通俗解釋則為:
FNMR,拒識率(FRR),把應該相互匹配成功人臉當成不匹配的人臉;
FMR,誤識率(FAR),把不應該匹配成功人臉當成匹配成功人臉;
目前主流的人臉識別技術基本上可以歸結為三類,即:基于幾何特征的方法、基于模板的方法和基于模型的方法:
基于幾何特征的方法是最早、最傳統(tǒng)的方法,通常需要和其他算法結合才能有比較好的效果;
基于模板的方法可以分為基于相關匹配的方法、特征臉方法、線性判別分析方法、奇異值分解方法、神經(jīng)網(wǎng)絡方法、動態(tài)連接匹配方法等;
基于模型的方法則有基于隱馬爾柯夫模型,主動形狀模型和主動外觀模型的方法等。
FRVT的由來
FRVT被譽為全球規(guī)模最大、標準最嚴、競爭最激烈、最權威的人臉識別算法競賽,有工業(yè)界黃金標準之稱,對人臉識別算法的評估可達到百萬分之一的精度。
起初,美國國防部的ARPA資助建立了一個對現(xiàn)有面像識別技術進行評測的程序,并分別于1994年8月、1995年3月和1996年9月(截至1997年3月)組織了三次面像識別和人臉確認的性能評測,盡管該測試只對美國研究機構開放,但它在事實上成為了該領域的公認測試標準,其測試結果已被認為反映了面像識別研究的最高學術水平。
為進一步測試商業(yè)面像識別系統(tǒng)的性能,并揭示2000年前后面像識別技術的最新進展,美國國防部于2000年5月和6月對美國的主要商業(yè)面像識別系統(tǒng)進行了評測,稱為FRVT’2000(Face Recognition Vender Test)評測。
NIST已組織了多次針對人臉識別供應商系統(tǒng)的評測――FRVT(Face Recognition Vendor Test),至今已連續(xù)舉辦了FRVT2000、FRVT2002、FRVT2006、FRVT2010和FRVT2013等多屆評測。這些評測一方面對知名的人臉識別系統(tǒng)的性能進行比較,另一方面全面總結了人臉識別技術發(fā)展的現(xiàn)狀,并進一步指出了人臉識別算法亟待解決的若干問題。
FRVT比賽面向全球人臉算法供應商,接受算法提交,進行保密測試后在NIST官網(wǎng)上發(fā)布成績和排名。比賽分為四個大項,分別為:
FRVT 1:1(識別)
FRVT 1:N(識別+檢索)
FRVT Morph(偽造識別)
FRVT Quality(質(zhì)量評估)
截至目前,全球已有近三百家公司和研究機構參與了此項測試,包括VisionLabs(俄羅斯)、Paravision(美國)、Vocord(俄羅斯)、商湯、曠視、依圖、???、大華、云從、騰訊等。
中國AI廠商力爭C位
在2017年人工智能落地成熟應用之時,我國的AI公司開始積極進行人工智能與安防等多個行業(yè)的結合探索。并且,國內(nèi)AI公司在拓展技術普及和場景落地的同時,也不斷在底層技術、理論基礎等方面進行提升,同時對FRVT測試發(fā)起沖擊:
依圖科技
依圖科技在2018年10月提交的算法,獲得了當年的競賽冠軍,并且是參賽團隊中在千萬分之一誤報指標下,唯一將漏報率降到1%以下的團隊 。
依圖科技獲得簽證照比對第一
格靈深瞳
2019年7月,首次參與此競賽的格靈深瞳取得了優(yōu)異成績:在最具挑戰(zhàn)的“非約束性自然環(huán)境人臉照片”測試項目中獲得全球第一名。
格靈深瞳在“非約束性自然環(huán)境人臉照片”
測試項目中獲得全球第一名
商湯科技
2020年3月, NIST FRVT 1:N 2020公布了結果,商湯科技一舉拿下了五項第一。
商湯科技獲五項第一
云從科技
在2021年3月, 云從科技在人臉識別1:1、人臉識別1:N和口罩遮擋下的人臉識別三個賽道,獲得兩項冠軍、一項亞軍,展現(xiàn)強大核心技術實力。
云從科技在人臉識別1:N賽道獲第一名
上海芯翌科技
同年3月,上海芯翌科技在“NIST-FRVT戴口罩人臉識別評測”獲得世界第一,并在“FRVT 1:1人臉識別評測”中獲得世界前三。
上海芯翌科技在FRVT戴口罩
人臉識別評測獲得世界第一
其實,在2018年官方公布的報告中,中國人工智能公司實力就已經(jīng)得以展現(xiàn),依圖科技(yitu)、商湯科技(sensetime)、曠視科技(megvii)囊括了前十中的五席,加上排名第五的中國科學院深圳先進技術研究院(siat),中國團隊已經(jīng)超過半數(shù),并穩(wěn)穩(wěn)“霸屏”前五,領跑全球人臉識別算法。
目前人工智能技術的火熱發(fā)展,離不開AI廠商在技術和理論上的積極探索和實踐,作為基礎設施的深度學習組件、框架越來越多的開源便是其標志。諸多的框架相繼開源,一方面印證了國內(nèi)技術廠商、院校對于基礎性研究增加;另一方面,也顯示出國內(nèi)廠商在人工智能發(fā)展和應用過程中對于底層基礎設施的重視程度的提高。越來越頭部企業(yè)對于技術和理論上的積極探索和實踐以及進行框架的開源,將帶動整個行業(yè)對底層技術的關注和投入,從而更好地推動人工智能技術地發(fā)展與升級。