全球權威人臉識別測試 中國團隊奪第一
最近公佈的國際權威人臉識別供應商測試 FRVT(Face Recognition Vendor Test)結果中,中國公司依圖科技獲得了四項測試的第一名,超越了俄羅斯公司 Vocord 和法國公司莫弗(Vocord 是國際老牌安防廠商,長久以來超越 Google 等公司盤踞人臉識別算法第一名)。
FRVT 是由美國國家標準技術局 NIST (National Institute of Standards and Technology) 組織的人臉識別供應商測試,作為美國國家採購的官方指導,其測試的權威性是全球工業界實際應用的黃金標準。
FRVT 的人臉識別測試集合來自美國國土安全局的真實業務場景,例如出入境、刑偵過程中收集的大量照片。與時下熱門、由學術機構舉辦的 LFW、MegaFace 測試相比,FRVT 更貼近真實應用,測試規模更大,不僅擁有百萬量級測試數據,同時這些測試數據均不公開,有效避免算法過擬合甚至是作弊手段。
據官方最新發佈的報告,FRVT 的第一名是中國公司依圖科技,在千萬分之一誤報下 (採樣百億對樣本) 的準確率為 95.5%,比第二名俄羅斯公司 Vocord 93.5% 的準確率高出 2%。這是目前為止全球公開的、最大規模測試集、最權威測試指標下的最好成績,比 2014 年參與同樣測試的第一名日本公司 NEC 在準確率上有大幅提高。
NIST 針對測試作了不同場景、不同人種、不同性別、不同年齡的識別性能比較。從官方描述來看,其提供的測試數據對應了出入境管理、身份門禁認證、平安城市監控等實戰應用場景,依圖在四項主要的測試場景中均獲得第一名。在更詳細的人種(黑人、白人、亞洲人等)、性別比較中,依圖的算法表現幾乎沒有差異;而其他算法隨著識別難度增加,識別率出現了不同程度的較大降低。對比結果說明依圖的算法可以在不同類型數據分佈的實用場景中,例如黑人較多的場景下,算法也可有穩定表現。