(高清版)GB∕T 38122-2019 公共安全指紋識(shí)別應(yīng)用 驗(yàn)證算法性能評(píng)測(cè)方法

公共安全指紋識(shí)別應(yīng)用驗(yàn)證算法性能評(píng)測(cè)方法國(guó)家市場(chǎng)監(jiān)督管理總局 2規(guī)范性引用文件 3術(shù)語和定義 4測(cè)試庫建庫準(zhǔn)則 5接口要求 6測(cè)試方法 6.2測(cè)試過程 7評(píng)價(jià)方法 附錄A（規(guī)范性附錄）測(cè)試函數(shù)C語言接口 附錄B（規(guī)范性附錄）嵌入式指紋識(shí)別產(chǎn)品驗(yàn)證算法測(cè)試接口 附錄C（規(guī)范性附錄）指紋特征數(shù)據(jù)測(cè)試文件結(jié)構(gòu) 參考文獻(xiàn) 本標(biāo)準(zhǔn)按照GB/T1.1—2009給出的規(guī)則起草。請(qǐng)注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機(jī)構(gòu)不承擔(dān)識(shí)別這些專利的責(zé)任。本標(biāo)準(zhǔn)由中華人民共和國(guó)公安部提出。本標(biāo)準(zhǔn)由全國(guó)安全防范報(bào)警系統(tǒng)標(biāo)準(zhǔn)化技術(shù)委員會(huì)(SAC/TC100)歸口。本標(biāo)準(zhǔn)起草單位：北京中盾安全技術(shù)開發(fā)公司、公安部第一研究所、浙江中正智能科技有限公司、長(zhǎng)春鴻達(dá)光電子與生物統(tǒng)計(jì)識(shí)別技術(shù)有限公司、北京海鑫科金高科技股份有限公司、北京東方金指科技有限公司、深圳市亞略特生物識(shí)別科技有限公司、深圳市中控生物識(shí)別技術(shù)有限公司。本標(biāo)準(zhǔn)主要起草人：劉琳、尹德森、張旭東、丁增喜、歐陽暉、張瑩、劉小杰、劉中秋、張樹功、楊春宇、郭田德、邵宇、陳書楷。Ⅰ1公共安全指紋識(shí)別應(yīng)用驗(yàn)證算法性能評(píng)測(cè)方法本標(biāo)準(zhǔn)規(guī)定了公共安全指紋識(shí)別應(yīng)用中指紋驗(yàn)證算法性能評(píng)測(cè)的測(cè)試庫建庫準(zhǔn)則、接口要求、測(cè)試方法和評(píng)價(jià)方法。本標(biāo)準(zhǔn)適用于公共安全指紋識(shí)別應(yīng)用中指紋驗(yàn)證算法的性能測(cè)試和評(píng)價(jià)。2規(guī)范性引用文件下列文件對(duì)于本文件的應(yīng)用是必不可少的。凡是注日期的引用文件，僅注日期的版本適用于本文件。凡是不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。GB/T26237.4—2014信息技術(shù)生物特征識(shí)別數(shù)據(jù)交換格式第4部分：指紋圖像數(shù)據(jù)GB/T35735—2017公共安全指紋識(shí)別應(yīng)用采集設(shè)備通用技術(shù)要求GB/T35736—2017公共安全指紋識(shí)別應(yīng)用圖像技術(shù)要求GA/T893—2010安防生物特征識(shí)別應(yīng)用術(shù)語3術(shù)語和定義GA/T893—2010界定的以及下列術(shù)語和定義適用于本文件。3.1以特定格式保存特征信息的文件。3.2用于對(duì)指紋識(shí)別算法進(jìn)行性能評(píng)測(cè)的指紋圖像或特征文件集合。3.3用某一成功注冊(cè)的指紋特征文件與該手指其他所有特征文件進(jìn)行比對(duì)，發(fā)生錯(cuò)誤拒絕的次數(shù)占連續(xù)比對(duì)次數(shù)的比例大于設(shè)定值的情況。3.4發(fā)生拒認(rèn)的指紋數(shù)占成功注冊(cè)的指紋總指紋數(shù)的比例。注：用百分比表示。3.5非拒認(rèn)指紋同指比對(duì)時(shí)發(fā)生錯(cuò)誤拒絕后的再嘗試比對(duì)。23.6發(fā)生重試的次數(shù)占非拒認(rèn)指紋同指比對(duì)總比對(duì)次數(shù)的比例。注：用百分比表示。4測(cè)試庫建庫準(zhǔn)則具體要求如下：—采集方式：?jiǎn)蚊吨讣y平面活體采集；—采集設(shè)備：應(yīng)符合GB/T35735—2017的規(guī)定，類型不少于兩種；—圖像參數(shù)：應(yīng)符合GB/T35736—2017的要求；—圖像格式：BMP或符合GB/T26237.4—2014中8.3.17規(guī)定的其他文件格式；—采集數(shù)量：不少于1000人，每人采集不少于兩枚手指，右手和左手各不少于一枚手指，每枚手指采集指紋圖像數(shù)不少于三幅；51%49%;38%28%34%。5接口要求測(cè)試算法和嵌入式指紋識(shí)別產(chǎn)品應(yīng)能實(shí)現(xiàn)特征提取和特征比對(duì)功能。測(cè)試算法通過特征提取和特征比對(duì)接口函數(shù)實(shí)現(xiàn)其功能，測(cè)試函數(shù)C語言接口見附錄A。嵌入式指紋識(shí)別產(chǎn)品通過特征提取和特征比對(duì)命令實(shí)現(xiàn)其功能，嵌入式指紋識(shí)別產(chǎn)品驗(yàn)證算法測(cè)試接口見附錄B。測(cè)試算法和嵌入式指紋識(shí)別產(chǎn)品通過特征提取功能得到的指紋特征文件，其文件結(jié)構(gòu)見附錄C。6測(cè)試方法測(cè)試項(xiàng)目為錯(cuò)誤接受率、錯(cuò)誤拒絕率、等錯(cuò)誤率、拒認(rèn)率、重試率和響應(yīng)時(shí)間。6.2測(cè)試過程指紋驗(yàn)證算法的性能測(cè)試，應(yīng)在某一注冊(cè)失敗率下進(jìn)行。指紋驗(yàn)證算法的測(cè)試分為特征文件集生成過程和指紋驗(yàn)證算法性能測(cè)試過程：使用6.2.2中的方法由測(cè)試庫生成特征文件集1,再使用6.2.3中的方法得到某一注冊(cè)失敗率下的特征文件集2,指紋驗(yàn)證算法性能結(jié)果的測(cè)試均基于特征文件集2進(jìn)行。錯(cuò)誤接受率和錯(cuò)誤拒絕率使用6.2.4和6.2.5中的方法進(jìn)行計(jì)算，等錯(cuò)誤率、響應(yīng)時(shí)間、接受者操作性特性曲線(ROC曲線）、檢測(cè)錯(cuò)誤權(quán)衡曲線(DET曲線）根據(jù)錯(cuò)誤拒絕率和錯(cuò)誤接受率的測(cè)試結(jié)果計(jì)在測(cè)試過程中首先使用３中的方法計(jì)算拒認(rèn)率，之后在拒認(rèn)率測(cè)試結(jié)果的基礎(chǔ)上，使用中的方法計(jì)算重試率。使用測(cè)試算法的特征提取功能，對(duì)測(cè)試庫中所有指紋圖像進(jìn)行特征提取，所生成指紋特征數(shù)據(jù)的特征提取狀態(tài)暫記錄為“注冊(cè)成功”，所有特征文件構(gòu)成特征文件集１。使用測(cè)試算法的特征比對(duì)功能，將特征文件集１中某一指紋的所有特征文件分別與該指紋的其他特征文件進(jìn)行比對(duì)，得到若干個(gè)相似度，若這些相似度的平均值小于選定相似度閾值（取值范圍為保留３位小數(shù)則判定該指紋為“注冊(cè)失敗”。在特征文件集１中，對(duì)所有指紋進(jìn)行上述操作，統(tǒng)計(jì)所有測(cè)試結(jié)果，在不同選定相似度閾值時(shí)，按式計(jì)算注冊(cè)失敗率。式中：—注冊(cè)失敗的指紋數(shù)；—總指紋數(shù)。注：“注冊(cè)失敗”的指紋數(shù)和總指紋數(shù)均指不相同指紋的數(shù)量。設(shè)置某一注冊(cè)失敗率，通過計(jì)算確定出與其對(duì)應(yīng)的相似度值，作為選定相似度閾值。在特征文件集１中，將同指比對(duì)相似度平均值小于此選定相似度閾值的所有特征文件的特征提取狀態(tài)修改為“注冊(cè)失敗”，其余特征文件的特征提取狀態(tài)仍為“注冊(cè)成功”，所有完成特征提取狀態(tài)標(biāo)注的特征文件構(gòu)成特征閾值的所有特征文件的特征提取狀態(tài)修改為“注冊(cè)失敗”，其余特征文件的特征提取狀態(tài)仍為“注冊(cè)成功”，這樣生成的特使用測(cè)試算法的特征比對(duì)功能，將特征文件集２中某一指紋的第一個(gè)特征文件與其他指紋的第一個(gè)特征文件進(jìn)行比對(duì)，若所得相似度高于選定相似度閾值，則判斷該次比對(duì)為“錯(cuò)誤接受”。在特征文件集２中，對(duì)所有指紋進(jìn)行上述操作，統(tǒng)計(jì)所有測(cè)試結(jié)果，按式計(jì)算錯(cuò)誤接受率。式中：—相似度高于選定相似度閾值的比對(duì)次數(shù)；—總比對(duì)次數(shù)。注：已記錄為“注冊(cè)失敗”的特征文件不參與比對(duì)。使用測(cè)試算法的特征比對(duì)功能，將特征文件集２中某一指紋的所有特征文件與該指其他特征文件進(jìn)行比對(duì)，若所得相似度低于選定相似度閾值，則判斷該次比對(duì)為“錯(cuò)誤拒絕”。在特征文件集２中，對(duì)所有指紋進(jìn)行上述操作，統(tǒng)計(jì)所有測(cè)試結(jié)果，按式計(jì)算錯(cuò)誤拒絕率。4A?——錯(cuò)誤拒絕率，%;B?——相似度低于選定相似度閾值的比對(duì)次數(shù)；C?——總比對(duì)次數(shù)。6.2.6等錯(cuò)誤率的測(cè)試與FAR/FRR曲線的繪制以選定相似度閾值為橫坐標(biāo)，錯(cuò)誤接受率和錯(cuò)誤拒絕率為縱坐標(biāo)，繪制出錯(cuò)誤接受率/錯(cuò)誤拒絕率曲線(FAR/FRR曲線),如圖1所示。在某個(gè)選定相似度閾值下，錯(cuò)誤拒絕率等于錯(cuò)誤接受率，此時(shí)的錯(cuò)誤拒絕率或錯(cuò)誤接受率為等錯(cuò)誤率。70%-60%-50%-30%-FAR曲線FRR曲線6.2.7拒認(rèn)率的測(cè)試使用測(cè)試算法的特征比對(duì)功能，取測(cè)試方法6.2.4中錯(cuò)誤接受率為0.01%時(shí)的相似度為選定相似度閾值，將特征文件集2中某一指紋第二個(gè)(含)以后的特征文件分別與第一個(gè)特征文件進(jìn)行比對(duì)，若某一指紋發(fā)生錯(cuò)誤拒絕的比對(duì)次數(shù)占總比對(duì)次數(shù)的比例大于50%,則判斷該指紋被“拒認(rèn)”,其所有特征在特征文件集2中，對(duì)所有指紋進(jìn)行上述操作，統(tǒng)計(jì)所有測(cè)試結(jié)果，按式(4)計(jì)算拒認(rèn)率。A?——拒認(rèn)率，%;B?——拒認(rèn)指紋數(shù)；C?——總指紋數(shù)。6.2.8重試率的測(cè)試使用測(cè)試算法的特征比對(duì)功能，取測(cè)試方法6.2.4中錯(cuò)誤接受率為0.01%時(shí)的相似度為選定相似度閾值，將特征文件集2中某一指紋的所有特征文件與同一手指其他特征文件進(jìn)行比對(duì)，若所得相似度在特征文件集2中，對(duì)所有指紋進(jìn)行上述操作，統(tǒng)計(jì)所有測(cè)試結(jié)果，按式(5)計(jì)算重試率。5A?——重試率，%:B?——相似度低于選定相似度閾值的比對(duì)次數(shù)；C?——總比對(duì)次數(shù)。6.2.9響應(yīng)時(shí)間的測(cè)試在特征文件集1的生成過程中，記錄總注冊(cè)時(shí)間和總注冊(cè)次數(shù)，在錯(cuò)誤拒絕率和錯(cuò)誤接受率的測(cè)試式中：C?——總注冊(cè)次數(shù)；E?——總比對(duì)次數(shù)。6.2.10ROC曲線的繪制建立以錯(cuò)誤接受率(FAR)為橫軸、1一錯(cuò)誤拒絕率(1-FRR)為縱軸的坐標(biāo)系(如圖2所示),在特征文件集2中，利用測(cè)試方法6.2.4和6.2.5計(jì)算不同選定相似度閾值時(shí)的FAR和1-FRR,分別標(biāo)出不同選定相似度閾值時(shí)FAR和1-FRR在坐標(biāo)系中的對(duì)應(yīng)點(diǎn)，用曲線將不同位置的點(diǎn)相連繪制出ROC曲線。6.2.11DET曲線的繪制建立以錯(cuò)誤接受率(FAR)為橫軸、錯(cuò)誤拒絕率(FRR)為縱軸的坐標(biāo)系(如圖3所示),在特征文件集2中，利用測(cè)試方法6.2.4和6.2.5計(jì)算不同選定相似度閾值時(shí)的FAR和FRR,分別標(biāo)出不同選定相6似度閾值時(shí)FAR和FRR在坐標(biāo)系中的對(duì)應(yīng)點(diǎn)，用曲線將不同位置的點(diǎn)相連繪制出DET曲線。7評(píng)價(jià)方法指紋驗(yàn)證算法的性能評(píng)價(jià)，應(yīng)在相同注冊(cè)失敗率下進(jìn)行，應(yīng)設(shè)置包括0%在內(nèi)的多個(gè)注冊(cè)失敗率。等錯(cuò)誤率越低表明指紋驗(yàn)證算法的整體性能越好。在相同錯(cuò)誤接受率下，錯(cuò)誤拒絕率越低表明指紋驗(yàn)證算法的正確接受性能越好。在相同錯(cuò)誤拒絕率下，錯(cuò)誤接受率越低表明指紋驗(yàn)證算法的安全性能越好。在相同錯(cuò)誤接受率下，拒認(rèn)率和重試率越低表明指紋驗(yàn)證算法的易用性能越好。響應(yīng)時(shí)間越短表明指紋驗(yàn)證算法的易用性能越好。也可基于ROC或DET曲線對(duì)指紋驗(yàn)證算法性能進(jìn)行評(píng)價(jià)。AB0.1%十7（規(guī)范性附錄）AndroidlibGB_FPIA__64.so。接口函數(shù)見表A.1。編號(hào)名稱說明1FP__GetVersion版本信息獲取2初始化操作3FP__FeatureExtract指紋圖像特征提取4FP__FeatureMatch指紋特征數(shù)據(jù)比對(duì)5FP__End結(jié)束操作返回值：調(diào)用成功，返回1;否則返回錯(cuò)誤代碼，錯(cuò)誤代碼值應(yīng)符合A.4的要求。說明：獲取版本信息。8返回值：調(diào)用成功，返回1;否則返回錯(cuò)誤代碼，錯(cuò)誤代碼值應(yīng)符合A.4的要求。說明：初始化。犃.3.3指紋圖像特征提取配內(nèi)存空間，指紋特征數(shù)據(jù)文件結(jié)構(gòu)應(yīng)符合附錄C要求。輸出參數(shù)。出參數(shù)。返回值：調(diào)用成功，返回1;否則返回錯(cuò)誤代碼，錯(cuò)誤代碼值應(yīng)符合A.4的要求。說明：對(duì)指紋圖像數(shù)據(jù)進(jìn)行特征提取，生成指紋特征數(shù)據(jù)。犃.3.4指紋特征數(shù)據(jù)比對(duì)參數(shù)。參數(shù)。示完全匹配。輸出參數(shù)。返回值：調(diào)用成功，返回1;否則返回錯(cuò)誤代碼，錯(cuò)誤代碼值應(yīng)符合A.4的要求。說明：對(duì)2個(gè)指紋特征數(shù)據(jù)進(jìn)行比對(duì)，得到相似度值。函數(shù)原型：intFP_End()。返回值：調(diào)用成功，返回1;否則返回錯(cuò)誤代碼，錯(cuò)誤代碼值應(yīng)符合A.4的要求。說明：結(jié)束。錯(cuò)誤代碼見表A.2。9表犃.2錯(cuò)誤代碼表錯(cuò)誤代碼說明-1參數(shù)錯(cuò)誤-2內(nèi)存分配失敗，沒有分配到足夠的內(nèi)存-3功能未實(shí)現(xiàn)-9其他錯(cuò)誤長(zhǎng)度/Byte01指令起始碼1:固定為0x551122設(shè)備號(hào)：固定為0x000144822校驗(yàn)和偏移[0]十...十偏移[9]=CheckSum長(zhǎng)度/Byte01應(yīng)答指令起始碼1:固定為0x551122設(shè)備號(hào)：固定為0x000144Response=0x30正常響應(yīng)(AResponse=0x31非正常響應(yīng)(NA82=0x30正常響應(yīng)(ACK)=0x31非正常響應(yīng)(NACK)2校驗(yàn)和偏移[0]十…十偏移[9]=CheckSum表B.3數(shù)據(jù)包說明長(zhǎng)度/Byte0111數(shù)據(jù)起始碼2:固定為0xA522設(shè)備號(hào)：固定為0x00014N數(shù)據(jù)2校驗(yàn)和偏移[0]十…十偏移[4+N-1]=CheckSum表B.4命令表說明命令名10進(jìn)制16進(jìn)制1234B.4.2命令說明初始化設(shè)備命令交互格式見圖B.4,說明見表B.5。表B.5初始化設(shè)備命令說明00成功參考錯(cuò)誤代碼說明B.4.2.2終止設(shè)備使用終止設(shè)備命令交互格式見圖B.5,說明見表B.6。表B.6終止設(shè)備命令說明00成功參考錯(cuò)誤代碼說明指紋圖像特征提取命令交互格式見圖B.6,說明見表B.7。W圖像寬度，單位為像素，應(yīng)支持測(cè)試庫圖像最小寬度圖像寬度W的低、高字節(jié)H圖像高度，單位為像素，應(yīng)支持測(cè)試庫圖像最小高度圖像高度H的低、高字節(jié)表B.7(續(xù))MT參考錯(cuò)誤代碼說明指紋特征數(shù)據(jù)比對(duì)命令交互格式見圖B.7,說明見表B.8。表犅.8指紋特征數(shù)據(jù)比對(duì)說明Command0x04AliasFP__FeatureMatchDescription對(duì)兩個(gè)指紋特征數(shù)據(jù)進(jìn)行比對(duì)，得到相似度值CmdInParam0CmdInParamAckOutParamSSL,SH比對(duì)得分的低、高字節(jié)NackOutParam參考錯(cuò)誤代碼說明錯(cuò)誤代碼見表B.9。別名(NackOutParam)值說明NACK_COMM__ERR0x1001通信出錯(cuò)NACK__VERIFY__FAILED0x1002NACK_BAD_FINGER0x1003指紋質(zhì)量差NACK__IS__NOT__SUPPORTED0x1004不支持的指令NACK_DEV__ERR0x1005硬件錯(cuò)誤NACK__INVALID_PARAM0x1006輸入?yún)?shù)無效（規(guī)范性附錄）指紋特征數(shù)據(jù)測(cè)試文件結(jié)構(gòu)指紋特征數(shù)據(jù)測(cè)試文件結(jié)構(gòu)見表C.1。所有數(shù)值均為定長(zhǎng)無符號(hào)整型。指紋特征數(shù)據(jù)測(cè)試文件示例見表C.2。序號(hào)字段相對(duì)位置說明1字段111