Журнал "Системы Безопасности" № 3‘2021

Методология сравнительных испытаний алгоритмов Методология и правила проведения испыта- ний изложены в ГОСТ Р ИСО/МЭК 19795-1– 2007 "Автоматическая идентификация. Иден- тификация биометрическая. Эксплуатацион- ные испытания и протоколы испытаний в био- метрии. Часть 1. Принципы и структура". Этот ГОСТ [1] устанавливает общие требования к проведению эксплуатационных испытаний биометрических систем, определяет эксплуа- тационные характеристики, а также требова- ния к записи данных и представлению резуль- татов испытаний. ГОСТ Р ИСО/МЭК 19795-1–2007 необходимо использовать вместе с другими стандартами комплекса "Идентификация биометрическая". Он устанавливает следующие виды испытаний: 1. Технологическое испытание (Technology Evaluation): испытание одного или более алго- ритмов распознавания одинаковых биометри- ческих модальностей с использованием суще- ствовавшей ранее или специально собранной базы данных образцов в режиме отложенного задания. 2. Сценарное испытание (Scenario Evaluation): испытание, при проведении которого эксплуа- тационные характеристики системы опреде- ляются с помощью прототипа или имитирующе- го приложения. 3. Оперативное испытание (Operational Evalua- tion): испытание, в котором эксплуатационные характеристики биометрической системы опре- деляются в специальных условиях эксплуатации по специальной целевой выборке. Технологическое испытание В процессе технологического испытания прово- дят испытание всех алгоритмов с использова- нием стандартизированной базы данных, собранной "универсальным" датчиком сбора данных (то есть датчиком, собирающим образ- цы, подходящие для всех испытуемых алгорит- мов). Несмотря на то что для разработки и настройки биометрической системы перед испытанием могут использоваться эксперимен- тальные данные, необходимо, чтобы фактиче- ское испытание проводилось на данных, заве- домо неизвестных разработчикам алгоритмов. Испытание проводят путем обработки данных в режиме отложенного задания. Вследствие неизменяемости базы данных результаты техно- логических испытаний являются воспроизводи- мыми. Сценарное испытание В процессе сценарного испытания проводят испытание всей биометрической системы в условиях, моделирующих определенную ситуа- цию, максимально приближенную к действи- тельности. Каждая испытуемая биометрическая система имеет свой собственный датчик сбора данных, в результате чего могут быть неболь- шие различия в получаемых начальных данных. Воспроизводимость результатов испытания обеспечивается тщательным контролем выпол- нения сценария. Оперативное испытание Оперативные испытания проводят с целью про- верки биометрических систем в рабочих усло- виях с использованием целевой выборки. Опе- ративные испытания могут включать в себя наблюдение за эксплуатационными характери- стиками рабочих биометрических систем или оценку эксплуатационных характеристик при проведении оперативных испытаний. В общем случае из-за недокументированных различий в БИОМЕТРИЧЕСКИЕ СИСТЕМЫ  С И С Т Е М Ы К О Н Т Р О Л Я И У П Р А В Л Е Н И Я Д О С Т У П О М 66 июнь – июль 2021 www.secuteck.ru Данила Николаев Директор Некоммерческого партнерства "Русское биометрическое общество", председатель ТК 098 "Биометрия и биомониторинг" Василий Мамаев Заместитель директора Некоммерческого партнерства "Русское биометрическое общество", заместитель председателя ТК 098 "Биометрия и биомониторинг" Юрий Минаев Старший научный сотрудник ФГУ НПО "СТиС" МВД России www.investigacionesprivadas.mx Г ОСТ Р ИСО/МЭК 19795-1–2007 устанавливает следующие виды испы- таний: технологическое, сценарное и оперативное АДИС: результаты сравнительных испытаний В журнале "Системы безопасности" № 2/2021 г. в статье "АДИС: скорость, анализ, результат" (стр. 76–78) мы рассмотрели основные задачи, параметры, структуру, кри- терии эффективности и проблемы эксплуатации автоматизированной дактилоско- пической информационной системы (АДИС, в зарубежных источниках AFIS). Сегодня мы озвучим данные испытаний, проводимых для оценки технологий и алгоритмов рас- познавания отпечатков пальцев. На основании результатов испытаний приведена также оценка величины минимальных ошибок распознавания