ГОСТ Р ИСО/МЭК 19795-4-2011 Информационные технологии (ИТ). Биометрия. Эксплуатационные испытания и протоколы испытаний в биометрии. Часть 4. Испытания на совместимость

     6.3 Назначение испытаний

6.3.1 Испытания на совместимость

Испытания на совместимость проводят для численного определения или сравнения эксплуатационных характеристик при обмене стандартизованными данными в случае, когда устройства получения биометрических данных применяются по очереди, или в случае, когда ФББД сравниваются с СББД.

Целями испытаний могут являться:

a) получение оценки степени совместимости;

b) развитие нормативно-технической базы и стандартов форматов обмена биометрическими данными, в рамках которого разрабатываются стандарты форматов обмена биометрическими данными, производятся и испытываются подсистемы формирования и сравнения ББД и достигается единое мнение по вопросу о необходимости модификации стандартов, после чего стандарты обновляются. Каждый этап таких испытаний включает в себя испытания типа а);

c) сертификация группы продуктов как совместимых путем использования оценки эксплуатационных характеристик разнородных биометрических систем, полученных в процессе испытаний типа а);

d) определение эксплуатационных характеристик при работе с одной или несколькими подсистемами, которые ранее по результатам испытаний типа с) были признаны совместимыми. Данные испытания проводят в том случае, если один или более продуктов необходимо оценить в целях включения их в перечень продуктов с подтвержденной совместимостью;

e) прогнозирование реальных эксплуатационных характеристик;

f) оценка технической возможности замены компонентов биометрической системы одного поставщика компонентами другого поставщика.

Тип испытаний должен быть указан в протоколе испытаний. Указанные типы испытаний на совместимость описаны в последующих разделах настоящего стандарта.

Примечание 1 - Наиболее подходящими для оценки эксплуатационных характеристик разнородной биометрической системы при практическом применении являются сценарные и оперативные испытания. Испытания типа е) должны, таким образом, проводиться с использованием выборки субъектов, совершающих попытки верификации или идентификации так, как это определено в стандарте ИСО/МЭК 19795-2 для сценарных испытаний. Однако объем выборки при сценарных испытаниях часто ограничен наличием средств, поэтому следует ожидать соответствующего увеличения степени неопределенности измеренных эксплуатационных характеристик. В этом случае возможно проведение испытаний типа е), которые осуществляются полностью в режиме отложенного задания посредством использования существующей базы данных образцов. Точность прогноза эксплуатационных характеристик при проведении подобных испытаний зависит от степени репрезентативности используемых данных для конкретного приложения.

Примечание 2 - В том случае, если СФОД подвергся значительным поправкам, то более подходящими являются испытания типа а), b) и с). Поправки вносят в стандарт в том случае, если существующие степень совместимости, достаточность совместимости, совместимые продукты, перечни продуктов с подтвержденной совместимостью и действующие СББД становятся устаревшими. При таких обстоятельствах проведение испытаний типа d) нецелесообразно.

Примечание 3 - Необходимость в проведении испытаний типа f) может возникнуть по таким причинам, как, например, прекращение предоставления некоторого компонента поставщиком, по причине недопустимости значений эксплуатационных характеристик, наблюдаемых при практическом применении, или по причине того, что стоимость эксплуатации системы стала слишком высокой. Целью испытаний является оценка эксплуатационных характеристик системы до и после замены компонента. Данная цель может предполагать асимметрию в задачах испытаний: эксплуатационные характеристики компонента поставщика группы В при работе с данными поставщика группы А представляют интерес, в то время как эксплуатационные характеристики компонента поставщика группы А при работе с данными поставщика группа В - нет.

6.3.2 Испытания на достаточность

Достаточность является мерой эксплуатационных характеристик продуктов, использующих стандартизованные технологии (СФОД, СББД и т.п.), по сравнению с эксплуатационными характеристиками полностью фирменных реализаций продуктов (использующих ФББД и т.п.). Испытания на достаточность могут быть проведены в том случае, если стандарт обмена данными был заново разработан или подвергся значительным поправкам (для шаблонов отпечатков пальцев см. [2]). Для проведения испытаний на достаточность требуется по крайней мере одна подсистема формирования ФББД и одна подсистема сравнения ФББД. Для сравнения фирменных и стандартизованных форматов требуется, чтобы данные ФББД и СББД были сформированы из общих ПББД. Испытания, таким образом, должны включать в себя этап проведения сравнений в режиме отложенного задания.

Примечание 1 - Данные испытания могут быть проведены при участии единственного поставщика. Подобные испытания позволят оценить только достаточность СФОД путем оценки эксплуатационных характеристик при использовании СФОД по отношению к эксплуатационным характеристикам при использовании фирменных компонентов. Несмотря на то, что получение результатов испытаний на достаточность при участии единственного поставщика формально согласуется с настоящим стандартом, в случае участия в испытаниях множества поставщиков результаты испытаний будут более надежными и устойчивыми к ошибкам.

Примечание 2 - На рисунке 7 не показан обмен СББД между подсистемами формирования и сравнения ББД, поскольку для испытаний на достаточность необходимо осуществление сравнений только для однородных компонентов (т.е. компонентов, предоставленных одним поставщиком). В данном случае .

     
Рисунок 7 - Испытания на достаточность: сравнение фирменных и стандартных форматов обмена данными