Различия между видами испытаний
Таблица А.1
Технологическое испытание | Сценарное испытание | Оперативное испытание | |
Объект испытания | Биометрический компонент (алгоритм сравнения или выделения признаков) | Биометрическая система | Биометрическая система |
Истинная информация | Известна при условии, что установлены ошибки сбора данных и области пересечения объединенных данных | Известна при условии, что ошибки сбора данных и отказа учитывают нежелательное поведение субъекта | Зависит от доступных контрольных и инструментальных средств, устанавливающих, получены ли данные от подлинных лиц или от "самозванцев" |
Поведение пользователя, контролируемое администратором испытания | Не контролируется в процессе испытания; может контролироваться во время записи биометрических данных, в противном случае считается неконтролируемым | Контролируется (до тех пор, пока поведение пользователя не станет независимой величиной) | Не контролируется |
Пользователь имеет сведения о результатах попытки в реальном времени | Нет | Да | Да |
Воспроизводимость результатов | Воспроизводимые (фиксированная база данных) | Квазивоспроизводимые (если контролируется сценарий испытания и выборка) | Невоспроизводимые |
Контроль параметров окружающей среды | Может выполняться во время записи биометрических данных, в противном случае считаются неконтролируемыми | Контролируемые и (или) записаны | Неконтролируемые, идеально записаны |
Запись взаимодействия с пользователем | В процессе испытания не записывается; может записываться во время регистрации | Записывается | Записывается во время регистрации; может записываться во время верификации или идентификации |
Протокол типичных результатов | Сравнение биометрических компонентов или модификаций компонентов (т.е. алгоритмов сравнения или выделения или датчиков) | Сравнение биометрических систем; определение критических эксплуатационных факторов; измерение моделируемых эксплуатационных характеристик | Измерение эксплуатационных характеристик в условиях эксплуатации |
Типичные характеристики | Большая часть метрик эксплуатационных характеристик (кроме сквозной пропускной способности); большая часть вероятностей ошибок; эксплуатационные характеристики, подходящие для биометрической системы широкомасштабной идентификации, где сложно собрать большую испытуемую группу | Прогнозируемые сквозная пропускная способность, ВЛС, ВЛНС, ВОСД, ВОР, ВЛД, ВЛНД | Сквозная пропускная способность. Для испытания и определения ВЛД и ВЛНД необходимы знания об истинной информации |
Ограничения | База данных, полученная с помощью одного или более датчиков, идентичность которых известна или неизвестна | Эксплуатационные, инструментальные | Эксплуатационные, инструментальные; |
Испытуемая группа людей | Записанная | Реальная | Реальная |
Примечание - В таблице приведены основные характеристики и отличительные особенности испытания биометрических систем, но в некоторых случаях допускаются исключения. |