ГОСТ Р 59921.1-2022
НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ
СИСТЕМЫ ИСКУССТВЕННОГО ИНТЕЛЛЕКТА В КЛИНИЧЕСКОЙ МЕДИЦИНЕ
Часть 1
Клиническая оценка
Artificial intelligence systems in clinical medicine. Part 1. Clinical evaluation
ОКС 11.040.01
Дата введения 2022-09-01
1 РАЗРАБОТАН Федеральным государственным бюджетным учреждением "Российский институт стандартизации" (ФГБУ "РСТ"), Государственным бюджетным учреждением здравоохранения города Москвы "Научно-практический клинический центр диагностики и телемедицинских технологий Департамента здравоохранения города Москвы" (ГБУЗ "НПКЦ ДиТ ДЗМ")
2 ВНЕСЕН Техническим комитетом по стандартизации ТК 164 "Искусственный интеллект"
3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому регулированию и метрологии от 28 июня 2022 г. N 545-ст
4 ВВЕДЕН ВПЕРВЫЕ
Правила применения настоящего стандарта установлены в статье 26 Федерального закона от 29 июня 2015 г. N 162-ФЗ "О стандартизации в Российской Федерации". Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.rst.gov.ru)
В целях сбора доказательств соответствия системы искусственного интеллекта требованиям эффективности и безопасности проводят ее клиническую оценку, которая наряду с фактическими данными дает возможность продемонстрировать, что система искусственного интеллекта способна выдавать клинически значимый результат при ее эксплуатации надлежащим образом, а также не несет риска при использовании ее по назначению и в условиях, заявленных изготовителем.
Система искусственного интеллекта не оказывает непосредственного воздействия на пациентов и медицинский персонал, вместо этого выполняет только интерпретацию при обработке данных и предоставляет вывод результата работы пользователю, в том числе с целью поддержки принятия решений. Несмотря на это, все заявления изготовителя в отношении уровней эффективности и безопасности изделия (в том числе указанные в маркировке и сопроводительной документации) должны быть подтверждены данными, полученными в ходе проведения клинических испытаний (исследований).
Настоящий стандарт устанавливает общие подходы к проведению клинической оценки систем искусственного интеллекта.
Стандарт применим к системам искусственного интеллекта как программному обеспечению, являющемуся медицинским изделием.
Настоящий национальный стандарт определяет методологическую основу для проведения клинической оценки систем искусственного интеллекта.
В настоящем стандарте использованы нормативные ссылки на следующие стандарты:
ГОСТ Р 56429 Изделия медицинские. Клиническая оценка
ГОСТ Р 59921.5 Системы искусственного интеллекта в клинической медицине. Часть 5. Требования к структуре и порядку применения набора данных для обучения и тестирования алгоритмов
ГОСТ Р ИСО 14155 Клинические исследования. Надлежащая клиническая практика
ГОСТ Р ИСО/МЭК 12207-2010 Информационная технология. Системная и программная инженерия. Процессы жизненного цикла программных средств
Примечание - При пользовании настоящим стандартом целесообразно проверить действие ссылочных стандартов в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет или по ежегодному информационному указателю "Национальные стандарты", который опубликован по состоянию на 1 января текущего года, и по выпускам ежемесячного информационного указателя "Национальные стандарты" за текущий год. Если заменен ссылочный стандарт, на который дана недатированная ссылка, то рекомендуется использовать действующую версию этого стандарта с учетом всех внесенных в данную версию изменений. Если заменен ссылочный стандарт, на который дана датированная ссылка, то рекомендуется использовать версию этого стандарта с указанным выше годом утверждения (принятия). Если после утверждения настоящего стандарта в ссылочный стандарт, на который дана датированная ссылка, внесено изменение, затрагивающее положение, на которое дана ссылка, то это положение рекомендуется применять без учета данного изменения. Если ссылочный стандарт отменен без замены, то положение, в котором дана ссылка на него, рекомендуется применять в части, не затрагивающей эту ссылку.
В настоящем стандарте применены следующие термины с соответствующими определениями:
3.1 аналитическая валидация (analytical validation): Подтверждение способности системы искусственного интеллекта точно, воспроизводимо и надежно генерировать предполагаемые результаты вычислений из входных данных.
Примечания
1 См. [1].
2 Аналитическая валидация является частным случаем валидации в соответствии с ГОСТ Р ИСО/МЭК 12207-2010, пункт 4.54.
3.2
безопасность (safety): Отсутствие недопустимого риска. [ГОСТ ISO 14971-2011, пункт 2.24] |
Примечания
1 Безопасность систем искусственного интеллекта предполагает ее функционирование в соответствии с тем, как определил изготовитель, при использовании по назначению в условиях, предусмотренных изготовителем, и без нарушений безопасности обрабатываемой информации.
2 Условия использования могут включать уровень технических знаний, опыта, образования и подготовки пользователей, наличие заболеваний и физического состояния предполагаемых пациентов.
3 Безопасность системы искусственного интеллекта предполагает соблюдение требований по защищенности систем искусственного интеллекта, данных, прозрачности алгоритмов, бесперебойности, отсутствия ошибок в работе систем искусственного интеллекта, а также требований качества (см. [1]).
3.3
главный исследователь (principal investigator): Квалифицированное лицо, ответственное за проведение клинического исследования в исследовательском центре. Примечания 1 Если клинические исследования проводятся группой лиц в исследовательском центре, главный исследователь ответственен за руководство данной группой. 2 Является ли ответственным конкретное лицо или институт, может зависеть от особенностей национальной системы регулирования медицинских изделий. [ГОСТ Р ИСО 14155-2014, пункт 3.33] |
3.4 дизайн клинического испытания [исследования] (clinical trial design): Методология проведения клинического испытания (исследования) с участием человека в качестве субъекта исследования, с помощью которого планируется получить статистически достоверные доказательства клинической безопасности и эффективности испытуемого (исследуемого) медицинского изделия, включающая в себя использование контрольных групп субъектов испытания (исследования), и (или) распределение субъектов испытаний (исследований) по группам случайным образом, и (или) использование одинарного или двойного слепого метода, а также выбор основных и дополнительных конечных точек.
Примечания
1 См. [2].
2 Методология проведения клинического испытания (исследования) системы искусственного интеллекта подразумевает использование в качестве субъекта исследования набора данных, который получен с участием человека путем ретроспективного анализа и т.п.
3.5 достоверность (reliability): Степень объективного соответствия результатов испытаний действительному изменению в состоянии группы пациентов, для которых систему искусственного интеллекта применяют или предполагают к использованию.
3.6
жизненный цикл (life cycle): Развитие системы, продукции, услуги, проекта или другой создаваемой изготовителем сущности от замысла до вывода из эксплуатации. [Адаптировано из ГОСТ Р 57193-2016, пункт 4.1.19] |
3.7 заявитель [спонсор] (sponsor): Юридическое или физическое лицо, являющееся инициатором клинического испытания (исследования) и несущее ответственность за его организацию и (или) финансирование (см. [2]).
3.8
изготовитель (manufacturer): Физическое или юридическое лицо, ответственное за проектирование, изготовление, упаковывание и/или маркировку медицинского изделия, установку/монтаж или модификацию медицинского изделия перед выпуском его в обращение или вводом в эксплуатацию независимо от того, выполняет ли эти операции вышеупомянутое лицо или третья сторона от его имени. Примечание - В определении термина "изготовитель" следует учитывать положения национальных и региональных нормативных документов. [ГОСТ ISO 14971-2011, пункт 2.8] |
3.9
искусственный интеллект (artificial intelligence): Комплекс технологических решений, позволяющий имитировать когнитивные функции человека (включая самообучение, поиск решений без заранее заданного алгоритма и достижение инсайта) и получать при выполнении конкретных практически значимых задач обработки данных результаты, сопоставимые, как минимум, с результатами интеллектуальной деятельности человека. Примечание - Комплекс технологических решений использует информационно-телекоммуникационную инфраструктуру, включает в себя программное обеспечение (в том числе, в котором используются методы машинного обучения), процессы и сервисы по обработке данных, анализу и синтезу решений. [ГОСТ Р 59277-2020, пункт 3.18] |
3.10 клиническая валидация (clinical validation): Подтверждение способности системы искусственного интеллекта выдавать клинически значимые выходные данные, связанные с целевым использованием системы искусственного интеллекта в рамках установленного изготовителем функционального назначения.
Примечание - См. [1], пункт 7.0.
3.11 клиническая связь (clinical association): Научное обоснование соответствия результатов действия системы искусственного интеллекта установленному изготовителем (производителем) ее функциональному назначению.
Примечания
1 См. [1], пункт 7.0.
2 Научное обоснование достигается путем поиска в литературных источниках, согласно рекомендациям профессиональных сообществ, на основании новых клинических исследований.
3.12
клиническая оценка (clinical evaluation): Результат процесса анализа и оценки клинических данных, имеющих отношение к медицинскому изделию, с целью проверки заявленной его изготовителем клинической результативности и клинической безопасности изделия при применении его в соответствии с назначением и в условиях, предусмотренных изготовителем. [ГОСТ Р 56429-2015, пункт 3.1] |
3.13 клиническое испытание [исследование]; КИ (clinical trials): Испытание (исследование) с участием человека в качестве субъекта испытания (исследования), проводимое с целью изучения безопасности и (или) эффективности испытуемого (исследуемого) медицинского изделия и (или) метода диагностики или лечения, связанного с его применением.
Примечания
1 См. [2].
2 Методология проведения клинического испытания (исследования) системы искусственного интеллекта подразумевает использование в качестве субъекта исследования набор данных, который получен с участием человека путем ретроспективного анализа и т.п.
3.14
медицинская организация (healthcare organization): Юридическое лицо независимо от организационно-правовой формы, осуществляющее в качестве основного (уставного) вида деятельности медицинскую деятельность на основании лицензии, выданной в порядке, установленном законодательством Российской Федерации о лицензировании отдельных видов деятельности. [ГОСТ Р 58451-2019, пункт 3.10] |
3.15 медицинские изделия (medical device): Любые инструменты, аппараты, приборы, оборудование, материалы и прочие изделия, применяемые в медицинских целях отдельно или в сочетании между собой, а также вместе с другими принадлежностями, необходимыми для применения указанных изделий по назначению, включая специальное программное обеспечение, и предназначенные производителем для профилактики, диагностики, лечения и медицинской реабилитации заболеваний, мониторинга состояния организма человека, проведения медицинских исследований, восстановления, замещения, изменения анатомической структуры или физиологических функций организма, предотвращения или прерывания беременности, функциональное назначение которых не реализуется путем фармакологического, иммунологического, генетического или метаболического воздействия на организм человека.
Примечание - См. [3], статья 38.
3.16
метаданные (metadata): Информация о ресурсе. Примечание - Метаданные бывают трех типов: - описательные (служат для обнаружения, сбора или группирования данных по общим для них характеристикам); - структурные (определяют состав или организацию набора данных); - административные (используются для управления базой данных). [ГОСТ Р 57668-2017, пункт 4.10] |