• Текст документа
  • Статус
Оглавление
Поиск в тексте
Действующий


ГОСТ Р ИСО/МЭК 33003-2017

     
     
НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ


Информационные технологии


ОЦЕНКА ПРОЦЕССА


Требования к системам измерения процесса


Information technologies. Process assessment. Requirements for process measurement frameworks



ОКС 35.080

Дата введения 2018-03-01

Предисловие

1 ПОДГОТОВЛЕН Обществом с ограниченной ответственностью "Информационно-аналитический вычислительный центр" (ООО ИАВЦ) на основе собственного перевода на русский язык англоязычной версии стандарта, указанного в пункте 4

2 ВНЕСЕН Техническим комитетом по стандартизации ТК 22 "Информационные технологии"

3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому регулированию и метрологии от 26 мая 2017 г. N 446-ст

4 Настоящий стандарт идентичен международному стандарту ИСО/МЭК 33003:2015* "Информационная технология. Оценка процесса. Требования к структурам измерения процесса" (ISO/IEC 33003:2015 "Information technology - Process assessment - Requirements for process measurement frameworks", IDT).
________________
* Доступ к международным и зарубежным документам, упомянутым здесь и далее по тексту, можно получить, перейдя по ссылке на сайт http://shop.cntd.ru. - Примечание изготовителя базы данных.


ИСО/МЭК 33003 разработан подкомитетом ПК 7 "Системная и программная инженерия" совместного технического комитета СТК 1 "Информационные технологии" Международной организации по стандартизации (ИСО) и Международной электротехнической комиссии (МЭК).

Наименование настоящего стандарта изменено относительно наименования указанного международного документа для приведения в соответствии с ГОСТ Р 1.5-2012 (пункт 3.5)

При применении настоящего стандарта рекомендуется использовать вместо ссылочных международных стандартов соответствующие им национальные стандарты, сведения о которых приведены в дополнительном приложении ДА

5 ВВЕДЕН ВПЕРВЫЕ

6 Некоторые положения международного стандарта, указанного в пункте 4, могут являться объектом патентных прав. ИСО и МЭК не несут ответственности за идентификацию подобных патентных прав


Правила применения настоящего стандарта установлены в статье 26 Федерального закона от 29 июня 2015 г. N 162-ФЗ "О стандартизации в Российской Федерации". Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.gost.ru)

Введение


В настоящем стандарте установлены требования, предъявляемые к системам измерения процесса с поддержкой возможности оценивать качественные свойства процесса, начиная с построения концепции до практического подтверждения. В системах измерения процесса в результате анализа качественных свойств процесса создаются составные измерения (например, уровни возможностей процесса в виде порядковой шкалы в ИСО/МЭК 33020). Среди примеров качественных свойств процесса, которые представляют собой параметры (теоретические концепции), можно назвать возможности процесса, защищенность процесса, скорость процесса и безопасность процесса. Основные пользователи настоящего стандарта - разработчики систем измерения процесса и моделей оценки процесса. Соответствие требованиям настоящего стандарта означает, что в ходе разработки системы измерения процесса будут создаваться надежные методы, обеспечивающие качественные составные измерения.

ИСО/МЭК 33003 относится к множеству международных стандартов, обеспечивающих содержательную и последовательную основу для оценки характеристик качества процесса, основанных на объективных данных реализации процессов. Основы оценки охватывают процессы, используемые при разработке, сопровождении и эксплуатации систем в области информационных технологий, а также применяемые при проектировании, передаче, поставке и улучшении услуг. В целом в этих международных стандартах рассматриваются характеристики качества процесса любого типа. Результаты оценки могут использоваться для улучшения процесса или определения и управления рисками, связанными с применением процессов.

В настоящем стандарте установлены требования к разработке систем измерения процесса, приведенных в ИСО/МЭК 33020. Эти требования могут быть использованы для определения моделей оценки процесса в соответствии с ИСО/МЭК 33004, а также для оценки процесса в соответствии с ИСО/МЭК 33002. Общее построение и содержание данного семейства стандартов приведено в ИСО/МЭК 33001.

Некоторые международные стандарты семейства ИСО/МЭК 330ХХ по оценке процесса предназначены для замены и расширения частей серии стандартов ИСО/МЭК 15504. Детальные отличия семейства стандартов ИСО/МЭК 330ХХ от серии стандартов ИСО/МЭК 15504 приведены в ИСО/МЭК 33001 (см. приложение А).

1 Область применения


В настоящем стандарте установлены требования к системам измерения, используемым для оценки процесса. Требования настоящего стандарта формируют структуру, которая представляет собой:

a) требования к системам измерения процесса при его оценке;

b) требования к проверке систем измерения процесса, используемого для оценки процесса;

c) требования, применимые к любой системе измерения процесса при получении составных измерений в различных областях.

Настоящий стандарт применим при разработке систем измерения любых качественных свойств процессов в разных областях.

Схема технологий, используемых в настоящем стандарте, приведена в приложении А. Пояснения к спецификациям конструкции приведены в приложении В. Обзор методов статистической проверки приведен в приложении С. Описание некоторых методов и ссылок, которые можно использовать в реализации требований к системам измерения процесса, приведено в приложении D. Эти приложения должны быть использованы в качестве инструкции по созданию систем измерения процесса, которые будут разрабатываться в рамках семейства стандартов.

Примечание - В ИСО/МЭК 33020 приведена система измерения процесса для оценки его возможностей в соответствии с требованиями настоящего стандарта.

2 Нормативные ссылки


В настоящем стандарте применены следующие нормативные ссылки*. Для датированных документов используются только указанные издания. Для недатированных документов используются последние издания с учетом внесенных в них изменений.
________________
* Таблицу соответствия национальных стандартов международным см. по ссылке. - Примечание изготовителя базы данных.


ISO/IEC 15939:2007 Systems and software engineering - Measurement process (Системная и программная инженерия. Процесс измерения)

ISO/IEC 33001:2015 Information technology - Process assessment - Concepts and terminology (Информационные технологии. Оценка процесса. Понятия и терминология)

3 Термины и определения


В настоящем стандарте применены термины, определенные в ИСО/МЭК 33001, ИСО/МЭК 15939, а также следующие термины и определения:

3.1 комплексный метод (aggregation method): Метод, совмещающий набор значений измерений для создания составного значения.

Примечание - Комплексные методы основаны на компенсационных и некомпенсационных моделях.

3.2 компенсационная модель (compensatory model): MCDM-модель, в которой составное измерение включает в себя условия с собственным весом, и где критерии (также см. условия свойств) с высоким значением могут компенсировать критерии с низким значением пропорционально весу каждого из них.

Примечание - Компенсационная модель предполагает, что совершенствование более важных мер (с более высоким весовым коэффициентом) с большей вероятностью повысит или улучшит общее составное значение, нежели совершенствование менее важных мер. Эта модель предполагает, что вес (уровень влияния) критериев остается тем же вне зависимости от измеренного уровня критерия.

3.3 составное измерение (composite measure): Переменная, получаемая из набора операций составных измерений конструкции, определенная в соответствии со спецификацией конструкции (информативной или формирующей); эта спецификация описывает способ, каким представляющая нужную конструкцию скрытая переменная связана с соответствующими измерениями.

3.4 составное значение (composite value): Значение составного измерения.

Примечание - Составное значение может находиться на порядковой шкале, шкале интервалов или отношений.

3.5 конструкция (construct): Параметры (абстрактная идея, изображение, основная тема или предмет), которые необходимо измерить в ходе оценки процесса.

Примечания

1 В системах измерения процесса конструкции (этот термин относится также к скрытым конструкциям) представляют собой теоретические концепции, такие как качественные и количественные свойства процесса.

2 Присваиваемое конструкции значение называется теоретическим определением, которое должно разъяснять ее значение, а также указывает на ее точные размеры (фасеты).

3.6 размерность (dimension): Отдельные компоненты, входящие в многомерную конструкцию.

3.7 формирующая конструкция (formative construct): Конструкция, созданная на базе измерений путем наблюдения при взаимодействии конструкции и соответствующих измерений.

Примечание - Конструкция представляет собой последовательность измерений, каждое из которых является определяющим фактором конструкции.

3.8 скрытая переменная (latent variable): Переменная, представляющая собой одномерную конструкцию.

Примечание - Для каждой размерности конструкции должна присутствовать отдельная скрытая переменная, а для каждой скрытой переменной должно проводиться по меньшей мере одно измерение.

3.9 MCDM - принятие решений с учетом множества критериев или принятие решений с учетом множества параметров (MCDM - Multiple Criteria Decision Making or Multi-Attribute Decision Making): Принятие решений о предпочтениях (например, оценка, расстановка приоритетов и выбор) из имеющихся альтернатив, описываемых множеством критериев.

Примечания

1 Критерий в MCDM соответствует измерению.

2 MCDM с одной альтернативой аналогично разработке комплексного измерения.

3.10 модель измерения (measurement model): Скрытое или явное отношение между скрытой переменной и ее (многокомпонентными) измерениями.

Примечание - Отношения между информативной (формирующей) конструкцией и ее измерением (измерениями) называют информативной (формирующей) моделью измерения.

3.11 многомерная конструкция (multidimensional construct): Конструкция, состоящая из определенного числа одномерных конструкций.

Примечание - Каждое измерение многомерной конструкции называется одномерным и представлено одной скрытой переменной. У каждой размерности может быть несколько измерений. Многомерная конструкция, например значение возможностей, определяемое как общий фактор свойств соответствующего процесса, отличается от случая, когда возможности определяют как сумму свойств процесса. Первый случай представляет собой информативную многомерную конструкцию, а второй - формирующую. Многомерная конструкция может включать в себя неопределенное число уровней.

3.12 некомпенсационная модель (non-compensatory model): MCDM-модель, не допускающая взаимную компенсацию критериев пропорционально их весу.

Примечание - Строго положительные или отрицательные условия непропорционально влияют на общее составное значение, несмотря на то, что весовой коэффициент остается тем же. Существуют разные некомпенсационные модели в зависимости от политики оценки, цели составного измерения и (или) шкалы измерения.

3.13 информативная конструкция (reflective construct): Конструкция, которая в отношениях "конструкция - измерения" рассматривается как объект измерений.

Примечание - Информативная конструкция является ключевым фактором вариативности ее измерений.

3.14

шкала (scale): Упорядоченный набор значений, последовательных или дискретных, либо набор категорий, на которые накладывается свойство.

Примечание - Типы шкал зависят от характера отношений между значениями шкалы. Обычно используют четыре типа шкал:

- номинальная - значения измерений имеют категорический характер. Например, классификация дефектов по типам не предполагает упорядочивание по категориям;

- порядковая - значения измерения сортируются по рангам. Например, отнесение дефектов к уровням серьезности представляет собой сортировку по рангам;

- интервальная - между значениями измерений существуют равные промежутки, соответствующие равным качественным показателям свойства. Например, минимальным значением сложности организации циклов в программе может быть единица, но с каждым нарастанием добавляется еще один путь. Значение не может быть нулевым;

- шкала отношений - между значениями измерений существуют равные промежутки в соответствии с равными количественными показателями свойства, где нулевое значение означает несоответствие какому-либо из свойств. Например, размер программного компонента в LOC представляет собой шкалу отношений, поскольку нулевое значение соответствует отсутствию строк кода и каждое новое приращение соответствует равному количеству кода.


[ИСО/МЭК 15939:2007]

3.15 одномерность (unidimensionality): Наличие одной характерной особенности или конструкции, подразумевающей набор измерений.

4 Требования к системам измерения процесса


В настоящем разделе установлены требования к разработке систем измерения процесса. Цель инструкций, содержащихся в настоящем стандарте, состоит в том, чтобы обеспечить лучшее понимание этих требований. Отношения между некоторыми элементами, описанными в настоящем разделе, приведены на рисунке А.1 (приложение А).

Примечание - Инструкции по обеспечению соответствия данным требованиям, включая примеры и методы, будут приведены в руководстве по созданию систем измерения процесса, разрабатываемых в рамках данного семейства стандартов.

4.1 Построение концепции

4.1.1 Требования

a) Система измерений должна определять и характеризовать качественное свойство отдельного процесса.

b) Качественное свойство процесса в системе измерения следует определять на базе многомерной конструкции.

c) Качественное свойство процесса в системе измерения следует определять как набор количественных свойств процесса.

d) Каждое качественное свойство процесса должно определяться своим набором количественных свойств процесса.

e) Каждое свойство процесса, которое не может быть измерено непосредственно, следует считать конструкцией.

f) Свойства процесса в системе измерения процесса необходимо определять как информативные или формирующие.

g) Система измерений должна фиксировать политики и допущения, определяющие ее использование и применение.

4.1.2 Указания

Построение концепции состоит из ее определения и разъяснения. Концепция представляет собой идею или образ, который объединяет в одном термине интересующие феномены (например, характерные особенности, особенности поведения). Список характерных особенностей охватывается обобщающим признаком. Большинство качественных свойств процесса (например, его возможности) не поддаются наблюдению, представляя собой теоретические концепции, именуемые конструкциями.

Комплексные измерения (например, уровня возможностей процесса), используемые в системах измерения процессов, должны определяться на основе модели, состоящей из свойств процесса. Система измерений может быть структурирована в набор уровней, достижение которых предполагается управлением процессом.

Если свойство процесса не поддается непосредственному измерению, его можно определить как конструкцию. Набор свойств процесса должен быть определен для любой конструкции, которая может быть информативной или формирующей.

Участие экспертов и заинтересованных лиц может повысить обоснованность качественного свойства процесса и количественных свойств; аспекты обоснованности приведены в приложении С, раздел С3.

Многомерную конструкцию можно изобразить в виде схемы путей, включая набор измерений и их взаимоотношений. Использование схемы путей делает более понятной сферу применения модели и ее структур.

4.2 Определение конструкции

4.2.1 Требования

a) В определении конструкции должно содержаться определение значения качественного и количественного свойств процесса в системе измерения процесса.

b) Определение конструкции должно прояснять спецификацию качественного и количественного свойств процесса в качестве измерений.

c) Определение конструкции должно предоставлять инструкции по практическому применению качественного и количественного свойств процесса.

d) Определение конструкции должно определять шкалы составных измерений, таких как качественные (например, серии порядковых значений, таких как уровень возможностей) или количественные.

e) По меньшей мере одно из свойств процесса должно включать в себя достижение определенной цели процесса и результата процесса; это называется свойством результативности процесса.

4.2.2 Указания

Качественные и количественные свойства процесса должны описывать интуитивное понимание их представления, их интерпретация может быть разной в зависимости от точки зрения и квалификации оценщика. Поэтому для разъяснения и предоставления значения конструкции оценщику необходимо определить конкретный состав конструкции для измеряемого процесса. В этом состоит процедура определения конструкции.

Уточнение конструкции предполагает, что, например, определение показателя качества процесса, как превосходящей по классу, полностью охватывает свойства процесса на базе спецификации конструкции, а определенные свойства процесса, как имеющие более низкий класс, представляют собой его точные размеры. Скрытую переменную можно присвоить одномерной конструкции модели. Статистические методы, относящиеся к размерности, приведены в приложении С, раздел С.1.

4.3 Практическое применение

4.3.1 Требования

a) Все свойства процесса следует определять в соответствии со спецификацией их конструкции.

b) Соответствие свойствам процесса должно быть подтверждено объективными свидетельствами.

4.3.2 Указания

Если свойство процесса поддается непосредственной оценке с помощью формальных методов оценки, методов автоматической отчетности, опросов (включая анкеты и интервью), наблюдений или иных эмпирических способов, то речь идет о базовом измерении, которое функционально не зависит от других измерений. Если свойство процесса измеряют вместе с несколькими под конструкциями или измерениями, оно может рассматриваться как конструкция. Для измерения конструкции рекомендуется проводить четыре или более базовых измерений, а также выполнить набор статистических тестов (включая проверку модели и спецификации конструкции) в информативной спецификации.

Примечание - Индикаторы оценки, используемые для присвоения оценок свойствам процесса, приведены в ИСО/МЭК 33004, пункт 6.3.4.

4.4 Проверка спецификации конструкции

4.4.1 Требования

Спецификации конструкции качественного свойства процесса и связанные с ним количественные свойства следует проверять путем практического использования и логического обоснования.

4.4.2 Указания

Существует два типа спецификаций конструкций, которые описывают то, как скрытая переменная представляет связь конструкции со своими измерениями (т.е. отношения между одномерной конструкцией и ее измерениями): информативная и формирующая модели измерений. Качественные и количественные свойства процесса можно рассматривать как определяющие факторы или индексы, создаваемые наблюдаемыми измерениями. Первый тип называют информативными (эффективными) конструкциями или информативными моделями измерений, а второй - формирующими (обусловленными) моделями.

Цель информативной модели измерения состоит в измерении отдельного свойства путем проведения нескольких измерений, в то время как в рамках формирующей модели осуществляют попытку обобщить несколько свойств в одном составном значении. Данные спецификации изображены на рисунке В.1 приложения В.

Правила принятия решений при проверке спецификации информативной или формирующей конструкций приведены в таблице 1. Эти правила можно применять к качественным свойствам процесса и его соответствующим характеристикам. Данные правила можно проанализировать путем статистической проверки спецификации конструкции. Подробное описание спецификации конструкции приведено в приложении В.


Таблица 1 - Правила принятия решений для проверки информативной или формирующей модели измерения

Правило принятия решений

Информативная модель измерений

Формирующая модель измерений

Свойства измерений конструкции

Измерения определяют свойства (аспекты) конструкции

Измерения определяют свойства (аспекты) конструкции


У измерений общая направленность

Измерения могут не иметь общей направленности


Измерения должны быть взаимозаменяемыми

Измерения не должны быть взаимозаменяемыми


Содержание измерений должно быть идентичным или схожим

Содержание измерений не должно быть идентичным или схожим


Исключение измерения не должно изменять концептуальную область конструкции

Исключение измерения может изменять концептуальную область конструкции


Предполагается, что измерения изменяются параллельно друг другу

Измерения не обязательно должны изменяться параллельно друг другу

Направление причинной связи между конструкцией и измерениями

Направление причинной связи - от конструкции к комплексным измерениям

Направление причинной связи - от измерений к конструкции


Изменения, вносимые в отдельное измерение, не должны приводить к изменению конструкции

Изменения, вносимые в конструкцию, не должны приводить к изменению измерений


В некоторых случаях связи, изображенные на В.1 приложения В, могут иметь более высокий уровень, т.е. концептуальные определения конструкций часто указаны на более абстрактном уровне, куда иногда входит несколько информативных и (или) формирующих измерений первого уровня. Модели более высокого уровня должны иметь теоретическое определение в информативной модели измерения. Проверку определения проводят путем проведения статистического анализа.

4.5 Свойства процесса присвоения оценок

4.5.1 Требования

a) Оценки должны быть присвоены свойствам процесса.

b) Шкалы измерений, т.е. номинальная, порядковая, шкала интервалов, связей, должны быть определены для свойств процесса.

Доступ к полной версии этого документа ограничен

Текст документа вы можете получить на ваш адрес электронной почты, заказав бесплатную демонстрацию систем «Кодекс» и «Техэксперт».

Что вы получите:

После завершения процесса оплаты вы получите доступ к полному тексту документа, возможность сохранить его в формате .pdf, а также копию документа на свой e-mail. На мобильный телефон придет подтверждение оплаты.

При возникновении проблем свяжитесь с нами по адресу uwt@kodeks.ru

ГОСТ Р ИСО/МЭК 33003-2017 Информационные технологии. Оценка процесса. Требования к системам измерения процесса

Название документа: ГОСТ Р ИСО/МЭК 33003-2017 Информационные технологии. Оценка процесса. Требования к системам измерения процесса

Номер документа: ИСО/МЭК 33003-2017

Вид документа: ГОСТ Р

Принявший орган: Росстандарт

Статус: Действующий

Опубликован: Официальное издание. М.: Стандартинформ, 2017 год
Дата принятия: 26 мая 2017

Дата начала действия: 01 марта 2018
Информация о данном документе содержится в профессиональных справочных системах «Кодекс» и «Техэксперт»
Узнать больше о системах