5.1 Этапы
В процессе проведения оценки различают следующие этапы:
определение целей оценки;
проектирование и схема оценки;
планирование программы проведения оценки;
выполнение оценки;
отчет о результатах оценки.
В процессе оценки следует в запланированные даты или через заранее определенные интервалы времени проводить рассмотрение хода работ, которые следует выполнять, по крайней мере, в конце каждого этапа.
5.2 Определение целей оценки
Цели оценки определяют характер оценки, глубину испытаний, которые будут проведены, измерения и наблюдения, которые будут выполнены, а также типы отчетов, которые будут сделаны. Они определяют стоимость проведения оценки и требуемые ресурсы.
Поскольку это имеет большое значение, цели и объем оценки следует тщательно сформулировать и согласовать прежде, чем будет принят план проведения оценки.
5.3 Проектирование и схема оценки
5.3.1 Учитываемые аспекты
На этом этапе цели оценки переводятся в целевые задачи измерения, испытания и наблюдения. Для обеспечения их эффективности следует учесть аспекты, описанные в 5.3.2-5.3.5.
5.3.2 Конфигурация системы
Важный шаг в планировании оценки - решение относительно конфигурации, которая будет оценена. Свойство системы изменять конфигурацию может само быть свойством, которое должно быть оценено; в противном случае может быть предусмотрена возможность определения конкретных конфигураций, как, например, для нижеперечисленных ситуаций.
Если цель оценки состоит в том, чтобы оценить способность системы удовлетворять требованиям, установленным для конкретного применения, то оценка должна быть выполнена на определенной конфигурации системы, и эта конфигурация должна быть установлена.
Если цель оценки состоит в том, чтобы оценить гибкость системы для соответствия широкому диапазону типичных требований, с которыми сталкиваются в определенной отрасли промышленности, оценка должна быть выполнена для определенного диапазона модулей, которые могут быть применены в разнообразных альтернативных конфигурациях.
В этом случае альтернативно возможные конфигурации должны быть определены и по каждой из них следует провести оценку.
5.3.3 Границы системы
Граница системы должна быть тщательно определена с учетом того, "что входит" и "что не входит" в состав системы, оценка которой должна быть проведена.
Система имеет несколько различных границ, а именно: по отношению к процессу, системам поддержки, средствам энергоснабжения, окружающей среде, в которой система функционирует, а также другими связанными с ней внешними системами и пользователями системой (операторы, персонал обслуживания), по решаемой задаче и т.д.
Для каждой границы должен быть сделан четкий выбор.
5.3.4 Свойства и влияющие факторы
Документировать свойства системы и влияющие факторы удобно в матричной форме, где ячейки соответствуют элементам оценки.
Основная матрица, суммирующая оценку, представлена на рисунке 5.
Рисунок 5 - Матрица оценки