"ГОСТ 28195-89. Оценка качества программных средств. Общие положения" :: "docstroika.ru-Максимум" - бесплатные нормативы для строителей и проектировщиков

Утвержден и введен в действие

Постановлением Госстандарта СССР

от 28 июля 1989 г. N 2507

МЕЖГОСУДАРСТВЕННЫЙ СТАНДАРТ

ОЦЕНКА КАЧЕСТВА ПРОГРАММНЫХ СРЕДСТВ

ОБЩИЕ ПОЛОЖЕНИЯ

Quality control of software systems.

General principles

ГОСТ 28195-89

Группа П85

ОКСТУ 4002

Дата введения

1 июля 1990 года

1. Разработан и внесен Министерством приборостроения, средств автоматизации и систем управления СССР.

2. Утвержден и введен в действие Постановлением Государственного комитета СССР по стандартам от 28.07.89 N 2507.

3. Введен впервые.

4. Ссылочные нормативно-технические документы

───────────────────────────────────────┬──────────────────────────

Обозначение НТД, на который дана cсылка│ Номер приложения

───────────────────────────────────────┼──────────────────────────

ГОСТ 15467-79 │Приложение 1

ГОСТ 19781-90 │Приложение 1

5. Переиздание. Сентябрь 2001 г.

Настоящий стандарт устанавливает общие положения по оценке качества программных средств вычислительной техники (далее - ПС), поставляемых через фонды алгоритмов и программ (ФАП), номенклатуру и применяемость показателей качества ПС.

Термины, применяемые в стандарте, и пояснения к ним приведены в Приложении 1.

1. ОБЩИЕ ПОЛОЖЕНИЯ

1.1. Оценка качества осуществляется на всех этапах жизненного цикла ПС при:

- планировании показателей качества ПС;

- контроле качества на отдельных этапах разработки (техническое задание, технический проект, рабочий проект);

- контроле качества в процессе производства ПС;

- проверке эффективности модификации ПС на этапе сопровождения.

1.2. Оценка качества ПС представляет собой совокупность операций, включающих выбор номенклатуры показателей качества оцениваемого ПС, определение значений этих показателей и сравнение их с базовыми значениями.

1.3. Оценку качества проводят специалисты организаций:

- разработчика - на этапах разработки ПС;

- фондодержателя - на этапах приемки ПС в фонд;

- испытательных центров и центров сертификации ПС - на этапах испытаний и внедрения;

- изготовителя - на этапах тиражирования ПС;

- пользователя - на этапах внедрения, сопровождения и эксплуатации ПС.

1.4. Основные задачи, решаемые при оценке качества ПС:

- планирование уровня качества;

- контроль значений показателей качества в процессе разработки и испытаний;

- эксплуатационный контроль заданного уровня качества;

- выбор базовых образцов по подклассам и группам;

- методическое руководство разработкой нормативно-технических документов по оценке качества.

1.5. Методы определения показателей качества ПС различаются:

- по способам получения информации о ПС - измерительный, регистрационный, органолептический, расчетный;

- по источникам получения информации - традиционный, экспертный, социологический.

1.5.1. Измерительный метод основан на получении информации о свойствах и характеристиках ПС с использованием инструментальных средств. Например, с использованием этого метода определяется объем ПС - число строк исходного текста программ и число строк - комментариев, число операторов и операндов, число исполненных операторов, число ветвей в программе, число точек входа (выхода), время выполнения ветви программы, время реакции и другие показатели.

1.5.2. Регистрационный метод основан на получении информации во время испытаний или функционирования ПС, когда регистрируются и подсчитываются определенные события, например, время и число сбоев и отказов, время передачи управления другим модулям, время начала и окончания работы.

1.5.3. Органолептический метод основан на использовании информации, получаемой в результате анализа восприятия органов чувств (зрения, слуха), и применяется для определения таких показателей как удобство применения, эффективность и т.п.

1.5.4. Расчетный метод основан на использовании теоретических и эмпирических зависимостей (на ранних этапах разработки), статистических данных, накапливаемых при испытаниях, эксплуатации и сопровождении ПС. При помощи расчетного метода определяются длительность и точность вычислений, время реакции, необходимые ресурсы.

1.5.5. Определение значений показателей качества ПС экспертным методом осуществляется группой экспертов-специалистов, компетентных в решении данной задачи, на базе их опыта и интуиции.

Экспертный метод применяется в случаях, когда задача не может быть решена никаким другим из существующих способов или другие способы являются значительно более трудоемкими. Экспертный метод рекомендуется применять при определении показателей наглядности, полноты и доступности программной документации, легкости освоения, структурности.

1.5.6. Социологические методы основаны на обработке специальных анкет-вопросников.

2. НОМЕНКЛАТУРА ПОКАЗАТЕЛЕЙ КАЧЕСТВА ПРОГРАММНЫХ СРЕДСТВ

2.1. Номенклатура показателей качества и характеризуемые ими свойства программных средств приведены в табл. 1, где представлены 2 уровня иерархической структуры показателей качества ПС:

Таблица 1

─────────────────────┬───────┬────────────────────────────────────

Наименование групп и │Обозна-│ Характеризуемое свойство

комплексных показате-│чение │

лей качества │показа-│

│теля │

─────────────────────┼───────┼────────────────────────────────────

1. Показатели │ │ Характеризуют способность ПС в

надежности ПС │ │конкретных областях применения вы-

│ │полнять заданные функции в соответ-

│ │ствии с программными документами в

│ │условиях возникновения отклонений в

│ │среде функционирования, вызванных

│ │сбоями технических средств, ошибками

│ │во входных данных, ошибками обслужи-

│ │вания и другими дестабилизирующими

│ │воздействиями

1.1. Устойчивость │Н1 │ Способность обеспечивать

функционирования │ │продолжение работы программы после

│ │возникновения отклонений, вызванных

│ │сбоями технических средств,

│ │ошибками во входных данных и

│ │ошибками обслуживания

1.2. Работоспособ- │Н2 │ Способность программы функциониро-

ность │ │вать в заданных режимах и объемах

│ │обрабатываемой информации в соот-

│ │ветствии с программными документами

│ │при отсутствии сбоев технических

│ │средств

2. Показатели соп- │ │ Характеризуют технологические

ровождения │ │аспекты, обеспечивающие простоту

│ │устранения ошибок в программе и

│ │программных документах и поддержания

│ │ПС в актуальном состоянии

2.1. Структурность │С1 │Организация всех взаимосвязанных

│ │частей программы в единое целое с

│ │использованием логических структур

│ │"последовательность", "выбор",

│ │"повторение"

2.2. Простота │С2 │ Построение модульной структуры

конструкции │ │программы наиболее рациональным с

│ │точки зрения восприятия и понимания

│ │образом

2.3. Наглядность │С3 │ Наличие и представление в наиболее

│ │легко воспринимаемом виде исходных

│ │модулей ПС, полное их описание в

│ │соответствующих программных

│ │документах

2.4. Повторяемость │С4 │ Степень использования типовых

│ │проектных решений или компонентов,

│ │входящих в ПС

3. Показатели │ │ Характеризуют свойства ПС,

удобства применения │ │способствующие быстрому освоению,

│ │применению и эксплуатации ПС с

│ │минимальными трудозатратами с учетом

│ │характера решаемых задач и

│ │требований к квалификации

│ │обслуживающего персонала

3.1. Легкость │У1 │ Представление программных

освоения │ │документов и программ в виде,

│ │способствующем пониманию логики

│ │функционирования программы в целом и

│ │ее частей

3.2. Доступность │У2 │ Понятность, наглядность и полнота

эксплуатационных │ │описания взаимодействия пользователя

программных │ │с программой в эксплуатационных

документов │ │программных документах

3.3. Удобство │У3 │ Соответствие процесса обработки

эксплуатации и │ │данных и форм представления резуль-

обслуживания │ │татов характеру решаемых задач

4. Показатели │ │ Характеризуют степень

эффективности │ │удовлетворения потребности

│ │пользователя в обработке данных с

│ │учетом экономических, вычислительных

│ │и людских ресурсов

4.1. Уровень │Э1 │ Уровень автоматизации функций про-

автоматизации │ │цесса обработки данных с учетом

│ │рациональности функциональной струк-

│ │туры программы с точки зрения взаи-

│ │модействия с ней пользователя и ис-

│ │пользования вычислительных ресурсов

4.2. Временная │Э2 │ Способность программы выполнять

эффективность │ │заданные действия в интервал

│ │времени, отвечающий заданным

│ │требованиям

4.3. Ресурсоемкость│Э3 │ Минимально необходимые вычисли-

│ │тельные ресурсы и число обслуживаю-

│ │щего персонала для эксплуатации ПС

5. Показатели │ │ Характеризуют адаптируемость ПС к

универсальности │ │новым функциональным требованиям,

│ │возникающим вследствие изменения

│ │области применения или других

│ │условий функционирования

5.1. Гибкость │Г1 │ Возможность использования ПС в

│ │различных областях применения

5.2. Мобильность │Г2 │ Возможность применения ПС без

│ │существенных дополнительных

│ │трудозатрат на ЭВМ аналогичного

│ │класса

5.3. Модифицируе- │Г3 │ Обеспечение простоты внесения

мость │ │необходимых изменений и доработок в

│ │программу в процессе эксплуатации

6. Показатели │ │ Характеризуют степень соответствия

корректности │ │ПС требованиям, установленным в ТЗ,

│ │требованиям к обработке данных и

│ │общесистемным требованиям

6.1. Полнота реали-│К1 │ Полнота реализации заданных

зации │ │функций ПС и достаточность их

│ │описания в программной документации

6.2. Согласован- │К2 │ Однозначное, непротиворечивое

ность │ │описание и использование

│ │тождественных объектов, функций,

│ │терминов, определений,

│ │идентификаторов и т.д. в различных

│ │частях программных документов и

│ │текста программы

6.3. Логическая │К3 │ Функциональное и программное соот-

корректность │ │ветствие процесса обработки данных

│ │при выполнении задания общесистемным

│ │требованиям

6.4. Проверенность │К4 │ Полнота проверки возможных

│ │маршрутов выполнения программы в

│ │процессе тестирования

- первый уровень определяет группы показателей качества ПС, характеризующие потребительски-ориентированные свойства, которые соответствуют потребностям населения, народного хозяйства и экспорта продукции;

- второй уровень определен комплексными показателями качества ПС, характеризующими программно-ориентированные свойства, которые обеспечивают достижение требуемых потребительски-ориентированных свойств.

2.2. Выбор номенклатуры показателей качества для конкретного ПС осуществляется с учетом его назначения и требований областей применения. В табл. 2 представлена рекомендуемая применяемость показателей качества в зависимости от принадлежности ПС к тому или иному подклассу (группе) в соответствии с общесоюзным классификатором продукции.

2.3. Выбранная номенклатура показателей качества фиксируется в ТЗ на разработку ПС.

Таблица 2

────────┬─────────────────────────────────────────────────────────

Номер │ Применяемость показателя по подклассам (группам) ПС

показа- │

теля по ├────┬─────┬─────┬─────┬────┬────┬────┬───┬───┬───┬───┬───

табл. 1 │5011│5012 │5013 │5014 │5015│5016│5017│503│504│505│506│509

────────┼────┼─────┼─────┼─────┼────┼────┼────┼───┼───┼───┼───┼───

1.1 │+ │+ │+ │+ │+ │+ │+ │- │+/-│+ │+/-│

1.2 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

2.1 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │+/-│+/-│+/-│+/-│

2.2 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │- │+/-│+/-│+/-│

2.3 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │- │+/-│+/-│+/-│

2.4 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │+/-│+/-│+/-│+/-│

3.1 │+/- │+/- │+/- │+ │+ │+ │+ │+/-│+ │+/-│+/-│

3.2 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

3.3 │+ │+ │+/- │+ │+ │+ │+ │- │+ │+ │+/-│

4.1 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │- │+/-│+/-│+/-│

4.2 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │+/-│+/-│+/-│+/-│

4.3 │+ │+ │+ │+/- │+/- │+ │+/- │- │+/-│+/-│+/-│

5.1 │- │+/- │- │+/- │+/- │- │- │- │+ │+/-│+/-│

5.2 │+/- │+/- │+/- │+/- │+/- │+/- │+/- │+/-│+/-│+/-│+/-│

5.3 │+ │+ │+/- │+/- │+/- │+/- │+/- │- │+/-│+/-│+/-│

6.1 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

6.2 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

6.3 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

6.4 │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │+ │

Примечания. 1. Знак "+" означает применяемость, знак "-" - неприменяемость соответствующих показателей качества ПС, знак "+/-" - ограниченную применяемость.

2. Выбор показателей качества ПС для подкласса 509 (прочие ПС) осуществляется в зависимости от их назначения с учетом требований областей применения.

3. Наименование подклассов (групп) ПС по ОКП:

5011 - операционные системы и средства их расширения;

5012 - программные средства управления базами данных;

5013 - инструментально-технологические средства программирования;

5014 - ПС интерфейса и управления коммуникациями;

5015 - ПС организации вычислительного процесса (планирования, контроля);

5016 - сервисные программы;

5017 - ПС обслуживания вычислительной техники;

503 - прикладные программы для научных исследований;

504 - прикладные программы для проектирования;

505 - прикладные программы для управления техническими устройствами и технологическими процессами;

506 - прикладные программы для решения экономических задач;

509 - прочие ПС.

Приложение 1

Справочное

ПОЯСНЕНИЕ ТЕРМИНОВ, ПРИМЕНЯЕМЫХ В СТАНДАРТЕ

Таблица 3

───────────────────────┬──────────────────────────────────────────

Термин │ Пояснение

───────────────────────┼──────────────────────────────────────────

Базовый показатель │ Реально достижимая совокупность значений

качества │показателей качества ПС для уравнения

Вычислительные ресур-│ Технические средства ЭВМ, в том числе

сы │процессор, объемы оперативной и внешней

│памяти, время, в течение которого програм-

│ма занимает эти средства в ходе выполнения

Единичный показатель │ По ГОСТ 15467

качества продукции │

Качество продукции │ По ГОСТ 15467

Комплексный показа- │ По ГОСТ 15467

тель качества продукции│

Логическая структура │ Детализация части программы на условный

"выбор" │элемент и несколько детальных частей таким

│образом, что управление передается в зави-

│симости от реализации условного элемента

│только одной из тех частей, при этом одна

│из этих частей при необходимости может

│быть "пустым оператором", т.е. не выпол-

│нять никаких действий

Логическая структура │ Детализация части программы на несколько

"последовательность" │детальных частей таким образом, что пере-

│дача управления этим частям осуществляется

│последовательно от предшествующей части к

│последующей

Логическая структура │ Детализация части программы на условный

"повторение" │элемент и одну детальную часть таким

│образом, что управление передается этой

│части многократно в соответствии с

│реализацией уставного элемента

Маршрут выполнения │ Совокупность операторов программы,

программы │выполненных во время однократного ее

│выполнения

Ошибка обслуживания │ Нарушение требуемого порядка взаимодей-

│ствия с программой со стороны пользователя

Показатель качества │ По ГОСТ 15467

продукции │

Программа │ По ГОСТ 19781

Программное средство │ Программа, предназначенная для

вычислительной техники │многократного применения на различных

(ПС) │объектах, разработанная любым способом и

│снабженная комплектом программных

│документов

Программный документ │ По ГОСТ 19781

Сбой технических │ Событие, заключающееся в нарушении

средств │исправного состояния технических средств

│ЭВМ при сохранении ими работоспособного

│состояния

Среда функциониро- │ Совокупность организационных,

вания │информационных программных и технических

│средств ЭВМ при сохранении ими

│работоспособного состояния

Эксплуатационный │ По ГОСТ 19781

программный документ │

Приложение 2

Справочное

МЕТОДИКА ОЦЕНКИ КАЧЕСТВА ПС

1. Оценка качества ПС проводится на фазах жизненного цикла (табл. 1) и включает выбор номенклатуры показателей, их оценку и сопоставление значений показателей, полученных в результате сравнения с базовыми значениями.

2. Показатели качества объединены в систему из четырех уровней. Каждый вышестоящий уровень содержит в качестве составляющих показатели нижестоящих уровней. Допускается вводить дополнительные показатели на каждом из уровней.

2.1. Для обеспечения возможности получения интегральной оценки по группам показателей качества используют факторы качества (1-й уровень): надежность ПС, сопровождаемость, удобство применения, эффективность, универсальность (гибкость) и корректность.

2.2. Каждому фактору качества соответствует определенный набор критериев качества (комплексные показатели - 2-й уровень): устойчивость функционирования, работоспособность, структурность, простота конструкции, наглядность, повторяемость, легкость освоения, доступность эксплуатационных программных документов, удобство эксплуатации и обслуживания, уровень автоматизации, временная эффективность, ресурсоемкость, гибкость, мобильность, модифицируемость, полнота реализации, согласованность, логическая корректность, проверенность.

2.3. Критерии качества определяют одной или несколькими метриками (3-й уровень). Если критерий качества определяется одной метрикой, то уровень метрики опускается.

2.4. Метрики составляются из оценочных элементов (единичных показателей - 4-й уровень), определяющих заданное в метрике свойство. Число оценочных элементов, входящих в метрику, не ограничено. Взаимосвязь факторов, критериев и метрик с фазами жизненного цикла ПС приведена на черт. 1 - 20.

Фаза анализа

-----------------------------------

<*> Указан номер метрики (критерия).

Черт. 1.

Фаза проектирования

Черт. 2

Фазы реализации, тестирования, изготовления,

обслуживания (сопровождения)

Черт. 3

Фаза анализа

Черт. 4

Фаза проектирования

Черт. 5

Фазы реализации, тестирования и изготовления

Черт. 6

Фаза обслуживания (сопровождения)

Черт. 7

Фаза анализа и проектирования

Черт. 8

Фазы реализации и тестирования

Черт. 9

Фазы изготовления, обслуживания (сопровождения)

Черт. 10

Фаза анализа

Черт. 11

Фаза проектирования

Черт. 12

Фазы реализации, тестирования, изготовления,

обслуживания (сопровождения)

Черт. 13

Фаза анализа

Черт. 14

Фаза проектирования

Черт. 15

Фазы реализации, тестирования, изготовления,

обслуживания (сопровождения)

Черт. 16

Фаза анализа

Черт. 17

Фаза проектирования

Черт. 18

Фазы реализации, тестирования и изготовления

Черт. 19

Фазы обслуживания (сопровождения)

Черт. 20

2.5. Выбор оценочных элементов в метрике зависит от функционального назначения оценочного элемента и определяется с учетом данных, полученных при проведении испытаний различных видов, а также по результатам эксплуатации ПС.

2.6. Для накопления информации об оценочных элементах формируется справочник оценочных элементов (табл. 5 - 10) на основе ранее полученных данных о качестве аналогичных ПС.

Таблица 4

──────┬─────────────┬──────────┬──────────────────────────────────

Про- │ Фаза │ Подфаза │ Результат

цесс │ │ │

──────┼─────────────┼──────────┼──────────────────────────────────

Раз- │Анализ │- │ Определение требований.

ра- │ │ │ Спецификация требований.

ботка │ │ │ Техническое задание

│Проектирова- │Логическое│ Логический проект

│ние │проектиро-│(функциональный проект).

│ │вание │ Программно-технический проект:

│ │ │ - системы,

│ │ │ - программ,

│ │ │ - модулей,

│ │ │ - документации

│Реализация │- │ Модули.

│ │ │ Программы.

│ │ │ Система.

│ │ │ Средства тестирования.

│ │ │ Дополняющая документация

│Тестирование │- │ Тестирование модуля, программы

│ │ │системы, дополняющая документация.

│ │ │ Сдача в фонд (при необходимости)

│Изготовление │Выпуск │ Программное средство в форме,

│ │ │готовой для поставки.

│ │ │ Документация.

│ │ │ Правила внесения изменений

│ │Испытания │ Установленное ПС.

│ │ │ Организация применения.

│ │ │ Отчет об испытаниях.

│ │ │ Отзыв пользователя

При- │Внедрение │- │ Подтверждающее стабильной

ме- │ │ │эксплуатации.

нение │ │ │ Предоставление набора услуг по

│ │ │внедрению

│Эксплуатация │- │ Предложения об

│ │ │усовершенствовании.

│ │ │ Сообщение о функциональных

│ │ │отклонениях

│Обслуживание │- │ Информация о сопровождении про-

│(сопровожде- │ │грамм.

│ние) │ │ Измененное ПС

Таблица 5

Оценочные элементы фактора "надежность ПС"

─────┬────────────────────────────┬────────┬─────────────────────────────

Код │ Наименование │ Метод │ Оценка

эле- │ │ оценки │

мента│ │ │

─────┼────────────────────────────┼────────┼─────────────────────────────

Н0101│ Наличие требований к про- │Эксперт-│0-1

│грамме по устойчивости │ный │

│функционирования при нали- │ │

│чии ошибок во входных │ │

│данных │ │

Н0102│ Возможность обработки │То же │0-1

│ошибочных ситуаций │ │

Н0103│ Полнота обработки оши- │" │0-1

│бочных ситуаций │ │

Н0104│ Наличие тестов для провер-│" │0-1

│ки допустимых значений │ │

│входных данных │ │

Н0105│ Наличие системы контроля │" │0-1

│полноты входных данных │ │

Н0106│ Наличие средств контроля │" │0-1

│корректности входных │ │

│данных │ │

Н0107│ Наличие средств контроля │" │0-1

│непротиворечивости входных │ │

│данных │ │

Н0201│ Наличие требований к про- │" │0-1

│грамме по восстановлению │ │

│процесса выполнения в │ │

│случае сбоя операционной │ │

│системы, процессора, │ │

│внешних устройств │ │

Н0202│ Наличие требований к про- │" │0-1

│грамме по восстановлению │ │

│результатов при отказах │ │

│процессора, ОС │ │

Н0203│ Наличие средств восстанов-│" │0-1

│ления процесса в случае │ │

│сбоев оборудования │ │

Н0204│Наличие возможности разде- │" │0-1

│ления по времени выполне- │ │

│ния отдельных функций │ │

│программ │ │

Н0205│ Наличие возможности по- │" │0-1

│вторного старта с точки │ │

│останова │ │

Н0108│ Наличие проверки парамет- │" │0-1

│ров и адресов по диапазону │ │

│их значений │ │

Н0109│Наличие обработки │" │0-1

│граничных результатов │ │

Н0110│ Наличие обработки неопре- │" │0-1

│деленностей (деление на 0, │ │

│квадратный корень из отри- │ │

│цательного числа и т.д.) │ │

Н0301│ Наличие централизованного │" │0-1

│управления процессами, │ │

│конкурирующими из-за ре- │ │

│сурсов │ │

Н0302│ Наличие возможности авто- │" │0-1

│матически обходить ошибоч- │ │

│ные ситуации в процессе │ │

│вычисления │ │

Н0303│ Наличие средств, обеспечи-│" │0-1

│вающих завершение процесса │ │

│решения в случае помех │ │

Н0304│ Наличие средств, обеспечи-│" │0-1

│вающих выполнение програм- │ │

│мы в сокращенном объеме в │ │

│случае ошибок или помех │ │

Н0305│ Показатель устойчивости к │Расчет- │Р(Y) = 1 - D/К,

│искажающим воздействиям │ный │где D - число экспери-

│ │ │ментов, в которых иска-

│ │ │жающие воздействия

│ │ │приводили к отказу,

│ │ │К - число эксперимен-

│ │ │тов, в которых имитиро-

│ │ │вались искажающие воз-

│ │ │действия

Н0401│ Вероятность безотказной │То же │P = 1 - Q/N,

│работы │ │где Q - число зарегист-

│ │ │рированных отказов,

│ │ │N - число экспериментов

Н0501│ Оценка по среднему времени│" │

│восстановления │ │

│ │ │ /

│ │ │ | доп

│ │ │ |1, если Т <= T

│ │ │ | в в

│ │ │ |

│ │ │ /

│ │ │ Q = \ ,

│ │ │ в | доп

│ │ │ |T

│ │ │ | в доп

│ │ │ |----, если Т > T

│ │ │ |Т в в

│ │ │ \ в

│ │ │

│ │ │ доп

│ │ │где Т - допустимое

│ │ │ в

│ │ │среднее время восстано-

│ │ │вления;

│ │ │Т - среднее время вос-

│ │ │ в

│ │ │становления, которое

│ │ │определяется по формуле

│ │ │

│ │ │ 1 N

│ │ │ Т = N SUM T ,

│ │ │ в i в

│ │ │ i

│ │ │

│ │ │где N - число восстано-

│ │ │влений;

│ │ │T - время восстано-

│ │ │ в

│ │ │ i

│ │ │вления после i-го

│ │ │отказа

Н0502│ Оценка по продолжительно- │Расчет- │

│сти преобразования входно- │ный │ / доп

│го набора данных в выходной │ │ |1, если Т <= T

│ │ │ | п п

│ │ │ | i i

│ │ │ |

│ │ │ /

│ │ │Q = \ ,

│ │ │ п | доп

│ │ │ i |T

│ │ │ | п

│ │ │ | i доп

│ │ │ |----, если Т > T

│ │ │ |Т п п

│ │ │ | п i i

│ │ │ \ i

│ │ │

│ │ │ доп

│ │ │где Т - допусти-

│ │ │ п

│ │ │ i

│ │ │мое время преобразова-

│ │ │ния i-го входного набо-

│ │ │ра данных;

│ │ │Т - фактическая про-

│ │ │ п

│ │ │ i

│ │ │должительность преобра-

│ │ │зования i-го входного

│ │ │набора данных

Таблица 6

Оценочные элементы фактора "сопровождаемость"

─────┬───────────────────────────┬────────┬───────────────────────

Код │ Наименование │ Метод │ Оценка

эле- │ │оценки │

мента│ │ │

─────┼───────────────────────────┼────────┼───────────────────────

С0803│ Наличие комментариев в │Эксперт-│0-1

│точках входа и выхода │ный │

│программы │ │

С0302│ Оценка простоты │Расчет- │

│программы по числу точек │ный │ 1

│входа и выхода │ │W = -----------------,

│ │ │ (D + 1) x (F + 1)

│ │ │

│ │ │где D - общее число то-

│ │ │чек входа в программу,

│ │ │F - общее число точек

│ │ │выхода из программы

С1002│ Оценка простоты │То же │U = (1 - А/В),

│программы по числу │ │где А - общее число пе-

│переходов по условию │ │реходов по условию;

│ │ │В - общее число

│ │ │исполняемых операторов

С0303│ Осуществляется ли │Эксперт-│0-1

│передача результатов │ный │

│работы модуля через │ │

│вызывающий его модуль │ │

С0304│ Осуществляется ли │То же │0-1

│контроль за правильностью │ │

│данных, поступающих в │ │

│вызывающий модуль от │ │

│вызываемого │ │

С0604│ Оценка программы по │" │0-1

│числу циклов │ │

С0801│ Наличие комментариев ко │" │0-1

│всем машинозависимым ча- │ │

│стям программы │ │

С0802│ Наличие комментариев к │" │0-1

│машинозависимым операторам │ │

│программы │ │

С0901│ Соответствие │" │0-1

│комментариев принятым │ │

│соглашениям │ │

С1001│ Используется ли язык │" │0-1

│высокого уровня │ │

С0301│ Наличие проверки │" │0-1

│корректности передаваемых │ │

│данных │ │

С0902│ Наличие комментариев- │" │0-1

│заголовков программы с │ │

│указанием ее структурных и │ │

│функциональных характери- │ │

│стик │ │

С0601│ Использование при │" │0-1

│построении программ метода │ │

│структурного │ │

│программирования │ │

С0602│ Соблюдение принципа │" │0-1

│разработки программы │ │

│сверху вниз │ │

С0201│ Наличие ограничений на │" │0-1

│размеры модуля │ │

С0101│ Наличие модульной схемы │" │0-1

│программы │ │

С030 │ Наличие требований к │" │0-1

│независимости модулей │ │

│программы от типов и │ │

│форматов выходных данных │ │

С0102│ Оценка программы по │" │0-1

│числу уникальных модулей │ │

С0903│ Оценка ясности и │" │0-1

│точности описания │ │

│последовательности │ │

│функционирования всех │ │

│элементов программы │ │

С0603│Оценка программы по числу │" │0-1

│циклов с одним входом и │ │

│одним выходом │ │

Таблица 7

Оценочные элементы фактора "удобство применения"

────────┬───────────────────────────────────────┬──────────┬──────

Код │ Наименование │ Метод │Оценка

элемента│ │ оценки │

────────┼───────────────────────────────────────┼──────────┼──────

У0101 │ Возможность освоения программных │Экспертный│0-1

│средств по документации │ │

У0102 │ Возможность освоения ПС на контроль- │То же │0-1

│ном примере при помощи ЭВМ │ │

У0103 │ Возможность поэтапного освоения ПС │" │0-1

У0201 │ Полнота и понятность документации для│" │0-1

│освоения │ │

У0202 │ Точность документации для освоения │" │0-1

У0203 │ Техническое исполнение документации │" │0-1

У0301 │ Наличие краткой аннотации │" │0-1

У0302 │ Наличие описания решаемых задач │" │0-1

У0303 │ Наличие описания структуры функций ПС│" │0-1

У0304 │ Наличие описания основных функций ПС │" │0-1

У0306 │ Наличие описания частных функций │" │0-1

У0307 │ Наличие описания алгоритмов │" │0-1

У0308 │ Наличие описания межмодульных │" │0-1

│интерфейсов │ │

У0309 │ Наличие описания пользовательских │" │0-1

│интерфейсов │ │

У0310 │ Наличие описания входных и выходных │" │0-1

│данных │ │

У0311 │ Наличие описания диагностических │" │0-1

│сообщений │ │

У0312 │ Наличие описания основных │" │0-1

│характеристик ПС │ │

У0314 │ Наличие описания программной среды │" │0-1

│функционирования ПС │ │

У0315 │ Достаточность документации для ввода │" │0-1

│ПС в эксплуатацию │ │

У0316 │ Наличие информации технологии │" │0-1

│переноса для мобильных программ │ │

У0401 │ Соответствие оглавления содержанию │" │0-1

│документации │ │

У0402 │ Оценка оформления документации │" │0-1

У0403 │ Грамматическая правильность изложения│" │0-1

│документации │ │

У0404 │ Отсутствие противоречий │" │0-1

У0405 │ Отсутствие неправильных ссылок │" │0-1

У0406 │ Ясность формулировок и описаний │" │0-1

У0407 │ Отсутствие неоднозначных формулировок│" │0-1

│и описаний │ │

У0408 │ Правильность использования терминов │" │0-1

У0409 │ Краткость, отсутствие лишней │" │0-1

│детализации │ │

У0410 │ Единство формулировок │" │0-1

У0411 │ Единство обозначений │" │0-1

У0412 │ Отсутствие ненужных повторений │" │0-1

У0413 │ Наличие нужных объяснений │" │0-1

У0501 │ Оценка стиля изложения │" │0-1

У0502 │ Дидактическая разделенность │" │0-1

У0503 │ Формальная разделенность │" │0-1

У0504 │ Ясность логической структуры │" │0-1

У0505 │ Соблюдение стандартов и правил │" │0-1

│изложения в документации │ │

У0506 │ Оценка по числу ссылок вперед в │" │0-1

│тексте документов │ │

У0601 │ Наличие оглавления │" │0-1

У0602 │ Наличие предметного указателя │" │0-1

У0603 │ Наличие перекрестных ссылок │" │0-1

У0604 │ Наличие всех требуемых разделов │" │0-1

У0605 │ Соблюдение непрерывности нумерации │" │0-1

│страниц документов │ │

У0606 │ Отсутствие незаконченных разделов │" │0-1

│абзацев, предложений │ │

У0607 │ Наличие всех рисунков, чертежей, │" │0-1

│формул, таблиц │ │

У0608 │ Наличие всех строк и примечаний │" │0-1

У0609 │ Логический порядок частей внутри │" │0-1

│главы │ │

У0701 │ Наличие полного перечня документации │" │0-1

У0801 │ Уровень языка общения пользователя с │" │0-1

│программой │ │

У0802 │ Легкость и быстрота загрузки и │" │0-1

│запуска программы │ │

У0803 │ Легкость и быстрота завершения работы│" │0-1

│программы │ │

У0804 │ Возможность распечатки содержимого │" │0-1

│программы │ │

У0805 │ Возможность приостанова и повторного │" │0-1

│запуска работы без потерь информации │ │

У0901 │ Соответствие меню требованиям │" │0-1

│пользователя │ │

У0902 │ Возможность прямого перехода вверх и │" │0-1

│вниз по многоуровневому меню (пропуск │ │

│уровней) │ │

У1001 │ Возможность управления подробностью │" │0-1

│получаемых выходных данных │ │

У1002 │ Достаточность полученной информации │" │0-1

│для продолжения работы │ │

У1101 │ Обеспечение удобства ввода данных │" │0-1

У1102 │ Легкость восприятия │" │0-1

У1201 │ Обеспечение программой выполнения │" │0-1

│предусмотренных рабочих процедур │ │

У1202 │ Достаточность информации, выдаваемой │" │0-1

│программой для составления дополни- │ │

│тельных процедур │ │

Таблица 8

Оценочные элементы фактора "эффективность"

────────┬─────────────────────────────────────┬────────────┬──────

Код │ Наименование │Метод оценки│Оценка

элемента│ │ │

────────┼─────────────────────────────────────┼────────────┼──────

Э0101 │ Проблемно-ориентированные функции │Экспертный │0-1

│ │или расчет- │

│ │ный │

Э0102 │ Машинно-ориентированные функции │То же │0-1

Э0103 │ Функции ведения и управления │" │0-1

Э0104 │ Функции ввода/вывода │" │0-1

Э0105 │ Функции защиты и проверки данных │" │0-1

Э0106 │ Функции защиты от несанкционирован-│" │0-1

│ного доступа │ │

Э0107 │ Функции контроля доступа │" │0-1

Э0108 │ Функции защиты от внесения │" │0-1

│изменений │ │

Э0109 │ Наличие соответствующих границ │" │0-1

│функциональных областей │ │

Э0110 │ Число знаков после запятой в │" │0-1

│результатах вычислений │ │

Э0201 │ Время выполнения программ │" │0-1

Э0202 │ Время реакции и ответов │" │0-1

Э0203 │ Время подготовки │" │0-1

Э0205 │ Затраты времени на защиту данных │" │0-1

Э0206 │ Время компиляции │" │0-1

Э0301 │ Требуемый объем внутренней памяти │" │0-1

Э0302 │ Требуемый объем внешней памяти │" │0-1

Э0303 │ Требуемые периферийные устройства │" │0-1

Э0304 │ Требуемое базовое программное │" │0-1

│обеспечение │ │

Таблица 9

Оценочные элементы фактора "универсальность"

────────┬─────────────────────────────────────┬────────────┬──────

Код │ Наименование │Метод оценки│Оценка

элемента│ │ │

────────┼─────────────────────────────────────┼────────────┼──────

Г0101 │ Оценка числа потенциальных │Экспертный │0-1

│пользователей │ │

Г0102 │ Оценка числа функций ПС │То же │0-1

Г0103 │ Насколько набор функций удовлетво- │" │0-1

│ряет требованиям пользователя │ │

Г0104 │ Насколько возможности программ │" │0-1

│охватывают область решаемых пользова-│ │

│телем задач │ │

Г0105 │ Возможность настройки формата вы- │" │0-1

│ходных данных для конкретных пользо- │ │

│вателей │ │

Г0201 │ Наличие схемы иерархии модулей │" │0-1

│программы │ │

Г0202 │ Оценка независимости модулей │" │0-1

Г0203 │ Оценка числа уникальных │" │0-1

│элементов/реквизитов │ │

Г0204 │ Используется ли в текущем вызове │" │0-1

│модуля информация, полученная в │ │

│предыдущем вызове │ │

Г0205 │ Оценка организации точек входа и │" │0-1

│выхода модуля │ │

Г0206 │ Наличие описания атрибутов модуля │" │0-1

Г0301 │ Оценка программ по числу переходов │" │0-1

│и точек ветвления │ │

Г0401 │ Использование метода пошагового │" │0-1

│уточнения │ │

Г0402 │ Наличие описания структуры программ│" │0-1

Г0403 │ Наличие описания связей между │" │0-1

│элементами структуры программы │ │

Г0404 │ Наличие в программе повторного │" │0-1

│выполнения функций (подпрограмм) │ │

Г0501 │ Использование стандартных протоко- │" │0-1

│лов связи │ │

Г0601 │ Использование стандартных │" │0-1

│интерфейсных подпрограмм │ │

Г0701 │ Оценка зависимости программ от │" │0-1

│емкости оперативной памяти ЭВМ │ │

Г0702 │ Оценка зависимости временных харак-│" │0-1

│теристик программы от скорости вычис-│ │

│лений ЭВМ │ │

Г0703 │ Оценка зависимости функционирования│" │0-1

│программы от числа внешних запоминаю-│ │

│щих устройств и их общей емкости │ │

Г0704 │ Оценка зависимости функционирования│" │0-1

│программы от специальных устройств │ │

│ввода-вывода │ │

Г0801 │ Применение специальных языков │" │0-1

│программирования │ │

Г0802 │ Оценка зависимости программы от │" │0-1

│программ операционной системы │ │

Г0803 │ Зависимость от других программных │" │0-1

│средств │ │

Г0901 │ Оценка локализации непереносимой │" │0-1

│части программы │ │

Г1001 │ Оценка использования отрицательных │" │0-1

│или булевых выражений │ │

Г1002 │ Оценка программы по использованию │" │0-1

│условных переходов │ │

Г1003 │ Оценка программы по использованию │" │0-1

│безусловных переходов │ │

Г1004 │ Оформление процедур входа и выхода │" │0-1

│из циклов │ │

Г1005 │ Ограничения на модификацию перемен-│" │0-1

│ной индексации в цикле │ │

Г1007 │ Оценка программы по использованию │" │0-1

│локальных переменных │ │

Г1006 │ Оценка модулей по направлению │" │0-1

│потока управления │ │

Г1101 │ Оценка программы по числу │" │0-1

│комментариев │ │

Г1201 │ Наличие заголовка в программе │" │0-1

Г1202 │ Комментарии к точкам ветвлений │" │0-1

Г1203 │ Комментарии к машинозависимым час- │" │0-1

│тям программы │ │

Г1204 │ Комментарии к машинозависимым │" │0-1

│операторам программы │ │

Г1205 │ Комментарии к операторам объявления│" │0-1

│переменных │ │

Г1206 │ Оценка семантики операторов │" │0-1

Г1207 │ Наличие соглашений по форме │" │0-1

│представления комментариев │ │

Г1208 │ Наличие общих комментариев к │" │0-1

│программам │ │

Г1301 │ Использование языков высокого уров-│" │0-1

│ня │ │

Г1302 │ Семантика имен используемых │" │0-1

│переменных │ │

Г1303 │ Использование отступов, сдвигов и │" │0-1

│пропусков при формировании текста │ │

Г1304 │ Размещение операторов по строкам │" │0-1

Г1401 │ Передача информации для управления │" │0-1

│по параметрам │ │

Г1402 │ Параметрическая передача входных │" │0-1

│данных │ │

Г1403 │ Наличие передачи результатов работы│" │0-1

│между модулями │ │

Г1404 │ Наличие проверки правильности дан- │" │0-1

│ных, получаемых модулями от вызывае- │ │

│мого модуля │ │

Г1405 │ Использование общих областей памяти│" │0-1

Таблица 10

Оценочные элементы фактора "корректность"

────────┬─────────────────────────────────────┬────────────┬──────

Код │ Наименование │Метод оценки│Оценка

элемента│ │ │

────────┼─────────────────────────────────────┼────────────┼──────

К0101 │ Наличие всех необходимых документов│Экспертный │0-1

│для понимания и использования ПС │ │

К0102 │ Наличие описания и схемы иерархии │То же │0-1

│модулей программы │ │

К0103 │ Наличие описания основных функций │" │0-1

К0104 │ Наличие описания частных функций │" │0-1

К0105 │ Наличие описания данных │" │0-1

К0106 │ Наличие описания алгоритмов │" │0-1

К0107 │ Наличие описания интерфейсов между │" │0-1

│модулями │ │

К0108 │ Наличие описания интерфейсов с │" │0-1

│пользователями │ │

К0109 │ Наличие описания используемых │" │0-1

│числовых методов │ │

К0110 │ Указаны ли все численные методы │" │0-1

К0111 │ Наличие описания всех параметров │" │0-1

К0112 │ Наличие описания методов настройки │" │0-1

│системы │ │

К0113 │ Наличие описания всех │" │0-1

│диагностических сообщений │ │

К0114 │ Наличие описания способов проверки │" │0-1

│работоспособности программы │ │

К0201 │ Реализация всех исходных модулей │" │0-1

К0202 │ Реализация всех основных функций │" │0-1

К0203 │ Реализация всех частных функций │" │0-1

К0204 │ Реализация всех алгоритмов │" │0-1

К0205 │ Реализация всех взаимосвязей в │" │0-1

│системе │ │

К0206 │ Реализация всех интерфейсов между │" │0-1

│модулями │ │

К0207 │ Реализация возможности настройки │" │0-1

│системы │ │

К0208 │ Реализация диагностики всех │" │0-1

│граничных и аварийных ситуаций │ │

К0209 │ Наличие определения всех данных │" │0-1

│(переменные, индексы, массивы и │ │

│проч.) │ │

К0210 │ Наличие интерфейсов с пользователем│" │0-1

К0301 │ Отсутствие противоречий в описании │" │0-1

│частных функций │ │

К0302 │ Отсутствие противоречий в описании │" │0-1

│основных функций в разных документах │ │

К0303 │ Отсутствие противоречий в описании │" │0-1

│алгоритмов │ │

К0304 │ Отсутствие противоречий в описании │" │0-1

│взаимосвязей в системе │ │

К0305 │ Отсутствие противоречий в описании │" │0-1

│интерфейсов между модулями │ │

К0306 │ Отсутствие противоречий в описании │" │0-1

│интерфейсов с пользователем │ │

К0307 │ Отсутствие противоречий в описании │" │0-1

│настройки системы │ │

К0309 │ Отсутствие противоречий в описании │" │0-1

│иерархической структуры сообщений │ │

К0310 │ Отсутствие противоречий в описании │" │0-1

│диагностических сообщений │ │

К0311 │ Отсутствие противоречий в описании │" │0-1

│данных │ │

К0401 │ Отсутствие противоречий в │" │0-1

│выполнении основных функций │ │

К0402 │ Отсутствие противоречий в │" │0-1

│выполнении частных функций │ │

К0403 │ Отсутствие противоречий в │" │0-1

│выполнении алгоритмов │ │

К0404 │ Правильность взаимосвязей │" │0-1

К0405 │ Правильность реализации интерфейса │" │0-1

│между модулями │ │

К0406 │ Правильность реализации интерфейса │" │0-1

│с пользователем │ │

К0407 │ Отсутствие противоречий в настройке│" │0-1

│системы │ │

К0408 │ Отсутствие противоречий в │" │0-1

│диагностике системы │ │

К0409 │ Отсутствие противоречий в общих │" │0-1

│переменных │ │

К0501 │ Единообразие способов вызова │" │0-1

│модулей │ │

К0502 │ Единообразие процедур возврата │" │0-1

│управления из модулей │ │

К0503 │ Единообразие способов сохранения │" │0-1

│информации для возврата │ │

К0504 │ Единообразие способов │" │0-1

│восстановления информации для │ │

│возврата │ │

К0505 │ Единообразие организации списков │" │0-1

│передаваемых параметров │ │

К0601 │ Единообразие наименования каждой │" │0-1

│переменной и константы │ │

К0602 │ Все ли одинаковые константы │" │0-1

│встречаются во всех программах под │ │

│одинаковыми именами │ │

К0603 │ Единообразие определения внешних │" │0-1

│данных во всех программах │ │

К0604 │ Используются ли разные идентифи- │" │0-1

│каторы для разных переменных │ │

К0605 │ Все ли общие переменные объявлены │" │0-1

│как общие переменные │ │

К0606 │ Наличие определений одинаковых │" │0-1

│атрибутов │ │

К0701 │ Комплектность документации в │" │0-1

│соответствии со стандартами │ │

К0702 │ Правильное оформление частей │" │0-1

│документов │ │

К0703 │ Правильное оформление титульных и │" │0-1

│заглавных листов документов │ │

К0704 │ Наличие в документах всех разделов │" │0-1

│в соответствии со стандартами │ │

К0705 │ Полнота содержания разделов в │" │0-1

│соответствии со стандартами │ │

К0706 │ Деление документов на структурные │" │0-1

│элементы: разделы, подразделы, │ │

│пункты, подпункты │ │

К0801 │ Соответствие организации и вычисли-│" │0-1

│тельного процесса эксплуатационной │ │

│документации │ │

К0802 │ Правильность заданий на выполнение │" │0-1

│программы, правильность написания │ │

│управляющих и операторов (отсутствие │ │

│ошибок) │ │

К0803 │ Отсутствие ошибок в описании │" │0-1

│действий пользователя │ │

К0804 │ Отсутствие ошибок в описании │" │0-1

│запуска │ │

К0805 │ Отсутствие ошибок в описании │" │0-1

│генерации │ │

К0806 │ Отсутствие ошибок в описании │" │0-1

│настройки │ │

К1001 │ Наличие требований к тестированию │" │0-1

│программ │ │

К1002 │ Достаточность требований к │" │0-1

│тестированию программ │ │

К1003 │ Отношение числа модулей, │Расчетный │ м

│отработавших в процессе тестирования │ │Q

│ м │ │ т

│и отладки (Q ) к общему числу │ │--

│ м т │ │ м

│модулей (Q ) │ │Q

│ о │ │ о

│ │ │

К1004 │ Отношение числа логических блоков, │То же │ б

│отработавших в процессе тестирования │ │Q

│ б │ │ т

│и отладки (Q ), к общему числу │ │--

│ т б │ │ б

│логических блоков в программе (Q ) │ │Q

│ о │ │ о

3. Оценка качества ПС проводится в определенной последовательности.

3.1. На фазе анализа проводится выбор показателей и их базовых значений.

3.2. Для показателей качества на всех уровнях (факторы, критерии, метрики, оценочные элементы) принимается единая шкала оценки от 0 до 1.

3.3. Показатели качества на каждом вышестоящем уровне (кроме уровня оценочных элементов) определяются показателями качества нижестоящего уровня, т.е.:

- результаты оценки каждого фактора определяются результатами оценки соответствующих ему критериев;

- результаты оценки каждого критерия определяются результатами оценки соответствующих ему метрик;

- результаты оценки каждой метрики определяются результатами оценки определяющих ее оценочных элементов.

Примечание. Коды оценочных элементов составлены из 5 символов следующим образом:

1-й символ - буква русского алфавита - указывает на принадлежность элемента тому или иному фактору ("Н" - надежности, "С" - сопровождаемости, "У" - удобству применения, "Э" - эффективности, "Г" - универсальности, "К" - корректности);

2-й и 3-й символы - номер метрики, которой принадлежит оценочный элемент;

4-й и 5-й символы - порядковый номер данного оценочного элемента в метрике.

Например, "К1004" означает, что это 4-й оценочный элемент из 10-й метрики фактора "корректность".

3.4. В процессе оценки качества ПС на каждом уровне (кроме уровня оценочных элементов) проводятся вычисления показателей качества ПС, т.е. определение количественных значений абсолютных показателей ( , где j - порядковый номер показателя данного уровня для i-го показателя вышестоящего уровня) и относительных показателей ( ), являющихся функцией показателя и базового значения .

3.5. Каждый показатель качества 2-го и 3-го уровней (критерий и метрика) характеризуется двумя числовыми параметрами - количественным значением и весовыми коэффициентами ( ).

3.6. Сумма весовых коэффициентов показателей уровня (l), относящихся к i-му показателю вышестоящего уровня (l - 1), есть величина постоянная. Сумма весовых коэффициентов ( ) принимается равной 1.

, (1)

где j = 1 + n,

n - число показателей уровня (l), относящихся к i-ому показателю вышестоящего уровня (l - 1).

3.7. Общая оценка качества ПС в целом формируется экспертами по набору полученных значений оценок факторов качества.

3.8. Для оценки качества ПС различного назначения методом экспертного опроса составляется таблица значений базовых показателей качества ПС.

3.9. Определение усредненной оценки ( ) оценочного элемента по нескольким его значениям ( ) проводится по формуле

, (2)

где t - число значений ОЭ (оценочного элемента);

k - порядковый номер метрики;

q - порядковый номер ОЭ.

3.10. Итоговая оценка k-й метрики j-го критерия ведется по формуле

, (3)

где Q - число ОЭ в k-й метрике.

3.11. Абсолютные показатели критериев i-го фактора качества определяются по формуле

, (4)

где n - число метрик, относящихся к j-му критерию.

3.12. Относительный показатель j-го критерия i-гo фактора качества вычисляется по формуле

. (5)

3.13. Фактор качества ( ) вычисляется по формуле

, (6)

где N - число критериев качества, относящихся к i-му фактору.

4. Качество ПС определяется путем сравнения полученных расчетных значений показателей с соответствующими базовыми значениями показателей существующего аналога или расчетного ПС, принимаемого за эталонный образец.

4.1. Значения базовых показателей ПС должны соответствовать значениям показателей, отражающих современный уровень качества и прогнозируемый мировой уровень.

4.2. В качестве аналогов выбираются реально существующие ПС того же функционального назначения, что и сравниваемое, с такими же основными параметрами, подобной структуры и применяемые в условиях эксплуатации.