По количеству характеризуемых свойств различают единичные и комплексные показатели. Единичные показатели качества ха­рактеризуют одно из свойств ПС, комплексный—несколько. Комплексные показатели могут быть групповыми, обобщенными или интегральными.

В зависимости от места применения в процедуре оценки уров­ня качества ПС различают базовые и относительные показатели. Базовым значением показателя качества продукции называют значение показателя, принятое за основу при сравнительной оценке качества продукции. Относительное значение показателя качества продукции представляет собой отношение фактического значения показателя качества оцениваемой продукции к базовому значению этого показателя.

По стадии определения значений показателей качества раз­личают прогнозируемые, проектные, производственные и эксплуа­тационные показатели. Прогнозируемыми показателями опери­руют на стадиях выполнения научно-исследовательских работ и составления ТЗ на разработку ПС, т. е. на тех стадиях, когда нет еще ни детального проекта ПС, ни, тем более, самого ПС. Значения прогнозируемых показателей в основном определяют на основе интуиции и опыта аналогичных разработок, поэтому эти показатели носят субъективный характер.

Значения проектных показателей определяют на основе ана­лиза проектов ПС (эскизного, технического, рабочего), а также путем испытания опытного образца ПС. Эти показатели носят более объективный характер. Степень их достоверности зависит от эффективности используемых инструментальных средств ана­лиза и испытания.

Производственные показатели мало отличаются от проектных, особенно если изготовление ПС сводится к простому копирова­нию. Если же копированию предшествуют операции сборки или генерации ПС, то производственные показатели качества таких ПС могут существенно отличаться от проектных.

Значения эксплуатационных показателей определяют по ре­зультатам промышленной эксплуатации ПС. При соблюдении определенных правил сбора и обработки данных о качестве ПС в процессе эксплуатации эксплуатационные показатели дают наиболее объективную и достоверную оценку. Только по этим показателям можно произвести действительную оценку научно-технического уровня и качества ПС.

3. ВЫБОР НОМЕНКЛАТУРЫ ПОКАЗАТЕЛЕЙ КАЧЕСТВА

Выбор номенклатуры показателей качества программной про­дукции заключается в установлении перечня наименований ха­рактеристик свойств продукции, определяющих качество данного вида продукции и обеспечивающих возможность полной и досто­верной оценки ее уровня качества. Порядок выбора номенклату­ры показателей качества программной продукции должен уста­навливаться с учетом специфики этой продукции. Выбор номенклатуры показателей качества кон­кретного ПС зависит от вида (группы) ПС, цели применения и стадии определения показателей.

Для каждого вида (группы), а иногда и конкретного ПС уста­навливают свою номенклатуру показателей качества, учитываю­щую специфику назначения п условий применения. Номенклатура показателей качества для каждого под­класса, группы и вида ПС оформляется в виде таблиц применяе­мости показателей качества. Помимо перечня рекомендуемых и обязательных показателей качества для данного подкласса (вида, группы) ПС, в таблицах применяемости следует указы­вать и коэффициенты (параметры) весомости (значимости) каж­дого из показателей. Определение коэффициентов весомости показателей качества — наиболее существенная и трудная задача выбора номенклатуры показателей качества. В принципе при ре­шении этой задачи можно использовать либо метод стоимостно-регрессионных зависимостей, либо метод предельных номиналь­ных значений. Но их использование затруднено из-за отсутствия необходимых исходных данных. Поэтому на практике наиболее распространен экспертный метод определения коэффициентов весомости.

Таблицы применяемости являются руководящим или справоч­ным материалом для выбора рабочей номенклатуры показателей качества конкретного ПС. Рабочая номенклатура ПС устанавли­вается с учетом назначения и условий использования ПС; резуль­татов анализа требований пользователя (заказчика), поставленных задач управления качеством; состава, структуры и специ­фики характеризуемых свойств.

Цели применения номенклатуры показателен качества уста­навливают в соответствии с задачами управления качеством программной продукции. Такими целями, в частности, могут быть следующие: составление технического задания па разработ­ку ПС; составление технических условии на ПС; заполнение кар­ты технического уровня; установление контролируемых показа­телей при проектировании ПС; установление контролируемых показателей при опытной эксплуатации ПС; аттестация ПС по категориям качества.

Стадии определения значении показателей качества соответст­вуют стадиям жизненного цикла ПС.

При выделении свойств и соответствующих показателей каче­ства ПС необходимо руководствоваться следующими основными принципами :

выделение групп свойств должно производиться по четко определенным признакам;

свойства, входящие в одну группу, должны, как правило, вза­имно исключать друг друга и быть независимыми. Если свойст­ва зависят друг от друга, то в методиках определения значении показателей качества должны быть даны четкие указания по исключению многократного (неоднократного) влияния одного и того же свойства на обобщенную оценку качества ПС;

всякая исходная номенклатура показателей должна быть открытой, т. е. должна допускать возможность внесения мне исключения из нее отдельных элементов. Это требование обу­словлено, с одной стороны, недостаточным опытом оценки каче­ства программной продукции, а с другой,—большим разнообра­зием ПС и условий их применения;

для каждого из выделенных свойств должна существовать возможность выражения их в шкалах «лучше — хуже», «боль­ше — меньше»;

в группу следует включать свойства, необходимые и достаточные для определения соответствующего сложного свойства;

формулировка свойств должна быть однозначной;

совокупность свойств, характеризующих качество оценивае­мого ПС, должна быть упорядочена по определенному правилу в виде многоуровневой иерархической структуры — дерева свойств;

дерево свойств должно отражать все основные особенности использования н функционирования ПС;

выбранные показатели качества должны быть скоррелнрованы с соответствующими свойствами ПС. Это значит, что между каждым из выделенных свойств и характеризующими его показа­телями должно быть установлено однозначное соответствие. Установление такого соответствия позволяет вместо дерева свойств использовать дерево показателей качества программной продукции;

показатели качества, характеризующие свойства ПС, должны способствовать обеспечению соответствия качества ПС требова­ниям со стороны их пользователей и учитывать современные достижения науки и техники. Для выполнения этого принципа часто необходимо проводить специальные исследования, так как в общем случае между показателями качества могут возникать серьезные противоречия, а улучшение одного показателя может привести к ухудшению другого.