Построение дерева свойств и выявление оцениваемых показателей является важнейшим этапом разработки методики оценивания качества. Этот этап является самым важным, так как при неправильном выполнении или организации данного этапа, результаты оценки качества, полученные с помощью неправильно построенных деревьев окажутся совершенно недостоверными.
При построении деревьев свойств – от экспертов требуется высокая профессиональная компетентность и квалиметрические знания. Поэтому для облегчения этой работы экспертам предлагается определить только перечень показателей качества, которые необходимо учитывать при оценке качества, объединить их в группы и визуально показать взаимосвязи между ними.
Анкетирование экспертов на данном этапе может проводиться двумя основными способами: эксперт самостоятельно заполняет анкету и пересылает ее технической группе. Эксперт заполняет анкету в процессе беседы с сотрудником технической группы или беседа проводится после заполнения анкеты для уточнения оценок, что позволяет получить от каждого эксперта более полную информацию и уменьшить вероятность ошибки, вызванной неправильным пониманием задачи.
Анкеты для опроса экспертов должны удовлетворять следующим требованиям:
- простота текста и однозначность его понимания всеми экспертами;
- краткость изложения: желательно, чтобы объем не превышал двух страниц;
- полнота изложения: все необходимые для заполнения анкеты данные должны содержаться в пояснениях;
- иллюстративность: выполнение основных операций иллюстрируется конкретными примерами;
- однотипность: все анкеты и пояснительные записки строятся по одному плану.
Далее составляется сводный перечень показателей качества и групп, в которые они объединяются. Этот перечень служит основным информационным материалом для построения деревьев свойств. Основной показатель качества располагается на самом высоком нулевом уровне иерархической структуры, а менее комплексные показатели на 1-м уровне.
Каждый из этих показателей рассматривается как состоящий из некоторого числа показателей качества, лежащих на 2-м уровне рассмотрения, и т. д. Создавая иерархическую структуру показателей качества, желательно опуститься до такого низкого Р-го уровня рассмотрения, на котором находятся единичные или комплексные показатели, для которых существуют объективные методы оценки.
При построении деревьев прежде всего необходимо выполнять следующие условия:
- признак, по которому любой комплексный показатель делится на n показателей нижележащего уровня, должен быть единым для всех п показателей, что позволяет экспертам сопоставлять показатели при определении коэффициентов весомости (следующая после построения структурной схемы операция);
- если показатель качества повторяется на двух или более уровнях, то его коэффициент весомости оказывается завышенным. Следовательно, повторение показателей нежелательно;
- число показателей качества, входящих в однородные группы на одном уровне структурной схемы, не должно резко отличаться, так как увеличение числа показателей может привести к снижению значений коэффициентов весомости.