Метод экспертного оценивания

Метод экспертного оценивания - это комплекс логических и математических процедур, направленных на получение от специалистов-экспертов информации, ее анализ и обобщение с целью выбора рациональных решений. Применение метода в данной работе связано с отсутствием объективной и полной информации об особенностях течения расплава в полости литейной формы, действия сложного комплекса регулируемых и нерегулируемых факторов, что, в свою очередь, затрудняет решение задачи по выбору типа литниковой системы с целью устранения наиболее существенных причин появления различных дефектов в отливке.

Для получения необходимой новой информации из имеющейся исходной формируется группа экспертов, которые на основе собственных теоретических знаний и производственного опыта, проводят профессионально-логический анализ вопроса. Суждения обрабатываются математически, в результате чего получаются экспертные оценки.

Основным критерием подбора группы экспертов испольхуется их компетентность. Наиболее распространенным методом оценки компетентности экспертов, является метод самооценки, когда компетентность оценивается коэффициентом К, который определялся на основе суждений экспертов о степени своей информативности по решаемой проблеме (К_и) и степени аргументации своих мнений (К_а) / К = 0,5(К_и + К_а), (1)

Коэффициент информативности получают на основе самооценки эксперта по 10-балльной шкале К_и = 0,1×Х_и, где Х_и - балл, выставленный экспертом. Для определения коэффициента аргументации экспертам предлагается заполнить специальную анкету, в которой приведены источники аргументации и их оценки по соответствующим градациям: В - высокий, С - средний, Н - низкий. Затем отметки эксперта сравниваются с эталонной шкалой, и коэффициент К_а вычисляется суммированием баллов, по позициям, отмеченным экспертами.

Для всестороннего анализа проблемы, а также для избежания оказания давления в группе экспертов применяется письменный опрос с помощью опросного листа - анкеты. Экспертам предлагается проранжировать оцениваемые элементы в порядке убывания их предпочтительности путем присвоения им ранга в виде натурального числа. Если имеется j = 1...,n элементов, то ранг находится в пределах [1,n].

Результаты опроса экспертов представлены в виде матрицы рангов. Ее общий вид приведен в таблице Матрица рангов

В клетках матрицы рангов находятся цифры r _mn, равные рангу n-го элемента по мнению m-го эксперта. Сумма рангов определяется сложением рангов всех экспертов по n-му элементу.

Поскольку процедура опроса и ранжирования элементов экспертами является субъективной, возможны различия во мнениях и определенные трудности при формировании группового мнения. Во избежание этого согласованность экспертов была проверена с помощью статистического коэффициента конкордации Кендалла К, расчет которого проводили по формуле:

В случае полного совпадения мнений экспертов коэффициент конкордации равен единице. В случае полной несогласованности мнений экспертов К = 0. В остальных случаях значения коэффициента конкордации лежат в пределах от 0 до 1.

Для статистической проверки значимости полученных коэффициентов конкордации использовали таблицы распределения c² (критерий Пирсона). Зависимость между c² и К описывается выражением c²= m (n-1) K, то есть величина m(n-1)K подчиняется c² - распределению с числом степеней свободы f = (n-1) и заданным уровнем значимости a. Гипотеза о согласованной работе экспертов принимается, если c² > c²_табл. Таблица c² приведена в /200/. Согласованность экспертов удовлетворительная, если К = 0,5,a=0,01 и хорошая, если К ³ 0,7 и a< 0,001.