Методическое обеспечение

Общие методы стандартизации, метрологии и сертификации

Методический аппарат стандартизации, метрологии и сертификации представлен общими и специфическими методами. Общие методы реализуют системный подход к объектам и, исходя из принятой концепции, включают программно-целевой и экспертный методы.

Программно-целевой метод представляет методологию решения сложных проблем, требующих участия функциональных подсистем предприятий, научных организаций, органов государственного управления. Он основывается на системном подходе и является средством преодоления ведомственной разобщенности и эффективного объединения усилий на решении узловых задач.

Специфика программно-целевого метода заключается в том, что объектом управления является комплексная целевая программа.

Необходимость и эффективность использования программноцелевого метода объясняется следующим. Первая причина — необходимость комплексного отражения всех аспектов деятельности в четкой увязке с финансовыми, материальными и трудовыми ресурсами. Второй причиной является межотраслевой характер большинства проблем. Далее следует отметить и то, что в связи с ускорением решения социальных и экологических проблем резко возрастает количество региональных проблем.

Решение проблем с использованием программно-целевого метода осуществляется в несколько этапов (рис. 7.1).

Первый этап. Выявление и обоснование комплексной проблемы.

Второй этап. Определяются конкретные цели посредством дезагрегирования проблемы. Цели характеризуют конечные результаты в соответствующей области развития.

Этапы использования программно-целевого метода

Рис. 7.1. Этапы использования программно-целевого метода

Третий этап. Определяется целереализующий комплекс, т.е. устанавливается перечень тех организаций, функционирование которых необходимо для решения избранной проблемы. Это обеспечивает четкую адресность заданий и выделения ресурсов.

Четвертый этап. Разработка системы мероприятий, которые реализуют намеченные цели.

Пятый этап. Осуществляется целевое распределение ресурсов для обеспечения выполнения разработанных мероприятий.

В результате составляется комплексная целевая программа, представляющая собой документ, в котором определен полный состав экономических, технических, социальных, экологических мероприятий для решения проблем, увязанных по ресурсам, исполнителям и срокам осуществления.

Шестой этап. Разрабатывается механизм управления программой.

Полный цикл решения проблемы с помощью методологии программного подхода может быть представлен следующим образом: проблема — цель — целереализующий комплекс — система мероприятий — целевое распределение ресурсов.

Порядок выполнения работ

На первом этапе выявляется и четко формулируется проблема, которую необходимо решить. При этом следует иметь в виду, что под проблемой понимается потенциальная цель, для которой еще не найдены способы ее достижения. Именно поэтому она нуждается в дезагрегировании, т.е. в представлении ее совокупностью целей, составляющих элементы программы.

В этой связи на следующем этапе осуществляется структуризация проблемы. Метод структуризации целей основан на поэтапном расчленении исследуемой проблемы на элементы с последующей возможной числовой оценкой их относительной важности.

Метод структуризации представляет собой логический подход к определению целей и возможных средств их достижения на основе дезагрегирования проблемы (генеральной цели) на цели, подцели и задачи. При этом используется метод построения «дерева целей». «Дерево» представляет собой иерархию целей. При этом цели нижерасположенного уровня представляют собой средства достижения целей высокого уровня. Элементами «дерева целей» являются: цели, подцели, задачи (мероприятия). При этом цель выражает желаемое достижимое состояние объекта в пределах некоторого интервала времени.

Задача представляет собой желаемый результат деятельности, достижимый за намеченный (заданный) интервал времени и характеризующийся набором количественных данных или параметров этого результата.

Таким образом, задача отличается от цели тем, что указан срок ее достижения и конкретизированы количественные характеристики результата ее решения.

Введены понятия генеральной цели (проблемы), главной цели, целей и подцелей, отражающие уровни иерархии сверху вниз. Задачи (мероприятия) представляют последний уровень декомпозиции, являясь основанием для разработки программы.

Известны следующие признаки классификации целей.

В основу построения «дерева целей» положены принципы построения, способы детализации элементов на каждом уровне «дерева», глубина детализации, полный набор элементов для всех уровней, начиная с верхнего, взаимосвязи между элементами «дерева целей» (прямой и смешанный). Известны два принципа построения дерева целей: чисто целевой и последовательного дезагрегирования проблемы по схеме: цели — задачи по достижению целей — пути реализации мероприятий — отдельные задачи — требуемые ресурсы (рис. 7.2).

Декомпозиция целей и ресурсов

Рис. 7.2. Декомпозиция целей и ресурсов

В соответствии с первым принципом дерево целей представлено одними и теми же элементами, по второму принципу — разными. При построении дерева целей по второму принципу цели следуют вперемежку с путями их достижения.

Возможны следующие способы детализации элементов дерева целей:

  • - по признаку адресности (в этом случае та или иная цель, мероприятие или другой элемент конкретизируется по месту исполнения);
  • - по признаку объекта (например, конкретизация цели по отдельным видам продукции);
  • - по этапам воспроизводственного цикла (например, производство — распределение — обмен — потребление).

Порядок построения дерева целей основан на использовании следующих правил.

  • 1. Дерево целей строится сверху вниз по уровням, т.е. от глобальной цели к задаче, а решение задач с помощью этого дерева цели производится снизу вверх.
  • 2. Для разработки глобальной цели анализируются исходный уровень системы, возможные ситуации в будущем, составляется прогноз состояния системы (сценарий будущего) и вырабатывается глобальная цель (генеральные цели) развития системы.
  • 3. Раскрывается содержание глобальной цели и формируется структура комплекса целей в виде упорядоченной иерархии (дерева) частных целей. Это достигается путем последовательного разбиения цели на подцели таким образом, чтобы подцели каждого последующего уровня обеспечивали достижение цели предыдущего уровня. На этой стадии, называемой целевой, решаются вопросы: каковы наши потребности? что нам нужно? При этом число уровней (глубина детализации) зависит в основном от характера решаемой проблемы. Практически же число уровней декомпозиции генеральной цели определяется структурой организации, которая может взять на себя выполнение отдельных подцелей. Признак завершения процесса построения дерева целей — появление таких понятий, которые выражают возможные способы достижения целей, варианты задач (мероприятий).
  • 4. Необходимо обеспечить полноту набора элементов. Это означает, что каждая цель верхнего уровня должна быть представлена в виде подцелей следующего уровня так, чтобы набор этих подцелей полностью определял понятие исходной цели. Этот принцип, используемый при построении дерева целей, называют конъ- юнктивностью или полной реакцией. Для определения полного набора вариантов изучаются: структура самого объекта и условия его функционирования; цели развития системы более высокого уровня; директивные документы (решения, приказы, постановления, в которых формулируются цели и задачи экономической системы); положения, регламентирующие деятельность рассматриваемой организации,
  • 5. Цели, подцели и задачи каждого уровня должны быть сопоставимы по своему масштабу и значению. Для обеспечения этого используется свойство целей — сопоставимость элементов одного уровня. Этим свойством пользуются для выбора наиболее важных элементов, что позволяет устанавливать приоритет целей, ранжировать их.
  • 6. Построение дерева целей должно обеспечить увязку и согласование целей не только в качественном отношении, но и производить оценку их относительной важности и значимости. Это достигается ранжированием целей путем определения коэффициентов их относительной важности на основании использования критериев. Критерии могут быть как одинаковыми на разных уровнях, так и различными. Они подразделяются на две группы. В первую входят так называемые целевые критерии, когда оценка элементов данного уровня производится по их вкладу в достижение целей более высокого уровня, т.е. при использовании таких критериев должен быть получен ответ на вопрос о том, насколько данный элемент важен для достижения цели более высокого уровня. Ко второй группе относятся критерии, характеризующие возможность реализации элементов данного уровня вне связи с их вкладом в достижение целей более высокого уровня. Эта группа критериев подразделяется на две подгруппы: ресурсные критерии и критерии условий реализации отдельных элементов. Ресурсные критерии характеризуют: виды и объем ресурсов, необходимых для реализации оцениваемых элементов; дефицитность отдельных видов ресурсов, объем инвестиций и др. Элементы дерева целей учитываются с помощью критериев, характеризующих сроки реализации элементов и возможность получения необходимых ресурсов к требуемому сроку и др. Вообще же число и конкретное содержание отдельных критериев зависят от специфики проблемы и целей исследования. При этом чем ниже уровень дерева целей, тем конкретнее формулировки критериев, тем больше приобретают ресурсные критерии условий реализации. В случаях неопределенности решения задач оценки по критериям производятся методом экспертных оценок.

Задачей третьего этапа является определение состава целереализующего комплекса. Основой для этого служат набор целей и мероприятий, позволяющих установить их исполнителей. В их состав могут входить как службы и производственные подразделения данного объединения, так и внешние организации. Все составляющие целереализующего комплекса становятся объектами планирования при формировании программы. Закрепление целей и задач (мероприятий) за подразделениями, регулирующими взаимоотношения объединения с внешними организациями, необходимо также для распределения ресурсов и использования для контроля реализации.

Разработкой системы мероприятий, которые реализуют намеченные цели, продиктована необходимость их группировки по различным сферам деятельности, что позволяет четко установить ответственность разных органов управления. Для этих целей все мероприятия подразделяются по группам. Например, возможно выделение следующих групп мероприятий.

Экономические, связанные с совершенствованием организации и экономических результатов деятельности объекта в целом.

Административно-правовые, обусловленные правовым регулированием взаимоотношений данного объединения с другими предприятиями и органами государственного управления, разграничением ответственности и прав служб управления, совершенствованием взаимоотношений с предприятиями и др.

Организационные, связанные с совершенствованием технологии производственных и организационных структур, организацией труда в подразделениях предприятий.

Научно-технические — исследования и разработки, изготовление и освоение опытных образцов, модернизация фондов.

На пятом этапе распределяются ресурсы по мероприятиям (задачам).

Ресурсное обоснование программы имеет целью определение затрат на осуществление каждого из мероприятий программы и затрат на программу в целом (должна быть отражена потребность в капитальных вложениях, материальных ресурсах, в рабочей силе, финансовых ресурсах).

В условиях ограничения ресурсов устанавливается приоритетность выполнения мероприятий по срокам и важности. При этом используются методы математического моделирования, а также метод экспертных оценок.

Результаты выполнения работ на всех этапах являются основой для составления комплексной программы.

Построение программы

Построенное и проанализированное дерево целей само по себе не является программой. Программа — это документ, определяющий законченный во времени и пространстве комплекс мероприятий, направленный на реализацию одной или нескольких целей.

Разработка комплексной программы на основе дерева целей является самостоятельным этапом работы и сводится к преобразованию дерева целей в программу. Для этого производится перестройка целевой системы в систему динамическую, действующую. При этом цели преобразуются в функции системы, а средства достижения этих целей в схемы, с помощью которых реализуются функции системы, выражены в матричном виде. В некоторых системах программы представляются в виде функционально-целевых матриц. В наименования строк таких матриц включают цели соответствующих уровней дерева целей, переформулированные в функции; в колонках матриц записываются взаимодополняющие или конкурирующие проекты, расписанные по отдельным мероприятиям, которые в совокупности образуют комплексные программы развития. В ряде случаев используется дополнительная колонка матрицы, где записываются критерии эффективности достижения целей данного уровня (по соответствующей строке матрицы), служащие для отбора конкурирующих мероприятий. В дополнительных колонках могут быть записаны также бюджетные ограничения по различным видам ресурсов и другие сведения, необходимые для выработки решений.

По каждому мероприятию программы указываются ответственные исполнители, сроки выполнения мероприятий, объем ресурсов и сроки их представления.

Разработка программы завершается выпуском программной документации.

Механизм управления программой включает организационное обеспечение реализации программы и экономические рычаги и стимулы. Он должен быть направлен на преодоление ведомственных и местнических тенденций по эффективному использованию ресурсов, устранению потерь и повышению качества продукции, расширению рынка сбыта продукции.

Реализация программ объединений иногда требует создания новых форм целереализующего комплекса: межотраслевых объединений, ассоциаций, концернов и др.

Для решения социальных программ целесообразно создание территориальных объединений.

Организация управления выполнением программы осуществляется путем использования программно-целевых структур координационного типа и матричных структур.

В зависимости от масштаба и характера программ могут создаваться или выделяться из существующих органов целевого управления временные комиссии, бюро или другие подразделения.

Особое значение в управлении комплексной программой имеет разработка экономического и правового механизма управления. Важно обосновать порядок предъявления претензий, определить размеры санкций, что, в свою очередь, требует разработки методики определения ущерба, нанесенного теми участниками, которые не выполняют мероприятий в установленный срок и должного качества, не обеспечивают выполнения взятых на себя обязательств.

При решении прогностических, аналитических и проектных задач в области организации управления нередко возникают вопросы, ответы на которые не могут быть найдены ни статистическими, ни математическими методами. Это связано с неформали- зуемостью и отсутствием определенности в представлениях о некоторых характеристиках и аспектах функционирования организационно-экономических объектов.

В таких случаях используются методы экспертных оценок. Экспертные оценки представляют собой точки зрения (мнения, суждения) высококвалифицированных специалистов в определенных предметных областях (экспертов), сформулированные в виде оценок объекта в содержательной, качественной или количественной форме. Экспертные оценки формируются в процессе проведения экспертизы — исследования определенного объекта индивидуумом или группой компетентных специалистов с целью формирования информации об интересующих характеристиках, свойствах объекта, используемой при принятии решений. Сущность метода экспертных оценок состоит в надлежащей организации специалистами — организаторами экспертиз проведения конкретной экспертизы с целью получения информации о суждениях экспертов по рассматриваемым объектам и ее последующей обработки для генерации обобщенных данных и новой информации. Экспертные методы широко используются при синтезе процессов управления сложными системами, в менеджменте, при разработке и принятии решений, для получения различного рода оценок.

Известны различные формы организации проведения экспертиз: индивидуальные и коллективные, одноуровневые и многоуровневые, с обменом информацией между экспертами и без него, анонимные, открытые и т. д. При всем многообразии типовых схем проведения экспертиз практика часто ставит задачи, решение которых требует применения нетрадиционных, оригинальных подходов специалистами-организаторами по проведению экспертиз.

Первой особенностью метода является научно обоснованная организация экспертизы. Вторая особенность заключается в применении количественных методов как при организации экспертизы (формирование группы экспертов), так и при оценке суждений экспертов и формальной обработке результатов.

Экспертный метод может использоваться при определении прогнозов развития объекта; определении целей и задач; при альтернативном распределении ресурсов; для оценки предпочтительности альтернативных вариантов управленческих решений в условиях неопределенности.

Формирование группы экспертов

Количественный и качественный состав экспертной комиссии должен формироваться с учетом широты проблемы, достоверности оценок, затрат ресурсов и характеристик экспертов. Широта решаемой проблемы, определяемая количеством различных аспектов, связана с установлением нижней границы количественного состава экспертной комиссии, т.е. количество экспертов должно быть таковым, чтобы каждый аспект, направление исследования были закреплены за конкретным специалистом. Достоверность оценок зависит от уровня знаний экспертов и их количества. При соответствующем уровне знаний увеличение количества членов экспертной комиссии должно приводить к возрастанию достоверности результатов экспертизы.

Подбор группы экспертов имеет большое значение для эффективной экспертизы. При этом очень важно выделить свойства, по которым следует оценивать экспертов. К ним могут быть отнесены: компетентность, креативность отношения к экспертизе, конформизм, конструктивность мышления, коллективизм, самокритичность.

Компетентность — это обладание определенными знаниями, позволяющее индивидуму высказывать суждения по определенному кругу вопросов. Степень компетентности может характеризоваться коэффициентом компетентности. Известны различные методы определения значений коэффициентов компетентности. Их подразделяют на априорные, апостериорные и тестовые.

В априорных методах оценки качества эксперта не используется информация о его суждениях, имевших место в предшествовавших экспертизах. К этой группе методов относятся:

  • • метод самооценки с использованием балльной шкалы (трехбалльной, пятибалльной и т. д,);
  • • метод самооценки с использованием вербально-числовых шкал, в которых наряду с содержательно описываемыми наименованиями их градаций содержатся соответствующие им численные значения или их диапазоны;
  • • дифференциальный метод самооценки, в котором рассчитывается комплексная самооценка как полусумма самооценки степени знакомства эксперта с основными источниками информации в рассматриваемой области и взвешенной с учетом коэффициента сравнительной весомости самооценки знакомства эксперта с изучаемым объектом;
  • • методы взаимной оценки экспертов, основанные на получении различными способами взаимооценок экспертов (формирование списков компетентных специалистов, формирование матриц взаимооценок экспертов в баллах и т. д.) и их последующей обработки с целью получения оценок компетентности каждого эксперта, входящего в состав экспертной комиссии.

Апостериорные методы оценки качества эксперта базируются на использовании информации о его суждениях, имевших место в экспертизах, проведенных с его участием. К таким методам относятся:

  • • метод оценки качества эксперта на основе его ответов, опирающийся на анализ результатов парных сравнений, выполняемый с целью выявления нелогичностей (противоречий) и вычисления коэффициента компетентности с учетом количества выявленных нелогичностей в суждениях эксперта;
  • • метод расчета коэффициента отклонения суждений эксперта, основанный на сравнении расстояния от индивидуальной оценки эксперта до результирующей с максимально возможным расстоянием.

Тестовые методы оценки качества эксперта нацелены на распознавание профессиональной пригодности испытуемого, а также выявление наличия необходимых навыков и опыта для эффективного участия в работе экспертной комиссии. Для успешного проведения тестового эксперимента необходимо выполнение следующих условий:

  • • целенаправленность содержания теста на конкретные объекты экспертизы;
  • • наличие шкалы, позволяющей оценить степень точности оценок эксперта;
  • • максимальная приближенность тестовых оценок эксперта к их истинным значениям;
  • • возможность установления допустимых пределов отклонений оценок эксперта от их истинных значений;
  • • минимальная вероятность случайного угадывания экспертом истинной оценки.

Если оценка компетентности экспертов может носить количественный характер, то такие характеристики, как креативность (способность решения творческих задач), конформизм (подверженность влиянию суждений авторитетов), отношение к экспертизе, конструктивность мышления, коллективизм, самокритичность, имеют, как правило, качественный характер.

Поскольку при подборе экспертов используется определенное множество характеристик, имеющих различные значения и различную значимость, то возникает необходимость формирования интегральной оценки эксперта, т.е. решения многокритериальной задачи с известной ее проблематикой. В качестве такой интегральной оценки, получаемой альтернативным путем, возможно применение значения достоверности суждений эксперта, определяемого как отношение числа случаев выданных экспертом рекомендаций, приемлемость которых подтверждена практикой, к общему числу случаев участия эксперта в комиссии.

Обобщенная характеристика эксперта проявляется в достоверности его суждений. Применение обобщенной оценки требует использования информации о прошлом опыте участия эксперта в решении проблемы. На основании этой информации устанавливается удельный вес правильных решений в общем количестве случаев участия данного эксперта в экспертизе.

Используются и другие способы формирования экспертных групп: способ тестирования, документационный, назначения.

Способ тестирования состоит в том, что тестируется некоторое количество экспертов, а по результатам испытания производится их отбор.

Документационный способ заключается в отборе экспертов по их объективным характеристикам, таким как: стаж работы, должность, ученая степень, количество публикаций и т.д. К сожалению, при использовании этого способа из числа возможных экспертов выпадают лица, находящиеся вне поля зрения организаторов экспертизы. Способ выдвижения экспертов коллективами научных подразделений (подобно выборам) повышает ответственность экспертов за результаты экспертизы. Однако он требует достаточно большого времени, а круг экспертов ограничен,

Способ назначения состоит в определении руководителем организации, проводящей экспертизу, группы экспертов из числа подчиненных сотрудников. Главным недостатком способа является то, что мнение сотрудников может оказаться согласованным, но ошибочным, узким и т.п., выражающим официальную позицию организации в данном вопросе («эффект школы»). Результаты экспертизы в этом случае представляют интерес в основном лишь для внутреннего пользования.

Способы опроса экспертов

Важнейшей проблемой организации экспертизы является выбор способа опроса экспертов. Различают индивидуальный, групповой и дельфийский способы.

При индивидуальном способе от каждого эксперта получают посредством анкетирования или интервьюирования оценки, независимые от мнения других экспертов. Затем полученные индивидуальные оценки обобщаются и определяется общая, результирующая. Указанный способ рационально использовать при необходимости выработки точечного прогноза состояния объекта, при ранжировании совокупности объектов и в других случаях, когда важнейшими качествами эксперта являются его компетентность, конструктивность мышления, а креативность отступает на второй план.

Групповой способ предусматривает получение суммарной оценки или общего решения, единой формулировки сразу от всех экспертов путем совместного обсуждения проблемы. Его использование целесообразно при поиске нетрадиционных решений, при оценке характеристик малоизученных объектов, т. е. при необходимости существенного элемента творчества, новизны. При этом учитывается, что в ходе правильно организованного обсуждения происходит взаимная стимуляция творческого мышления.

Групповой опрос может осуществляться посредством проведения дискуссий, совещаний, конференций, «мозгового штурма». Первые из перечисленных видов опроса традиционны и широко используются в практике. «Мозговой штурм» имеет ряд существенных отличий, что делает его, по мнению многих исследователей, наиболее эффективным. Однако высокая эффективность достигается только при правильной и четкой организации процедуры обслуживания (рис. 7.3.).

Схема процесса «мозговой атаки»

Рис. 7.3. Схема процесса «мозговой атаки»

«Мозговой штурм» представляет особый метод получения новых идей, решений какой-либо проблемы в результате коллективного творчества группы людей в ходе сеанса, проводимого по определенным правилам. Сущность метода в разделении решения двух задач: генерирования новых идей; анализа и оценки предложенных идей.

Создаются две группы: группа генераторов идей и группа аналитиков. Группа генераторов идей состоит из 4—15 человек, но может быть и больше. Члены ее не обязательно должны быть специалистами по обсуждаемой проблеме, но должны понимать поставленную задачу. Для исключения предвзятости и профессиональной узости круг специалистов должен быть как можно шире.

Основные правила проведения заседания: любые критические замечания или оценки высказанной мысли, идеи недопустимы; важно качество и разнообразие предложенных идей; необходимо «свободное парение» мысли: чем необычнее идея, тем лучше; мысли, идеи должны подхватываться, развиваться, комбинироваться генератором идей, т.е. участники заседания должны «раскачивать» друг друга, результатом чего должна быть лавина идей. Отобранных членов заседания за несколько дней письменно или устно извещают о дате, времени, месте его проведения и вручают краткую памятную записку, содержащую: обращение к участнику и приглашение его на заседание, формулировку проблемы, подпроблемы и цели заседания; правила проведения «мозгового штурма»; предложение подготовить несколько идей.

Результаты заседания, включая и патентоспособные идеи, являются плодами коллективного труда и не персонифицируются.

Дельфийский метод и его модификации синтезируют ряд положительных черт индивидуальных с групповыми. Он заключается в том, что эксперты высказывают свое мнение анонимно, независимо друг от друга. Они знакомятся с мнением тех экспертов, оценки которых расходятся с обобщенными.

Важнейшей составляющей метода являются тщательно разработанные программы анкетирования в несколько туров и регулирование вопросов на каждом последующем туре. По окончании каждого тура группа организаторов экспертизы анализирует полученные ответы, обобщает их и готовит по результатам тура справку-бюллетень, с текстом которой знакомятся все эксперты. При этом информация в справке анонимна. При повторном опросе эксперты получают вопросы, уточняющие первоначальные ответы и сформулированные с учетом итогов тура.

В третьем туре экспертам сообщают, по каким пунктам имеется единое мнение, инакомыслящих просят дополнительно обосновать свои мнения и уточнить ответы. Четвертый (а в случае необходимости и последующие) тур повторяет процедуру третьего, таким образом, область расхождения мнений сужается и вырабатывается общее решение. Как правило, опрос по дельфийскому методу ограничивается четырьмя турами.

Достоинствами метода является то, что он уменьшает или полностью устраняет такие психологические факторы, как показная убежденность, нежелание отказаться от публично высказанного мнения, влияние авторитетов, напористость некоторых членов группы.

Способы обработки результатов опроса

Для обеспечения возможности формальной обработки результатов экспертизы необходима численная система с отношениями, описывающая свойства объектов и отношений между ними с помощью чисел. Этой цели служат шкалы. Наиболее употребительными в практике измерений являются следующие типы шкал: наименований (классификации), порядковая, интервалов, отношений, разностей, абсолютная.

Шкала наименований, или классификации, используется для описания принадлежности объекта к определенным классам. Всем объектам одного и того же класса присваивается одно и то же число, а элементам разных классов — разные числа. Примером использования шкалы классификации может служить присвоение рабочим квалификационных разрядов.

Шкала порядка применяется для измерения упорядочения объектов по одному или совокупности признаков. Примером шкалы порядка является шкала рангов. Числа в шкале порядка показывают только порядок следования и не дают возможности определить степень предпочтения.

Шкала интервалов применяется для отображения величины различия между свойствами объектов (например, шкала сложности управленческих работ). Основной признак — равенство интервалов.

Шкала отношения используется, например, для измерения трудоемкости работ, весомости объектов. В этой шкале числа отражают отношения свойств объектов, т. е. во сколько раз свойство одного объекта превосходит это же свойство другого.

Шкала разностей используется при необходимости выражения: насколько один объект превосходит другой по одному или нескольким признакам.

Абсолютная шкала применяется, например, для измерения количества объектов. Количество объектов измеряется единственным образом с помощью натуральных чисел. Выбор шкалы определяется задачами экспертизы, особенностями объекта, возможностями группы.

При обработке результатов экспертизы очень большое значение имеет выбор метода измерения, наиболее употребительные из которых: ранжирование, парное сравнение, непосредственная оценка, последовательное сравнение.

Ранжирование представляет собой процедуру упорядочения объектов, выполняемую экспертом. В практике экспертного ранжирования чаще всего применяется числовое представление последовательности в виде натуральных чисел, которые называются рангами. Ранжирование производится в шкале порядков. Процедура ранжирования достаточно проста, но с ее использованием невозможно упорядочение большого числа объектов.

Парное сравнение состоит в установлении предпочтения объектов при сравнении всех возможных пар.

Как метод ранжирования, так и попарное сравнение могут использоваться для определения последовательности решения организационно-экономических задач, оценки важности тех или иных аспектов деятельности объекта и т.п. Результаты применения указанных методов, как правило, дают лишь вспомогательную информацию для решения сложных комплексных проблем.

Непосредственная оценка представляет собой процедуру приписывания объектам числовых значений в шкале интервалов.

Выше отмечалось, что в ряде случаев в результате экспертного опроса требуется получить не количественную оценку объекта, его характеристику, а сформулировать цель, задачу и т.п. Для получения сопоставимых формулировок следует провести подготовительную работу.

Прежде всего необходимо определить или разработать специальный набор терминов (тезаурус), использование которого ограничит широту высказываний и сблизит стилистические позиции экспертов.

Следует также регламентировать процедуру формулирования и структуру формулировки. Такой регламент должен обеспечивать:

  • - достаточное разнообразие формулировок;
  • - единство структуры формулировки.

Полученные формулировки должны достаточно полно отражать важнейшее их содержание, т. е. обладать значительной емкостью; формулирование следует осуществлять таким образом, чтобы исключалось разночтение.

Оценка согласованности мнений

Обработка экспертных оценок при групповой экспертизе зависит от характера информации, выражающей предпочтения экспертов и содержательное обоснование своих предпочтений, целей, назначения и других факторов проводимой экспертизы, и заключается в:

  • • определении обобщенной оценки исследуемых объектов или рассматриваемого объекта по ряду свойств показателей и относительной их значимости;
  • • оценке согласованности и зависимости мнений экспертов;
  • • оценке достоверности полученных расчетных величин.

Определение обобщенной оценки исследуемых объектов осуществляется при групповой экспертной оценке на основе применения методов усреднения индивидуальных оценок экспертов с учетом предположения о том, что они являются достаточно точными «измерителями» и их оценки образуют одну или несколько компактных групп. Если результаты применяемых методов субъективных измерений представляют собой числа, или баллы, то по строение групповой оценки заключается в определении среднего значения (математического ожидания) или медианы (наиболее вероятной оценки). В другом случае, если результаты представляют собой ранги, то задачей обработки является построение обобщенной ранжировки объектов на основании наилучшего способа согласования индивидуальных ранжировок экспертов.

Упорядочив полученные результаты обобщенных оценок объектов по убыванию их значимости, можно судить об их относительной важности.

Количественная оценка согласованности мнений экспертов необходима в том случае, если мнения экспертов расходятся по рассматриваемым объектам для более обоснованной интерпретации их расхождения.

Для оценки согласованности мнений экспертов в настоящее время известны две меры: дисперсионный и энтропийный коэффициенты конкордации. Коэффициент конкордации изменяется в пределах от 0 до 1. Увеличение значения коэффициента соответствует увеличению степени согласованности мнений экспертов.

 
Посмотреть оригинал
< Пред   СОДЕРЖАНИЕ   ОРИГИНАЛ     След >