Все госты и снипы онлайн

Более 10000 документов в открытом доступе, абсолютно бесплатно

ГОСТ 23554.0-79 - Система управления качеством продукции. Экспертные методы оценки качества промышленной продукции. Основные положения

Этот документ был распознан автоматически. В блоке справа Вы можете найти скан-копию. Мы работаем над ручным распознаванием документов, однако это титанический труд и на него уходит очень много времени. Если Вы хотите помочь нам и ускорить обработку документов, Вы всегда можете сделать это, пожертвовав нам небольшую сумму денег.

Файлы для печати:

Г О С У Д А Р С Т В Е Н Н Ы ЙС Т А Н Д А Р ТС О Ю З АС С РСИСТЕМА УПРАВЛЕНИЯ КАЧЕСТВОМ ПРОДУКЦИИЭКСПЕРТНЫЕ МЕТОДЫ ОЦЕНКИКАЧЕСТВА ПРОМЫШЛЕННОЙПРОДУКЦИИОСНОВНЫЕ ПОЛОЖЕНИЯ ГОСТ 23554.0—79Издание официальное оп. к 0 1 а н е Ц ГО СУД А РСТ ВЕН Н Ы Й КОМИТЕТ С С С Р П О С Т А Н Д А Р Т А ММ о с к в асертификация в строительстве
УД К 658.562.014 : 006.354 Группа Т51 Г О С У Д А Р С Т В Е Н Н Ы Й С Т А Н Д А Р Т С О Ю З А С С Р Система управления качеством продукции ЭКСПЕРТНЫЕ М ЕТ О Д Ы О Ц ЕН К И КАЧЕСТВА П Р О М Ы Ш Л Е Н Н О Й П РО Д У К Ц И Игост Основные положения23554.0— 79* Product-quality index system. Expert methods of industrial product-quality assessment. Basic provisions Постановлением Государственного комитета С С С Р по стандартам от 30 марта 1979 г. № 1210 срок введения установлен с 01.01.80Настоящий стандарт распространяется на экспертные методыоценки качества продукции производственно-технического назна­чения и товаров народного потребления массового, серийногоииндивидуального производства всех отраслей промышленности настадиях разработки,изготовления,обращения и эксплуатации(потребления).Стандартустанавливаетосновныеположения экспертныхметодов, применяемых для оценкикачества промышленной про­дукции: областьприменения экспертныхметодов,структуруэкспертных комиссий,принципыопросаэкспертов и проведе­ния экспертной оценки качества продукции, требования к экспер­там, процедурам анкетирования, оценочным шкалам и составле­нию базовых рядов образцов в управлении качеством продукциив соответствии с основнымипринципамиЕдиной системы госу­дарственного управления качеством продукции.На основе настоящего стандарта должны разрабатываться от­раслевые стандарты либо методические указания и методики поприменению экспертных методов оценки качества продукции с уче­том специфики этой продукции.Отраслевые документы, содержащие основные положения поэкспертной оценке качества продукции, закрепленной за головны­ми министерствами, должны быть согласованы с Госстандартом.Термины и определения по экспертной оценке качества продук­ции приведены в рекомендуемом приложении 1. Под основнымитерминами приведены их краткие формы.(Измененная редакция, Изм. № 1)1 Издание официальное Перепечатка воспрещена * Переиздание (январь 1986 г.) с Изменением № 1,утвержденным в марте 1982 г.; Пост1349 от 31.03.82 (МУС 782).© Издательство стандартов, 1986
Стр. 2 ГОСТ 23554.0— 79 1. О БЩ И Е П О Л О Ж ЕН И Я1.1. Экспертные методы оценки качества продукции применя­ют при невозможности или нецелесообразностипоконкретнымусловиям оценки (недостаточное количество информации, необхо­димостьразработки специальных техническихсредств,оценкаэстетических показателей и т. д.)использовать расчетныеилиизмерительные методы.1.2. Экспертные методы совместно с другими методами или са­мостоятельно применяют при оценке нормативно-технической д о ­кументации на продукцию и качествапродукции, атакже привыборе наилучшихрешений, реализуемых в управлении качест­вом продукции, для:классификации оцениваемой продукции и потребителей; определенияноменклатуры показателей качества продукции(далее показателей);определения коэффициентов весомости показателей; выбора базовых образцов и определения значений базовых по­казателей;измерения и оценки показателей с помощьюоргановчувств(органолептически);оценки единичных показателей, значения которых определенырасчетным или измерительным методом;определения комплексных показателей (групповых и обобщ ен­ных) ;установления критериев для определения категорий качествапри аттестации продукции;отнесения продукции к определенной категории качества.1.3. Перечень и последовательностьосновныхопераций экс­пертной оценки качества продукции представлены в справочномприложении 2.1.4. При разработке отраслевых организационно-методическихдокументов по экспертным методам оценки качествапродукциимогут использоваться не указанные в настоящем стандарте опе­ рации, методы, модификации, способы и процедуры опроса и оцен­ ки качества, если они отвечают конкретным условиям оценки и непротиворечат требованиям настоящегостандарта.Их необходи­мость должна быть обоснована, а эффективность проверена. 2. ЭКСПЕРТНАЯ К О М И С С И Я2.1.Для оценки качества продукции с помощьюэкспертныхметодов создают экспертные комиссии (аттестационные комиссии,технические и художественные советы, дегустационные комиссиии др.) -
ГОСТ 23554.0— 79 Стр. 32.2. Экспертные комиссии создаются в порядке, устанавливае­мом приказом или распоряжениемруководителяминистерства,ведомства, предприятия, объединения, организации, учреждения.2.3. Экспертная комиссия состоит из двух групп: рабочей и экс­пертной. В экспертную группу может входить несколько подгрупп,специализирующихся на решении отдельных вопросов (разработкаклассификации продукции, оценка отдельных групп показателейи т. д.).Основные требования,предъявляемые к членамэкспертнойгруппы (экспертам), приведены в обязательном приложении 3.2.4. Рабочаягруппаосуществляет подготовку и проведениеэкспертной оценки качества продукции и анализ ее результатов.В состав рабочей группы входят организатор, консультант по оце­ниваемой продукции, технические работники.Организатор и консультант могутбыть членами экспертнойгруппы или не входить в нее.Функции организатора и технического работника допускаетсявыполнять одному лицу.Функции членов рабочей группы приведены в справочном при­ложении 4.2.5. Экспертная группа выполняет оценочные операции, приве­денные в справочном приложении 2.Эксперты (кроме организатора и консультанта) должны бытьосвобождены от всех операций не оценочного характера.2.6. При необходимости представления дополнительной инфор­мации к работе экспертной комиссии привлекаются специалисты,участвующие в рассмотрении отдельных вопросов оценки качествапродукции и не являющиеся членами экспертной комиссии.2.7. Экспертную комиссию рекомендуется формировать как по­стоянно функционирующую с достаточнопостояннымсоставомэкспертов и членов рабочей группы.Следует проводить регуляр­ное обучение членов экспертной комиссии для обеспечения высо­кого качества их работы. 3. О П Р О С ЭКСПЕРТОВ3.1. Для получения суждений экспертов используются методыопроса. Опрос экспертов заключается в получении от них коли­чественных или качественных характеристик свойств продукции,а также другой информации, необходимой для оценки качествапродукции.3.2. Методы опроса экспертов делятся на индивидуальныйигрупповой. При индивидуальном методе ведется опроскаждогоэксперта отдельно. Пригрупповом — совместно опрашиваетсячасть экспертной группы или вся группа.
Стр. 4 ГОСТ 23554.0— 793.3. Индивидуальный опрос проводят очным или заочным спо­собом. При очном опросе эксперт высказывает свои суждения ли­цу, проводящему опрос. При заочном опросе такой контакт отсут­ствует и эксперт заполняет карту опроса.3.4. Групповой метод опроса разделяют на способы опросасвзаимодействием и без взаимодействия. Опрос с взаимодействиемвключает обсуждение мнений экспертов на заседании экспертнойгруппы. При опросе без взаимодействия обсуждение отсутствует.3.5. Процедуры опроса экспертов включают интервьюирование,анкетирование и смешанное анкетирование.При интервьюировании суждение эксперта выявляют в процес­се свободной беседы в рамках определенного плана.При анкетировании эксперт заполняет карту опроса, отвечаяна содержащиеся в ней вопросы.При смешанном анкетировании эксперт заполняет карту опро­са, получая все необходимые разъяснения от лица, проводящегоопрос.4. ПРОВЕДЕНИЕ ЭКСПЕРТНОЙ ОЦЕНКИ КАЧЕСТВА ПРОДУКЦИИ4.1. При проведении экспертной оценки качества продукции по­казатели представляют в виде иерархической структуры.Пример такой структурыприведен в справочном приложе­нии 5.Обобщенный показательотносят к самомувысокому0-мууровню, а групповые комплексные показатели — к ниже распо­ложенным уровням. На нижнем уровне структурной схемы на­ходятся единичные показатели, а также комплексные показатели,определяемые расчетными или экспериментальными методами.4.2. Число уровней иерархии определяется сложностью продук­ции, количеством показателей, целью и требуемой точностью оце­нок.4.3. Каждый показатель на каждом уровне структурной схемыможетотноситься к несколькимпоказателям вышележащегоуровня.При построении структурной схемы разделение каждого комп­лексного показателя должно быть последовательным, без пропускауровней рассмотрения (приложение 5, чертеж).После построе­ния структурной схемы часть показателейили уровней можетбыть исключена в соответствии с требованиямирешаемой за ­дачи.Основным документом для разработки структурной схемы по­казателей является Р Д 50—64— 84.4.4. При определении коэффициентов весомостипоказателейэксперты сравнивают между собой значимость показателей, вхо-
ГОСТ 23554.0— 79 Стр. 5дящих в комплексный показатель, используя процедуры, изложен­ные в п. 4.9.4.5. Оценка показателей заключается в сопоставлении значе­ний показателей оцениваемой продукции с базовыми, основанномна нахождении экспертами зависимости оценок от значений пока­зателей. Для определения таких зависимостей можно использо­вать метод «главных точек», приведенный в справочном приложе­нии 6.4.6. Для оценки эстетических показателей при наличии доста­точного количества образцов-аналогов составляется базовый рядреальных (изготовленных) образцов аналогичного класса и наз­ начения, разделенных на несколько групп в порядке уменьшенияэстетического уровня качества входящих в него образцов (напри­ мер, при четырех группах: лучшие, хорошие, удовлетворительныеи плохие).Способы составления базовых рядов образцов продукции из­ложены в справочном приложении 7.4.7. Методы определения комплексных показателей включаютдве основные модификации: метод средневзвешенных величиниэкспресс-метод.При методе средневзвешенных величин комплексныйпоказа­тель определяют усреднением оценок отдельных показателей сучетом их коэффициентов весомости.При экспресс-методе комплексный показатель определяют наоснове анализа экспертами значений отдельных показателей безпредварительной оценки показателей и определения их коэффи­циентов весомости.4.8. При использовании метода средневзвешенных величин воз­можны три формы участия экспертов:эксперты назначают коэффициенты весомости показателей, аоценки единичных показателей и комплексные показатели опреде­ляют расчетным методом;эксперты назначают коэффициенты весомости показателейиоценки единичных показателей, а комплексные показатели опре­деляют расчетным методом;эксперты назначаюткоэффициентывесомостипоказателей,оценки единичных показателей и комплексные показатели.4.9. При выполнении оценочных операций применяют процеду­рыранжирования, оценивания, парного сравнения и последова­тельного сравнения.Ранжирование заключается в упорядочении оцениваемых объ­ектов (показатели, образцы продукции) в соответствии с опреде­ленным признаком. Например, расположение показателей в по­ рядке уменьшения их значимости.Оценивание заключается в назначении оцениваемым объектамколичественных или качественных характеристик в соответствии
Стр, 6 ГОСТ 23554.0— 79с выраженностью определенного признака. Например, назначениекоэффициентов весомости показателей в соответствии со значи­ мостью показателей.Парное сравнение заключается в сравнении каждого объектас каждым из всех остальных в соответствии с определенным приз­наком с целью их ранжирования или оценивания по степени выра­женности этого признака.Последовательноесравнение включает операции ранжирова­ния, назначениеобъекту,стоящему первому в ранжированномряду, заданного числа и количественное оценивание последующихобъектов сравнением их с первым.4.10. Для экспертной оценки качества продукции используют­ся безразмерные шкалы: в долях единицы, процентах, баллах иликачественные оценки. Оценка в долях единицы и процентах можетбыть заменена оценкой в баллах. Например, 40% или 0,4 анало­гичны 4 баллам в 10-балльной шкале.Примеры шкал, применяемых для экспертной оценки качествапродукции, приведены в справочном приложении 8.4.11. Для обобщения суждений экспертов используют способыголосования и усреднения. При голосовании обобщенное мнениеэкспертной группы выявляется большинством голосов. При усред­нении обобщенное мнение определяется расчетным путем.4.12. С целью обобщения суждений экспертов способом усред­нения производят обработку экспертных оценок, которая заклю­чается в определении значений требуемых характеристик свойствпродукции, а также количественных мер для анализа этих харак­теристик и согласованности мнений экспертов.Для получения таких характеристик используют средние вели­чины, например, среднюю арифметическую, медиану или моду.Количественными мерами, характеризующими разброс совокуп­ности оценок отдельных экспертов, являются статистические пока­затели согласованности этих оценок: среднее квадратическое от­клонение, коэффициент вариации, коэффициент конкордации, раз­личные коэффициенты корреляции, размах и другие меры.4.13. Снижение трудоемкости процесса получения экспертныхоценок осуществляется с помощью его автоматизации—замены от­дельных операций экспертной деятельности при оценке качествапродукции формализованными вычислительными процедурамисиспользованием ЭВМ и других технических, математическихипрограммных средств.Формализованные вычислительные процедурызаключаются вмашинной обработке экспертных оценок на основе моделей, алго­ ритмов и программ, полученных путем формализациипроцессаэкспертной оценки качества продукции — словесном, аналитичес­ком или графическомописании операций оценки качества про­дукции.__________
ГОСТ 23554.0— 79 Стр. 7П Р И Л О Ж Е Н И Е 1Рекомендуемое ТЕРМИНЫ И ОП РЕД ЕЛ ЕН И Я П О ЭКСПЕРТН ОЙ О Ц ЕН КЕ КАЧ ЕС Т ВА П РО Д У К Ц И И Термин Определение 1. Экспертная оценка качества про­ Получение характеристик качества дукции продукции экспертным методом Экспертная оценка 2. Экспертный метод оценки качест­ Метод оценки качества продукции, ос­ ва продукции нованный на использовании суждений Экспертный метод экспертов 3. Эксперт по качеству продукции Квалифицированный специалист, отве­ Эксперт чающий требованиям профессиональной и квалиметрической компетентности, за­ интересованности в участии в работе экспертной комиссии, деловитости и объективности 4. Суждение эксперта о качестве Ответ эксперта на поставленный во­ продукции прос о качестве продукции, выраженный Суждение эксперта в количественной или качественной фор­ ме 5. Оценочное суждение эксперта о Суждение эксперта, включающее зна­ качестве продукции чение экспертной оценки качества про­ Оценочное суждение эксперта дукции и его обоснование 6. Значение экспертной оценки ка­ Характеристика качества продукции, чества продукции полученная с использованием эксперт­ Значение экспертной оценки качест­ ных методов оценки качества продукции ва7. Шкала экспертной оценки качест­ Двусторонне ограниченная совокуп­ ва продукции ность ранжированных значений эксперт­ Оценочная шкала ных оценок качества продукции, которым придана смысловая трактовка в соот­ ветствии с характером оцениваемого признака 8. Показатель согласованности зна­ Количественная характеристика бли­ чений экспертных оценок качества зости значений экспертных оценок каче­ продукции ства продукции Показатель согласованности 9. Показатель воспроизводимости Показатель согласованности значе­ значений экспертных оценок качества ний экспертных оценок качества продук­ продукции ции, определяемых экспертом или груп­ Показатель воспроизводимости пой экспертов в нескольких независимых турах Ь0. Формализация экспертной оцен­ Описание операций экспертной оцен­ ки качества продукции ки качества продукции в словесной, ана­ Формализация экспертной оценки литической и (или) графической форме 11. Автоматизация экспертной оцен­ Замена отдельных операций экспертной ки качества продукции оценки качества продукции формализо­ Автоматизация экспертной оценки ванными процедурами без непосредствен­ ного участия в них эксперта
Стр. 8 ГОСТ 23554.0— 79П родолжение Термин Определение 12. Экспертная комиссия по оценке Совокупность специалистов, организо­ качества продукции ванных для экспертнй оценки качества Экспертная комиссия продукции 13. Экспертная группа по оценке Часть экспертной комиссии по оценке качества продукции качества продукции, которая состоит из Экспертная группа экспертов, проводящих оценку качества продукции 14. Рабочая группа по оценке ка­ Часть экспертной комиссии по оценке чества продукции качества продукции, которая состоит из Рабочая группа специалистов, организующих деятель­ ность экспертной группы и обрабатываю­ щих суждения экспертов о качестве про­ дукции 15. Опрос эксперта по качеству про­ Получение от эксперта информации, дукции необходимой для оценки качества про­ Опрос дукции 16. Анкета опроса эксперта по к а ­ Документ, предназначенный для вы­ честву продукции явления суждений эксперта при эксперт­ Анкета опроса ной оценке качества продукции 17. Пояснительная записка анкеты Часть анкеты опроса эксперта по к а­ опроса эксперта по качеству продук­ честву продукции, поясняющая порядок ции проведения экспертной оценки качества Пояснительная записка продукции и определяющая правила за ­ полнения карты опроса 18. Карта опроса эксперта по ка­ Часть, анкеты опроса эксперта по ка­ честву продукции честву продукции, предназначенная дли Карта опроса заполнения экспертом и содержащая на­ бор обращенных к нему вопросов о к а ­ честве продукции 19. Экспресс-метод экспертной, Экспертный метод оценки качества про­ оценки качества продукции дукции, заключающийся в определении Экспресс-метод экспертной оценки значения экспертной оценки обобщенно­ го показателя без предварительного оп­ ределения значений оценок единичных по­ казателей и их коэффициентов весомости 20. Целостная оценка качества про­ Экспертная оценка качества продукции дукции с использванием экспресс-метода экс­ Целостная оценка пертной оценки качества продукции 21. Метод «эксперта и группы» Экспертный метод оценки качества про­ Метод эксперта — группы дукции, основанный на последовательной работе ведущего эксперта и экспертной группы 22. Экспертная кривая оценки к а ­ Графическое выражение зависимости чества продукции значений экспертных оценок от соответст­ Экспертная кривая вующих значений показателя качества продукции 23. Метод «главных точек» Метод построения экспертных кривых оценки качества продукции на основе оп­ ределения зависимости между значения­ ми показателя качества продукции и со-
ГОСТ 23554.0— 79 Стр. 9Продолжение Термин Определение С ответствующих значениями экспертных оценок в главных точках 24. Тур экспертной оценки качест Часть экспертной оценки качества про­ ва продукции дукции, повторяемая с целью повышения Тур оценки точности значений экспертных оценок или определения показателя воспроизводи­ мости 25. Среднее согласованное значение Среднее значение экспертной оценки экспертной оценки качества продукции качества продукции, полученное в резуль­ Среднее согласованное значение тате обработки значений экспертных оце­ нок, удовлетворяющих заданному пока­ зателю согласованности 26. Обобщенное оценочное сужде­ Результат обработки оценочных суж ­ ние экспертов о качестве продукции дений отдельных экспертов, включающий Обобщенное оценочное суждение среднее согласованное значение эксперт* ной оценки и его обоснование П О ЯС Н ЕН И Я К Т ЕРМ И Н А М К термину «Экспертная оценка качества продукции» (п. 1). В результате выполнения операций опроса экспертов получают характерис­ тики, определяющие различные стороны качества продукции и условия ее экс­ плуатации (потребления). Цель экспертной оценки качества— получение таких характеристик качества продукции, которые определяют пригодность оценивае­ мой продукции удовлетворять конкретные потребности в соответствии с ее наз­ начением. Эти характеристики могут быть количественными и выраженными в баллах, процентах и т. д. или качественными, например, «хорошо, плохо». Экспертная оценка качества продукции обычно выполняется в две стадии: индивидуальная, проводимая одним экспертом, и коллективная, проводимая группой экспертов. К термину «Экспертный метод оценки качества продукции» (п. 2). Экспертные методы, как правило, применяются при решении задач с боль­ шим количеством исходных данных и связей, которые сложно алгоритмизиро­ вать, и задач с неполной и противоречивой информацией, которые не поддаются алгоритмизации. Многие операции оценки качества относятся к задачам этих классов: определение цели оценки, разработка классификаций продукции и пот­ ребителей, выбор номенклатуры показателей качества, определение коэффициен­ тов весомости, определение базовых значений показателей и т. д. Существуют различные экспертные методы оценки качества. Классифика­ ционными признаками, позволяющими группировать эти методы, являются: учет качества экспертов при формировании экспертной группы, способы опроса экс­ пертов, способы обмена информации, типы шкал, применяемых для оценки, и т. д. К термину «Эксперт по качеству продукции» (п. 3). К эксперту предъявляются требования, характеризующие его значения, уме­ ние, психофизиологические характеристики и т. д. Сложность отбора экспертов для включения в экспертную группу в значительной степени вызвана отсут-
Стр. 10 ГОСТ 23554.0— 79 ствием экспертов, профессионально занимающихся оценкой качества продукции (профессиональные эксперты, как правило, занимаются только контролем качест­ ва). Поэтому специалисты, привлекаемые к работе в экспертной группе, не ра­ ботают постоянно и, следовательно, не имеют достаточно устойчивых навыков экспертной оценки. При формировании экспертной группы целесообразно определять качество экспертов, то есть совокупность свойств, характеризующих соответствие эксперта предъявленным ему требованиям. К терминам «Суждение эксперта о качестве продукции», «Оценочное суждение эксперта о качестве продукции» (пп. 4.5). Ответы экспертов на поставленные вопросы можно разделить на три груп­ пы: общие, классификационные и оценочные. Общие ответы в виде достаточно подробных описаний используют для уточ­ нения цели оценки и получения от экспертов дополнительной информации, необ­ ходимой при оценке качества. Классификационные ответы носят качественный характер и представлены в шкале наименований. Оценочные ответы относятся к определению различных характеристик к а­ чества продукции: коэффициентов весомости и показателей качества, значений показателей, базовых значений показателей, а также значений оценок показателей и т. д. Оценочные ответы могут быть количественными или качественными и вы­ ражены в баллах, процентах, долях единицы или описаниях типа «хорошо—плохо», «достаточно—недостаточно», «выражен—не выражен» и т. д,. Оценочные от­ веты в количественной форме наиболее часто представлены в шкалах рангов, интервалов, отношений или в физических шкалах (м, с и т . д.). К термину «Значение экспертной оценки качества продукции» (п. 6). Значение экспертной оценки качества продукции представляет собой от­ вет эксперта, выраженный в количественной или качественной форме. При этом наиболее широко используются точечные значения: одноточечные (3,5 балла, 28%, «качество выше среднего», «удовлетворительно»); двухточечные (4,0+ 4,5 балла, 35% —42% , «качество между средним и выше среднего», «удовлетворитель­ н о -х о р о ш о » ); трехточечные (оптимальное значение — 4,0 балла, минимальное значение — 3,5 балла, максимальное значение — 4,5 балла) и т. д. Разновидностью точечных оценок являются экспертные кривые, которые строятся по различному числу точек (но не менее трех). Используются такж е ранговые значения оценок, представленные в вите ранжировки оцениваемых объектов. В некоторых задачах оценки качества про­ дукции эксперты назначают вероятностные характеристики, которые обычно ис­ пользуются наряду с точечными или ранговыми значениями оценок, например, эксперт приписывает показателю качества следующие коэффициенты весомос­ ти: 0,3 с вероятностью Р = 0,8; 0,35 с вероятностью, Р = 0,6; 0,4 с вероятностью Р = 0,3. Чаще всего количественные значения оценок выражаются в баллах. Наряду с количественной формой представления значений оценок при экспертной оцен­ ке качества используется и качественная форма. Таким образом, понятие «Зна­ чение экспертной оценки качества продукции» шире, чем в метрологии, где понятие «Значение» рассматривается как числовая характеристика. Расширение понятия йызвано широким применением при экспертной оценке качественных описаний, являющихся результатом качественных измерений, поскольку эксперт­ ные методы применяются в первую очередь в тех случаях, когда измерение вели­ чины с помощью измерительных средств невозможно. Значения экспертных оценок, выраженные качественными описаниями, мо­ гут быть результатом измерения («много—мало», «сильно—слабо»), и оценки («хорошо—плохо») и т, д.
ГОСТ 23554.0— 79 Стр. 11 Эффективность оценочной операции повышается, если наряду со значением оценки эксперт дает его обоснование. Необходимость такого обоснования повы­ шает ответственность эксперта. Обоснования служ ат важной информацией при коллективном обсуждении значений экспертных оценок качества продукции. К терминам «Показатель согласованности значений экспертных оценок качества продукции» и «Показатель воспроизводимости значений экспертных оценок качества продукции (пп. 8, 9). Полученное обобщенное суждение экспертной группы имеет смысл только в случае согласованности значений экспертных оценок, назначенных отдельны­ ми экспертами. Анализ показателя согласованности позволяет определить, можно ли переходить к расчету среднего значения экспертных оценок или необходимо повторить .опрос экспертов для повышения согласованности их суждений. Показатель согласованности используется такж е при сравнении результа­ тов, полученных с применением различных методов, для выбора из них наиболее эффективных. Вид показателя согласованности определяется характером решаемой задачи, а его значение— требуемой точностью и доверительной вероятностью результа­ та. Так для определения согласованности суждений экспертов относительно но­ менклатуры показателей качества для каждого показателя вычисляется отно­ шение числа экспертов, включивших данный показатель в структурную схему, к общему числу экспертов. Основой показателей согласованности суждений, пред­ ставленных в виде ранжировок, служит коэффициент ранговой корреляции Спир­ мена. Для балльных значений экспертных оценок показателем согласованности служит среднее квадратическое отклонение или коэффициент вариации. Частным случаем показателя согласованности является показатель воспроиз­ водимости значений экспертных оценок качества продукции, который характери­ зует случайную составляющую погрешности значения экспертной оценки и ис­ пользуется в основном для определения качества эксперта или группы экспертов. Д ля достаточно объективного определения показателя воспроизводимости необхо­ димо обеспечить независимость туров, которая заключается в том, что, производя оценку, эксперт не учитывает значения оценок, назначенные им в предыдущих турах. Независимость обеспечивается интервалом времени между турами и изменением расположения оцениваемых объектов в карте опроса следующего тура по сравнению с предыдущим. К термину «Формализация экспертной оценки качества продукции» (п. 10). К нормализации экспертной оценки относятся описания, устанавливающие закономерности для любых операций экспертной оценки качества продукции. Примером словесной формализации являются анкеты, карты опроса, кото­ рые заполняются экспертами в точном соответствии с указаниями, изложенными в пояснительных записках. Аналитическая формализация заключается, например, в установлении на базе обработки экспертных суждений математической зависимости между еди­ ничными показателями качества продукции и соответствующим комплексным по­ казателем для определенного вида продукции. Примером графической формализации является использование метода «глав­ ных точек», позволяющего представить в графическом виде зависимость между значениями единичного показателя качества и соответствующими значениями оценок показателя. Формализация экспертной оценки позволяет повысить эффективность экс­ пертных методов за счет повышения уровня организации и широкого использо­ вания ЭВМ.
Стр. 12 ГОСТ 23554.0— 79 К термину «Автоматизация экспертной оценки качества продукции» (п. 11) Обычно под автоматизацией экспертной оценки качества продукции понима­ ется замена ручного счета при обработке значений экспертных оценок обработ­ кой на ЭВМ, то есть автоматизация относится только к одной операции оценки качества. Между тем объектом автоматизации могут быть большинство операций экспертной оценки качества: операции опроса экспертов и получение их сужде­ ний с помощью пультов экспертов, и организатора, связанных с ЭВМ; операция выдачи результатов для ознакомления экспертов перед повторным опросом с помощью печатающих устройств, терминалов и графопостроителей; формализа­ ция экспертных суждений переводом суждений экспертов по конкретному воп­ росу в математическую модель, что позволяет в дальнейшем исключить экс­ перта при рассмотрении аналогичных вопросов. К терминам «Экспертная комиссия по оценке качества продукции», «Экспертная группа по оценке качества продукции» и «Рабочая группа по оценке качества продукции» (пп. 12, 13, 14). Экспертная комиссия по оценке качества продукции формируется в соот­ ветствии со спецификой решаемой задачи: стадией жизненнного цикла продукции, универсальностью и сложностью продукции, целью оценки качества, допустимой трудоемкостью экспертной оценки, возможностью привлечения к оценке качест­ ва квалификационных специалистов и т. д. В свою очередь эта специфика оп­ ределяет структуру экспертной комиссии, ее профессиональный состав и количе­ ство экспертов. Обычно основное внимание уделяется формированию экспертной группы, поскольку считается, что рабочая группа выполняет только вспомога­ тельные функции. На самом деле эффективность экспортной оценки в значитель­ ной степени зависит от деятельности рабочей группы, члены которой проводят опрос экспертов и особенно от деятельности организатора экспертной оценки качества. К термину «Опрос эксперта по качеству продукции» (п. 15) К способу опроса эксперта предъявляются различные, в значительной сте­ пени противоречивые требования: ограниченное количество задаваемых воп­ росов и полнота охвата решаемой задачи, ограниченное время опроса и доста­ точная точность суждений экспертов и т. д. Поэтому способ опроса экспертов определяется рабочей группой до формирования экспертной группы, чтобы структура экспертной группы, ее профессиональный состав и количество экспертов соответствовали способу опроса. К терминам «Анкета опроса эксперта по качеству продукции», «Пояснительная записка анкеты опроса эксперта по качеству продукции» и «Карта опроса эксперта по качеству продукции» (пп. 16, 17, 18). При опросе эксперта, как правило, используется карта опроса, а при анке­ тировании и смешанном анкетировании—карта опроса и пояснительная записка. При интервьюировании применение карты опроса не обязательно. Правильное составление анкеты опроса эксперта по качеству продукции особенно важно при заочном опросе, поскольку отсутствие непосредственного контакта эксперта с лицом, проводящим опрос, не позволяет эксперту разрешить вопросы, возникаю­ щие при заполнении карты опроса. К терминам «Экспресс-метод экспертной оценки качества продукции» и «Целостная оценка качества продукции» (пп, 19, 20). Экспресс — метод экспертной оценки представляет собой оперативный метод определения значения обобщенного показателя качества продукции, исходя из значений, входящих в его состав единичных показателей качества коэффициен­ тов и их весомости.
ГОСТ 23554.0— 79 Стр. 13 Целостную оценку качества продукции осуществляют в тех случаях, когда значения оценок единичных показателей, входящих в состав обобщенного пока­ зателя, и их коэффициенты весомости не требуются или их определение связано со значительными трудностями. Иногда целостная оценка может дать более точ­ ный результат, чем при использовании других многооперационных методов. В некоторых случаях (например, при оценке эстетического совершенства продукции) целостная оценка используется как предварительный этап оценки качества продукции. К термину «Метод эксперта и группы» (п. 21) Ведущим экспертом назначается специалист по оцениваемой продукции, входящий в состав экспертной группы, который самостоятельно проводит оценку качества продукции до начала работы экспертной группы. Как правило, он спе­ циализируется по оценке качества продукции, к которой относится образец про­ дукции, представленный для оценки. В функции ведущего эксперта входит тщательный анализ оцениваемого об­ разца, всех дополнительных материалов к нему и проведение оценочных операций, которые, по его мнению, необходимы для получения результата. Задача экспертной группы сводится к ознакомлению с результатами про­ веденного ведущим экспертом анализа и оценки, обсуждению результатов с участием ведущего эксперта и получению в итоге обобщенного суждения о каче­ стве оцениваемой продукции. К терминам «Экспертная кривая оценки качества продукции» и «Метод «главных точек» (пп. 22, 23) Экспертные кривые применяют в случаях, когда зависимости между значе­ ниями показателя качества и соответствующими значениями оценок не могут быть определены аналитически, а такж е при построении шкал для определения значений оценок показателей. Экспертные кривые широко применяются, например, при оценке потребительских показателей качества продукции. Д ля построения экспертных кривых используются различные методы, н ап ­ ример, метод «главных точек». За главные точки принимают максимальные, ми­ нимальные и средние значения показателей качества, их наиболее верятные значения и т. п. К термину «Тур экспертной оценки качества продукции» (п. 24) При экспертной оценке качества нередко возникает необходимость повторе­ ния операций. Это может быть вызвано различными причинами: сравнение ре­ зультатов, полученных с использованием одинаковых процедур в различных ус­ ловиях, сравнение различных методов или процедур, например, очного или за­ очного опроса, повышение точности результата за счет многократного обмена информацией, и т. д. По ГОСТ 235,54.1—79 при оценке качества рекомендуется проводить опрос экспертов в два тура: индивидуальный и групповой. Это позволяет обеспечить независимость суждений экспертов в первом туре (что снижает отрицательные конформное и авторитетное влияния) и обмен информацией между экспертами во втором туре. Опыт применения метода Дельфи показывает, что проведение более трех туров опроса экспертов нецелесообразно. К термину «Среднее согласованное значение экспертной оценки качества продукции» (п. 25) Необходимость введения понятия «Среднее согласованное значение эксперт­ ной оценки качества продукции» вызвано использованием^ при экспертной оцен­ ке качества средних величин без достаточных оснований. Так, например, при определении коэффициентов весомости по результатам опроса рассчитывают их
Стр. 14 ГОСТ 23554.0— 79 средние арифметические значения, которые включают в методические докумен­ ты. Средние значения экспертных оценок можно использовать только в том случае, если имеется общность суждений экспертов, которая характеризуется показателем согласованности. Допустимая мера согласованности определяется воз­ можностями экспертного метода и требованиями к точности и доверительной ве­ роятности результата. Практика работы с различными экспертными группами показала, что коэффициент вариации К = 0 ,2 5 можно принять за характеристику средней согласованности экспертной группы. Повышение согласованности в экс­ пертной группе может быть достигнуто за счет тщательной отработки анкет для опроса экспертов, сообщения экспертам всей необходимой информации, увеличе­ ния количества туров и пр. К термину «Обобщенное оценочное суждение экспертов о качестве продукции» (п. 26) Обобщенное оценочное суждение экспертов о качестве продукции может от­ носиться к одному значению какой-либо характеристики качества (например, значение коэффициента весомости конкретного показателя качества), ко всем значениям этой характеристики (значения коэффициентов весомости всех пока­ зателей качества оцениваемой продукции), к совокупности значений нескольких характеристик (значения коэффициентов весомости показателей качества, базо­ вые значения показателей качества и т. д.), которые необходимы для опреде­ ления обобщенного показателя качества, и к качеству продукции в целом, В последнем случае обобщенным оценочным суждением является значение обоб­ щенного показателя качества и его обоснование. (Измененная редакция, Изм. № 1).П Р И Л О Ж Е Н И Е 2Справочное О С Н О В Н Ы Е О П Е Р А Ц И И ПРИ ЭКСП ЕРТН О Й О Ц ЕН КЕ КАЧЕСТВА П РО Д У К Ц И И Подготовительный этап 1. Формулирование цели оценки. 2. Формирование рабочей группы. Этап работы рабочей группы 3. Уточнение цели оценки. 4. Выбор методов, модификаций, способов и процедур оценки. 5. Определение перечня операций, выполняемых экспертами. 6. Формирование экспертной группы. 7. Выбор методор, способов и процедур опроса эксперта. 8. Подготовка анкет для опроса экспертов. 9. Проведение опроса экспертов.
ГОСТ 23554.0— 79 Стр. 15 Этап работы экспертной группы 10. Классификация продукции и потребителей. 11. Определение номенклатуры показателей. 12. Определение коэффициентов весомости показателей. 13. Определение базовых значений показателей. 14. Определение оценок единичных показателей. 15. Определение комплексных показателей. Заключительный этап 16. Обработка экспертных оценок. 17. Анализ результатов и подготовка решения экспертной группы.П Р И Л О Ж Е Н И Е 3Обязательное О С Н О В Н Ы Е ТРЕБОВАНИЯ, ПРЕДЪЯВЛЯЕМ Ы Е К Э К С П ЕР Т А М Эксперты, входящие в состав экспертной группы, должны однозначно по­ нимать цели и задачи оценки качества и отвечать определенным требованиям. Совокупность основных требований, предъявляемых к эксперту, делится на требования к его компетентности, заинтересованности в участии в работе экс­ пертной комиссии, деловитости и объективности. Компетентность эксперта распространяется на оцениваемую продукцию (профессиональная компетентность), и методологию оценки (квалиметрическая компетентность). Профессиональная компетентность включает значение различных сторон про­ ектирования производства продукции, значений показателей качества аналогов, перспектив развития продукции, отраженных в научно-исследовательских рабо­ тах, патентах, конструкторских разработках и т. д., требований потребителей, условий и характера эксплуатации (потребления) продукции. Квалиметрическая компетентность обеспечивает четкое понимание экспертом принципов и методов оценки качества продукции. Квалиметрическая компетентность включает знание методов оценки каче­ ства продукции и практическое умение пользоваться ими, т. е. использовать разные типы оценочных шкал, определять субъективные вероятности и различать достаточное число градаций оцениваемого объекта. Заинтересованность эксперта в участии в работе экспертной комиссии за ­ висит от его индивидуальных особенностей, загруженности основной работой, целей экспертизы и возможностей использования ее результатов в своей практи­ ческой деятельности. Деловитость эксперта включает, в частности, собранность, оперативность и обоснованность суждений. Объективность эксперта заключается в вынесении им суждений, характери­ зующих действительный уровень качества оцениваемой продукции. Необъектив-
Стр. 16 ГОСТ 23554.0— 79 ность эксперта — завышение или занижение значений характеристик свойств продукции по причинам, не имеющим отношения к ее качеству. Кроме того, к эксперту могут предъявляться специфические требования, определяемые целями оценки качества и особенностями оцениваемой продукции, например, в пищевой промышленности следует учитывать психофизиологические возможности эксперта и его состояние здоровья. При разработке требований к экспертам по пищевой продукции в рабочую группу следует включать психолога. Эксперты, оценивающие потребительские показатели качества продукции, особенно эстетические и эргономические, должны быть хорошо осведомленными в области художественного конструирования. Требования, предъявляемые к экспертам, разрабатываются рабочей группой на основе общих требований.П Р И Л О Ж Е Н И Е 4СправочноеФУНКЦИИ ЧЛЕНОВ РАБОЧЕЙ ГРУППЫ Организатор руководит деятельностью экспертной комиссии по составлению программы экспертной оценки качества продукции, организации экспертной груп­ пы, организации и проведению опроса экспертов, обработке оценок, анализу ре­ зультатов каждой оценочной операции для корректирования программы работы и формулирования выводов и рекомендаций. Основная задача консультанта по оцениваемой продукции заключается в учете при экспертной оценке качества специфики оцениваемой продукции и со­ держательном анализе результатов оценочных операций для корректирования программы работы и формулирования выводов и рекомендаций. Технические работники участвуют в составлении программы экспертной оценки качества продукции и организации экспертной группы, организуют и проводят опрос экспертов, производят при необходимости обработку оценок, участвуют в анализе полученных результатов и формулировании выводов и ре­ комендаций.
ГОСТ 23554.0— 79 Стр. 17П Р И Л О Ж Е Н И Е 5СправочноеПРИМЕР ИЕРАРХИЧЕСКОЙ СТРУКТУРНОЙ СХЕМЫ ПОКАЗАТЕЛЕЙ КАЧЕСТВА Иерархия показателей качества Уровни рассмотрения
Стр. 18 ГОСТ 23554.0— 79П Р И Л О Ж Е Н И Е 6Справочное М Е Т О Д «ГЛАВНЫ Х ТОЧЕК» При определении характера зависимости оценок показателей от их значе­ ний методом «главных точек» эксперт учитывает различные факторы: экономи­ ческую эффективность, назначение продукции, возможные условия эксплуатации, требования потребителей и т. д. Перед экспертом стоит сложная задача «оце­ нить число—числом», то есть перевести значение показателя в его оценку. Д ля облегчения этой задачи рекомендуется метод «главных точек», принцип которого заключается в графическом определении экспертами вида зависимости между значениями показателей и их оценками. Указанная зависимость может быть представлена в виде графиков, таблиц, формул. Графики строятся в системе координат: по оси абсцисс—значения по­ казателей, по оси ординат — оценки. По кривым, построенным отдельными экспертами, строится средняя кривая, которая для удобства расчетов может описываться аналитически. Например, для оценки показателя «коэффициент полезного действия» из­ делия плучена средняя кривая, представленная на чертеже. Такую зависимость достаточно точно описывает формула где К\ — оценка t-ro показателя;Pi — значение i-го показателя; Pi баз — значение i-ro базового показателя;а — положительное целое число. Следует различать две группы показателей: «измеримые», — значения которых выражаются в физических шкалах (ско­ рость, размеры, содержание веществ и т. д .); «неизмеримые», — значения которых выражаются в качественных описаниях (целостность композиции, удобство пользования и т. д.).
ГОСТ 23554.0— 79 Стр. 1?П Р И Л О Ж Е Н И Е 7Справочное С П О С О Б Ы С О СТ АВЛ ЕН И Я Б А З О В Ы Х РЯД О В О Б Р А З Ц О В П РО Д У К Ц И И Для составления базовых рядов образцов продукции при оценке эстетиче­ ских показателей качества применяют нерасчлененный и дифференцированный способы. Нерасчлененный способ не требует проведения дополнительных операций и предполагает непосредственный отбор экспертами не менее четырех базовых об­ разцов, соответствующих различному эстетическому уровню качества (лучшие, хорошие, удовлетворительные, плохие), и построение из них базового ряда об­ разцов, упорядоченных в порядке уменьшения этого уровня. Дифференцированный способ составления базового ряда предусматривает три последовательных этапа: составление первого вспомогательного ряда образ­ цов, ранжированных по результатам оценки качества (без учета эстети­ ческих свойств), составление второго вспомогательного ряда образцов, ранж и­ рованных по степени совершенства формы, и получение с их помощью собствен­ но базового ряда. Первый вспомогательный ряд составляется на основании результатов ком­ плексной оценки основных показателей качества (без эстетических) всех входя­ щих в него образцов разделением на несколько групп в порядке уменьшения значений комплексных показателей, например: лучшие, хорошие, удовлетвори­ тельные, плохие. Второй вспомогательный ряд строится экспертами по оценке эстетических показателей качества изделий. Этот ряд составляется из тех же образцов-ана­ логов путем ранжирования их в порядке уменьшения степени совершенства формы и разделения на четыре соответствующие группы. Из образцов, вошедших в оба вспомогательных ряда, эксперты отбирают те, которые были отнесены к однотипным группам как по уровню качества, так и по степени совершенства формы. Отобранные изделия образуют базовый ряд.П Р И Л О Ж Е Н И Е 8Справочное БАЛЛЬНЫ Е Ш КАЛЫ , П РИ М ЕН Я ЕМ Ы Е ДЛЯ ЭК СП ЕРТН О Й О Ц ЕН К И КАЧ ЕС Т ВА П Р О Д У К Ц И И Балльная шкала служит для назначения оцениваемым объектам количествен­ ных характеристик, которые являются мерой выраженности определенного при­ знака. Основной характеристикой балльной шкалы является диапазон (балль­ ность шкалы) — количество градаций, которое включает шкала, то есть коли­ чество оценочных точек. Оно не всегда совпадает с количеством баллов, так как баллы могут делиться на доли (1,1; 1 , 2 ; . . . ; 1,7 балла и т, д.) или при
Стр. 20 ГОСТ 23J54.0— 79 оценке могут использоваться не все баллы (5; 10; 15 баллов и т. д.). Напри­ мер, шкала с высшей оценкой в 5 баллов с градациями через 0,5 балла имеет тот же диапазон, что и шкала с высшей оценкой в 10 баллов с градациями через 1 балл и шкала с высшей оценкой в НЮ баллов с градациями через 10 баллов. Если в этих шкалах не используется 0, то все они являются 10-балльными. Число градаций шкалы определяется характером решаемой задачи, качест­ вом экспертов, требуемой точностью результата и возможностью качественно­ го описания количественных градаций. Чтобы обеспечить различимость градаций шкалы оценки какого-либо приз­ нака, необходимо дать экспертам описание, в котором отмечены характерные черты (особенности) градации, позволяющие достаточно четко отличать каждую градацию от граничащих с ней и выражающие степень интенсивности оцени­ ваемого признака. Совокупность качественных описаний шкалы должна отвечать требованиям: общеупотребительности — распространенность, привычность для эксперта; однозначности — близкое толкование разными экспертами; различимости — возможность различения признаков по всем градациям; достаточности — число градаций шкалы обеспечивает нужную точность результата. Для экспертной оценки качества продукции целесообразно пользоваться шкалами с нечетным числом градаций, в которых помимо нижнего и верхнего имеется средний (удовлетворительный) уровень. Для комплексной оценки широко используются пять и семь градаций качества, причем количество градаций может совпадать (табл. 1) или не сов­ падать (табл. 2) с количеством баллов. Т а б л и ц а ! Т а б л и ц а 2 Гра­ Гра­ дация Баллы Качественная оценка дация Баллы Качественная оценка 5 5 Отличное качество 7 100 Очень высокое к а­ чество 4 4 Хорошее качество 6 85 Высокое качество 5 70 Выше среднего к а­ 3 3 Среднее качество чества 4 55 Среднее качество 2 2 Плохое качество 3 40 Ниже среднего к а­ чества 1 1 Очень плохое ка­ 2 25 Низкое качество чество 1 10 Очень низкое к а­ чество Помимо этого желательно привести перечень наиболее распространенных недостатков с указанием' количества баллов, которое за них снимается. В некоторых случаях оценке показателей в баллах предшествует операция измерений показателей — комбинированная шкала. По такой шкале оценивается, например, запах пищевых и гастрономиче­ ских продуктов (табл. 3). Для оценки показателей целесообразно использовать 100-балльную шкалу с пятью или семью градациями, которым соответствуют качественные оценки и описания характерных особенностей показателей. Эксперты, назначая оценки, пользуются целыми числами в интервале 0— 100. Например, для оценки единичных показателей качества внешнего вида лакокрасочных покрытий можно использовать шкалу, приведенную в табл. 4.
ГОСТ 23554.0— 79 Стр. 21 Т а б л и ц а 3 Баллы Измерение показателя Оценка показателя 3 Очень ярко выражен Очень желательный 4 Ярко выражен Желательный 3 Слабо выражен Нейтральный 2 Очень слабо выражен Нежелательный 1 Не выражен Крайне нежелательный Т а б л и ц а 4 Градация Баллы Качественная оценка Особенности показателя 5 100 Качество высокое Дефект отсутствует — не виден при осмотре* 4 80 Качество выше сред­ Дефект слабый — еле заметен при него осмотре 3 60 Качество среднее Дефект средний— заметен при осмотре 2 40 Качество ниже сред­ Дефект сильный — хорошо заме­ него тен при осмотре 1 20 Качество низкое Дефект очень сильный — явно ви­ ден при осмотре * Здесь и далее по шкале — без применения каких-либо устройств и при­ боров. Для более наглядной характеристики оцениваемых показателей по каждой из выбранных градаций, приведенных в табл. 4, экспертам могут быть предло­ жены базовые образцы, иллюстрирующие меру проявления указанного дефекта. Совокупность базовых образцов составляет базовый ряд образцов.
Редактор В. Н. Шалаева Технический редактор Э. В. Митяй Корректор Г. И. Чуйко Сдано в наб. 03.06.80 Подп. в печ. 07.08.86 1,5 уел. п. л, 1,5 уел, кр.-отт, 1,60 уч.-изд. л. Тираж 16 000 Цена 10 коп. Ордена «Знак Почета» Издательство стандартов, 123840, Москва, ГСП, Новопресненский пер,, д. 3. Вильнюсская типография Издательства стандартов, ул. Миндауго, 12/14. Зак. 3565.ГОСТ 23554.0-79

Похожие документы