Ксам = ВэспIэкс,
где Ксам – коэффициент самооценки эксперта;
Вэкс – весомость показателей информированности и знаний;
Iэкс – оценка, которая зависит от степени информированности.
Пример расчета Ксам приведен в приложении Б.
Взаимооценка – это эвристическая оценка эксперта, которая дается другими экспертами, она должна уменьшить субъективность самооценки каждого эксперта. Известно, что существует взаимосвязь между компетентностью эксперта и средней оценкой, которую он получил от своих коллег. Сущность этого вида оценки состоит в том, что каждый член экспертной группы дает оценку всем другим экспертам, а потом рассчитывается средняя оценка каждого эксперта.
Недостатки взаимооценки:
эксперты могут недостаточно знать один другого;
на результаты оценки могут влиять взаимные симпатии или антипатии;
разные эксперты могут неоднозначно воспринимать понятие «компетентность эксперта»;
Для уменьшения указанных недостатков рекомендуется
использовать взаимооценку только в тех комиссиях, где эксперты хорошо знают друг друга;
проводить анонимное анкетирование;
объяснять, что результаты анкетирования будут использоваться только для корректировки оценок товара.
Оценка эксперта рабочей группой – это эвристическая оценка, которая должна дать количественную характеристику заинтересованности эксперта в экспертной оценке и его внимательности в процессе опроса. Оценка дается специалистами-аналитиками, которые проводят опрос экспертов после экспертной оценки продукции. При этом они оценивают отношение экспертов к экспертизе а также их активность при обсуждении результатов. Чаще всего для такую оценку рекомендуют использовать 10–балльную оценку.
Статистическая оценка. – это оценка, полученная после статистической обработки мнений экспертов об объекте оценки. Эти оценки используются с целью уменьшения ошибок, которые возникают при экспертных оценках. Необходимость статистической обработки результатов экспертизы обусловлена тем, что в отличии от измерений, которые проводятся при помощи технических средств и базируется на сравнении неизвестных величин с известными, при экспертных методах часто известная величина отсутствует. К тому же на точность экспертных оценок влияет много факторов объективного и субъективного характера, вследствие чего возникают систематические или случайные ошибки.
Систематическая ошибка – это ошибка, которая постоянно повторяется в процессе данного определения. Основная причина ее появления является недостаточная или неточная информация экспертов. Уменьшить ее можно путем ознакомления экспертов с необходимой информацией до начала работы экспертной комиссии. Систематическую ошибку можно определить по величине отклонения оценки каждого эксперта от среднего значения, полученной в экспертной комиссии.
Случайная ошибка зависит от психофизиологических особенностей эксперта (собранности, внимательности, уверенности в собственной правоте). Она уменьшается, если эксперт часто принимает участие в работе экспертных комиссий и имеет практический опыт.
Оценка объективности эксперта – это оценка способности эксперта к непреднамеренной оценке конкретного образца товара. Это очень важная характеристика компетентности эксперта, которая существенно влияет на точность результатов экспертной оценки.
Тестовые оценки позволяют при помощи тестирования определить психофизиологические особенности экспертов. Их используют для оценки объективности, квалиметрической и профессиональной подготовленности эксперта. Тестирование позволяет оценить личностные черты, чего нельзя сделать никакими другими методами. Недостатком данного метода можно считать невозможность сравнить данные, полученные методом тестирования, с данными, полученными при помощи других объективных методов.
В чем суть потребительных методов сенсорного анализа?
Какие условия необходимо создавать при создании дегустационных комиссий для потребительской оценки?
Какие правила необходимо соблюдать при составлении анкеты для потребительской оценки?
В чем суть парного и треугольного методов исследования?
В чем суть аналитических методов сенсорного анализа?
С какой целью чаще всего используют метод оазведения?
В чем суть бальной оценки качества товаров?
Какие требования необходимо соблюдать при разработке бальной системы оценки качества товара?
С какой целью устанавливают коэффициенты значимости показателей качества?
В чем суть экспертного метода оценки качества товаров?
Назовите основные этапы и операции, имеющие место при проведении экспертной оценки.
Какие существуют методы оценки компетентности экспертов?
Охарактеризуйте основные методы оценки компетентности экспертов (эвристический, тестовый, документальный).
Цель: разъяснить студентам, какие причины могут повлиять на результаты сенсорного анализа, чтобы они могли это учитывать в будущей своей работе.
Точность результатов, полученных при помощи любого сенсорного метода, зависит от способов проведения измерений. При использовании разных методов (бального, разведения, парного и треугольного сопоставления) может быть обеспечена высокая точность оценки и выявлена даже незначительная разница. В то же время каждый из этих методов может дать и неточные результаты.
рассмотренные в предыдущей теме методы сенсорного анализа гарантируют высокую точность и объективность результатов только тогда, когда используется правильная методика. Результаты сенсорного анализа зависят от таких факторов:
разные сенсорные способности исполнителей;
разное специфическое восприятие отдельных видов нервных импульсов исполнителями;
время и условия проведения анализа.
Индивидуальные особенности. Принимать участие в сенсорном анализе могут далеко не все люди, поскольку решающее значение здесь имеют индивидуальные способности.
Каждый человек имеет присущие только ему структуру носовой раковины, чувствительность вкусовых луковичек или зрительных колбочек. Скорее всего существуют пока еще до конца не объяснимые индивидуальные особенности отдельных людей, которые проявляются благодаря своеобразному соединению специфических клеток в коре головного мозга. Сенсорные способности могут развиваться у человека на протяжении всей жизни. Чрезвычайная способность различать оттенки цветов или разнообразия запахов и вкусов может стать основой для формирования высококвалифицированного специалиста сенсорного анализа.
Анализ данных специального эксперимента, в котором определялось влияние компетентности дегустаторов на результаты их сенсорной оценки, показал, что дегустаторы с высоким уровнем компетентности характеризуется:
тенденцией давать более жесткую оценку при определении качества товаров;
более высокой надежностью сенсорных оценок;
большим арсеналом терминов сенсорных показателей, что позволяет им многогранно описывать контролируемые товары;
меньшей силой конформных реакций, т.е. их выводы более независимы.
Подбор комиссии. В зависимости от степени подготовке и квалификации участников комиссии сенсорного анализа могут быть аналитического или потребительского типа. Последний тип комиссии не требует от участников специальной подготовки, но вместе с тем, при подборе комиссии необходимо придерживаться определенных правил. В состав потребительской комиссии можно приглашать потребителей, за исключением лиц, которые знают оцениваемый товар и с какой целью проводится оценка качества данного товара.
При составлении тестов необходимо придерживаться таких требований:
эксперт должен понимать постановку тестового задания и условия, которым отвечает его решение;
вероятность случайного угадывания решения задания должна быть близка нулю;
тестовое задание должно иметь точный ответ;
необходимо обосновать приближение тестового задания и реальных задач, которые решает эксперт при оценке качества продукции.
Оценка квалилиметрической подготовки эксперта – это оценка теоретических знаний методов оценки показателей качества продукции и умение их использовать в практической работе. Эта оценка может проводиться путем устного или письменного контроля знаний с использованием тестов.
Несколько сложнее проверить такие знания, как умение использовать различные типы оценочных шкал, определять субъективную вероятность, распознавать достаточное количество градаций показателей качества.
Документальная оценка – это оценка эксперта на основе документов, которые подтверждают его соответствие установленным требованиям. Например, компетентность эксперта может быть подтверждена общими сведениями, которые приводятся в анкете: опыт – копией трудовой книжки; профессиональная подготовка – дипломом профессионального образования; специальная подготовка – аттестатом или свидетельством установленного образца о специальной подготовке; повышение квалификации – соответствующим свидетельством.
Документальная оценка может быть только дополнением к другим методам оценки компетентности эксперта и самостоятельного значения не имеет. Это обусловлено тем, что часть информации, которая есть в документах, дублирует другие оценки.
Комбинированная оценка предполагает использование различных методов оценки компетентности экспертов. Так как различные методы этой оценки имеют свои преимущества и недостатки, то их совместное использование может позволить усилить преимущества и смягчить недостатки отдельных методов.
Подбор членов аналитической комиссии требует более детальной проверки кандидатов. При этом они должны пройти определенное обучение. Большинство ученых-аналитиков считают, что не нужно создавать постоянную комиссию универсальных экспертов, потому что оценка качества каждого товара представляет собой отдельную проблему. Безусловно, некоторые эксперты могут принимать участие в работе разных комиссий, но это может быть обусловлено только их высокой сенсорной способностью к выполнению такой работы.
При подбое экспертов необходимо иметь в виду, что в состав такой комиссии должны входить лица, которые имеют хорошо развитые органы чувств. В основе такого подбора должны лежать 3 критерия:
Величина порога разницы импульса, которую может различать данный кандидат.
Постоянство результатов оценки данного кандидата, т.е. способность данного человека получать сопоставимые результаты своих оценок.
Сопоставимость оценок данного кандидата со средней оценкой всей комиссии. Претендент не должен стремится к завышению или занижению оценок.
Подбор комиссии, как правило, проводится методом треугольных сопоставлений. Каждый кандидат получает 3 пробы, две из которых идентичны. Оценщик должен определить идентичные пробы. Если при оценке 7 тройных проб кандидат дал 5 или больше правильных ответов, он может работать в аналитической комиссии.
При подборе дегустационной комиссии необходимо учитывать такие факторы, как мотивация поведения дегустатора, влияние голода, влияние авторитета.
Влияние мотивов поведения дегустатора. Под мотивацией поведения дегустатора понимают психологические причины, которые влияют на его действия. Под влиянием определенных мотивов дегустатор может завышать (занижать) оценки представленных образцов товара. Мотивации могут быть обусловлены потребностями дегустатора, чувством ответственности, порядочностью, добросовестностью. Хотя влияние этого фактора контролировать тяжело. Для снижения мотивации рекомендуются пробы, которые представляются на дегустацию зашифровывать, вводит различные требования в отношении регламента работы дегустационной комиссии.
Влияние голода. Изменение положительной оценки образца, представленного на дегустацию, в зависимости от состояния организма оценщика называют алестезией. Такие сдвиги от приятного до неприятного возникают в отношении некоторых вкусов и запахов еды после того, как произошло насыщение организма соответствующей едой. Такое явление может наблюдаться под влиянием голода. Результаты многочисленных исследований говорят о том, что чувство голода существенно повышает чувствительность к сладкому.
Влияние авторитета. Некоторые дегустаторы стремятся подогнать свои оценки к оценкам других членов дегустационной комиссии, которые, по их мнению, более компетентны. Это влияние более опытных членов комиссии можно уменьшить, если обсуждение результатов работы комиссии начинать с опроса менее опытных дегустаторов и тех, которые занимают более низкое служебное положение.
Условия проведения анализа. На работу дегустатора, а значит, и на результат существенно влияют условия работы. Поэтому при проведении сенсорного анализа необходимо создавать объективные условия и обращать внимание на такие факторы:
условия окружающей среды (температура и влажность воздуха, освещенность помещения);
размер и температура пробы, вид и размер посуды;
скорость проведения анализа, способы освежения полости рта.
Лаборатория сенсорного анализа. Для того, чтобы выявит минимальную разницу в качестве товара, необходима напряженное внимание и сосредоточенность. Поэтому в лаборатории должны создаваться условия, которые отвечают утвержденным требованиям и облегчают выполнение непростой работы дегустаторов. В лаборатории сенсорного анализа необходимо:
соблюдать тишину и создавать условия, при которых внимание экспертов было бы сосредоточено на выполнении работы;
не допускать общения экспертов во время проведения анализов;
Все, что отвлекает внимание экспертов при выполнении работы, уменьшает точность оценки и увеличивает вероятность ошибок.
Лаборатория сенсорного анализа должна быть отделена от других помещений тамбуром, чтобы в нее не проникали шум и запахи из соседних помещения.
Для каждого эксперта в лаборатории должно быть оборудовано удобное для работы индивидуальное рабочее место. Ширина каждого рабочего места должна быть около 1 м, глубина – около 0.5 м. Чтобы в процессе работы эксперты не мешали друг другу и не могли обмениваться мнениями в отношении качества оцениваемого товара, между рабочими местами должны быть перегородки. Рабочие места экспертов по возможности располагают вдоль стены, которая отделяет лабораторию от подсобного помещения, где подготавливают пробы. В специализированных лабораториях в этой монтируют поворотные столики, на которые в подсобном помещении ставят подготовленные пробы и, поворачивая столик на 1800, подают образцы дегустаторам.
Вентиляция и температура в лаборатории. В лаборатории сенсорного анализа воздух должен быть свежим и в помещении не должно быть посторонних запахов. Для обеспечения постоянного обмена воздуха в лаборатории необходимо предусмотреть вентиляцию, но она должна работать бесшумно.
Температура воздуха в лаборатории заметно влияет на чувствительность органов вкуса и запаха. Установлено, что повышение температуры в помещении свыше 36 0С значительно снижает чувствительность органов вкуса. При температуре ниже 150С наблюдаются у дегустаторов трудности с выявлением разницы в интенсивности запахов и соленого вкуса. Поэтому лаборатория сенсорного анализа должна быть оборудована кондиционером.
Освещенность рабочих мест и лаборатории. Освещенность проб должна быть равномерной. Результаты оценки качества товаров в значительной степени зависит от свойств света. При определении цвета интенсивность освещения должна быть 30–50 лк. Состав света должен быть таким, чтобы природная окраска товара сохранялась неизменной. Это особенно важно, если в процессе оценки товара необходимо сравнивать цвет образцов, а также, если в оттенках цвета необходимо определить отличия, которые появляются во время хранения или влияния других факторов окружающей среды.
Окна лаборатории должны выходить на север, их площадь должна быть более 35 % площади пола.
Определение цвета товара лучше проводить при рассеянном дневном свете. При использовании искусственного освещения необходимо использовать осветительные приборы, которые дают свет идентичный дневному.
Рабочие места экспертов, стены лаборатории желательно красить в светлые тона: белый, кремовый, светло-серый.
Кроме общего рассеянного света помещения, каждое рабочее место дегустатора должно также иметь освещение. Лампа над рабочим местом должна иметь приспособления для смены световых фильтров, если в этом будет необходимость.
Посуда, которую используют для подготовки проб и непосредственно для самого анализа, должна соответствовать определенным требованиям. Она не должна иметь ни вкуса, ни запаха, не должна вступать в химические реакции с компонентами продукта. Поэтому для проведения сенсорного анализа не пригодна посуда из алюминия, олова, латуни, и даже дерева. Лабораторную посуду чаще всего вырабатывают из нейтральных материалов: серебра, нержавеющей стали, стекла, фарфора. Посуда, в которой подают образцы, должна быть однородной по материалу изготовления, размеру, форме, цвету.
Лабораторную посуду тщательно мют в горячей воде, несколько раз прополаскивают в холодной воде и сушат горячим воздухом, чтобы ликвидировать посторонние запахи.
Состояние организма. Общее состояние организма, возраст, привычки в значительной степени влияют на результаты работы дегустатора. Хорошее состояние здоровья – необходимое условие высокой сенсорной чувствительности органов чувств человека. Поэтому при отборе дегустаторов в анкету потенциального дегустатора рекомендуется включать вопросы в отношении состояния его здоровья (приложение В). Для организаторов дегустации данные такой анкеты могут стать источником информации для более правильного отбора дегустаторов.