ГОСТ ISO 8586-2015 Органолептический анализ. Общие руководящие указания по отбору, обучению и контролю за работой отобранных испытателей и экспертов-испытателей (с Поправкой)

     6.4 Рейтинговый и балльный методы

Испытателям следует предоставить, по крайней мере, шесть различных образцов, по три штуки, в произвольном порядке и, если возможно, больше чем за один раз. Результаты следует занести в таблицы, аналогичные таблицам В.1 и В.2.

Полученные данные следует проанализировать с точки зрения колебания показателей (ANOVA, как показано в таблицах В.1 и В.2, критерий Фридмана или тест Page), и таким образом получить индивидуальные результаты по каждому испытателю.

Испытателей, у которых обнаружатся существенные колебания по показателям, что указывает на непоследовательность, или для которых различия между образцами будут незначительными, что указывает на слабую способность к различению, желательно исключить из комиссии. Но если большинство испытателей имеют один из этих недостатков или оба, то можно предположить, что образцы различаются с недостаточной степенью дифференциации.

Полученные результаты следует проанализировать с точки зрения колебаний показателей, как показано в таблицах В.2 и В.3. Следует определить статистическую значимость колебаний в зависимости от испытателя и образца, а также значимость показателя в графе испытатель/образец.

Значительные колебания в оценках, которые дает испытатель, свидетельствуют о недостатке объективности, то есть один испытатель или несколько постоянно присуждали баллы выше или ниже, чем другие. Существенные колебания, в зависимости от образца, говорят о том, что комиссия в целом успешно дифференцирует образцы. Существенный результат в графе испытатель/образец указывает на то, что у двух или более испытателей нарушено восприятие различий между двумя или более образцами. В некоторых случаях значение в графе испытатель/образец может даже отражать несогласие в оценке образцов.

Хотя анализ колебаний приемлем для начисления баллов, он не подходит для некоторых форм ведения рейтинга. Если, к примеру, используется процедура ранжирования, то более подходящими могут быть непараметрические методы, такие как критерий Фридмана (см. [7]).