Конкурс «Russian Wines Competition 2018»
Конкурс «Russian Wines Competition 2018»
В статье представлены основные данные укрупненного сравнительного анализа исходных данных конкурса «Russian Wines Competition 2018» и его результатов в конкурсном ландшафте России. Данная статья не ставит целью проведение глубокого статистического анализа, содержит отдельные его элементы и показывает направления, которые можно развить (при желании), углубившись в сугубо математическую сторону вопроса и проблематику конкурсных оценок.
Конкурсная лирика
Развитие российского виноделия влечет за собой закономерное рождение и становление различных конкурсов и проектов по оценке российских вин. Одной из целей организации и проведения конкурсов и оценок в принципе является получение информационного среза о текущем качестве вин с формированием рейтинга. Он выражен общей балльной оценкой – консолидированным мнением экспертов о вине.
Крупные дегустационные конкурсы и проекты, посвященные российскому вину, на слуху – ежегодные «Южная Россия» и «Кубок СВВР», Russian Wines Competition, Авторский гид А. Саркисяна «Российские вина». Не считая множества иных российских конкурсов и мероприятий, на которых отечественные вина – одни из участников, наравне с винными представителями близлежащих стран.
Понятно, что конкурсы и проекты резко различаются в подходах к их организации, в частности: выбора каналов поступления вин, наименований вин, формирования состава жюри, флайтов.
Что их частично объединяет – процедура проведения дегустации и правила оценки (100-балльная система, стандартизированный дегустационный лист) с почтением и оглядкой на рекомендации Международной организации виноградарства и виноделия (МОВВ) [1]. Отдельные элементы из этих рекомендаций включены в стандарт, посвященный органолептической оценке вин [2].
Такие разные 100 баллов
Общая оценка вина на конкурсе складывается из отдельных органолептических показателей, причем их укрупненная структура для категорий вин (тихие, игристые) сопоставима.
Однако вклад элементов в общую оценку вин, их вес несколько различается (рис. 1, 2). Различия продиктованы необходимостью проведения оценки отдельного элемента внешнего вида для игристых вин – игристых и пенистых свойств (рис. 2). В результате в общей оценке игристых вин есть некоторый перекос в сторону элемента «Внешний вид» (на 10% по сравнению с тихими винами) за счет уменьшения веса элемента «Вкус».
В первом приближении (в связи с отсутствием данных об индивидуальных оценках категорий вин по органолептическим показателям) сравнение категорий вин (тихие, игристые) по общей балльной оценке допустимо.
Рис. 1. Структура и вес органолептических показателей в оценке тихих вин (укрупнено, согласно Resolution OIV/Concours 332A/2009)
Рис. 2. Структура и вес органолептических показателей в оценке игристых вин (укрупнено, согласно Resolution OIV/Concours 332A/2009)
Регламент некоторых конкурсов (например, «Кубок СВВР»[3]) предусматривает проведение оценки вин по 100-балльной шкале, но не рекомендованной МОВВ и стандартизированной в РФ, а предложенной Робертом Паркером [4].
Причем не всегда понятно, по какой именно системе проводилась оценка вин на конкурсе. Так, в Положении о конкурсе «Южная Россия 2018» в статье 12 заявлена система оценки вина, по структуре схожая с разработанной Р. Паркером, а в приложении представлен дегустационный лист, рекомендованный МОВВ [5].
В различных авторских системах оценки, например, в Авторском гиде А. Саркисяна «Российские вина 2017-2018» [6], несмотря на 100-балльную шкалу, характеризуемую как «классическую», сведения о весе органолептических показателей в структуре общей балльной оценки, к сожалению, отсутствуют, что затрудняет их сравнение с действующими системами оценки.
В предложенной Паркером системе оценки часть 100-балльной оценки в виде 50 баллов неизменная и выставляется абсолютно всем винам независимо от их качества [4]. В этой связи структура и вес органолептических показателей переменной, начисляемой 50-балльной части оценки, распределяется следующим образом: внешний вид – 10%, аромат – 30%, вкус – 40%, общий уровень качества – 20%.
На первый взгляд такая структура незначительно разнится в сравнении со структурой 100-балльной оценки МОВВ. Однако с точки зрения общей 100-балльной оценки вина с учетом присвоения минимальной неизменной 50-балльной части реальный вклад варьируемых по баллам органолептических показателей в переменную часть оценки вина существенно меньший, чем в системе оценки МОВВ (рис. 3).
Кроме того, данная система оценки не предусматривает стандартизированный дегустационный лист с дискретными значениями каждого органолептического показателя, формирующего переменную часть балльной оценки. Это, в свою очередь, дает определенную вольность в выставлении оценки образцам без привязки к дискретным значениям каждого органолептического показателя. Подобные оценки попадают в категорию «несравнимых» с оценками, полученными на иных методических подходах (МОВВ).
Рис. 3. Структура и вес органолептических показателей в общей оценке вин (TWA Rating System)
Конкурсы множат сопоставимые по размерности 100-балльные рейтинги, оценки вин (однако разные по методологической сути), их сравнительный анализ – дело неблагодарное. Балльные оценки зачастую резко различаются. Такая ситуация рождает вопрос – какой же из результатов наиболее объективен и правдоподобен?
Не стоит удивляться резким различиям в баллах, данное положение дел является скорее правилом, чем исключением. Достаточно обратить внимание на сравнительные исследования различных рейтингов (конкурсы, рейтинги Wine Spectator, Wine Enthusiast, Decanter, Robert Parker, Jancis Robinson и т.д.) идентичных образцов вин, полученных разными экспертными авторитетными группами [7, 8, 9]. Или провести свои сопоставительные изыскания по представленным в открытом доступе рейтингам.
Результат – наличие слабо и средневыраженных зависимостей с отсутствием каких-либо тесных зависимостей между различными рейтингами идентичных вин. Иначе говоря – плавающее качество вина с различных экспертных точек зрения.
Массовость конкурсов, проектов и мероприятий, и разноплановость их результатов (различная методология выставления балльных оценок в сопоставимой 100-балльной шкале) девальвирует доверие к получаемым рейтингам качества вин, выраженных балльной оценкой и присужденными наградами.
В этой связи актуальными становятся вопросы сравнения не только конечных результатов (балльных оценок) конкурсов между собой, но и подходов к их организации и проведению, анализа сильных и слабых сторон, преимуществ и недостатков, глубокая аналитика организационной части, исходных данных каждого конкурса.
«Russian Wines Competition 2018». В чем новизна?
В пресс-релизах результатов профессиональных конкурсов, как правило, фигурирует информация, включающая категорию вина, его наименование, сведения о регионе производства и производителе, годе урожая, балльной оценке и виде награды. Крайне редко можно встретить систематизированные сведения о сортовом составе, и практически невозможно – о стоимости вина, дескрипторах аромата, выявленных дефектах, элементах качества вина (цвет, аромат, вкус, общее впечатление, входящие в состав балльной оценки). Как правило, указанные сведения остаются за кулисами конкурсов.
Конкурс «Russian Wines Competition 2018» – первый российский конкурс, в результате которого получена консолидированная по членам жюри расширенная аналитика в виде вербальных дескрипторов аромата (с указанием для каждого дескриптора частоты его упоминания членами жюри), составляющих элементов балльной оценки каждого образца, вербальные, численные и графические характеристики вкусового профиля, характеристик дефектов (рис. 4) [10]. Кладезь весьма ценной информации, как для производителей, так и для потребителей и всех, кто интересуется расширенной винной аналитикой. Можно сказать готовые данные для изучения предпочтений потребителей. По сути – детали работы жюри над каждым конкурсным образцом [11, 12].
Рис. 4. Комплексный лист дегустационной оценки на каждый образец вина конкурса «Russian Wines Competition 2018» (пример)
Важно отметить различные подходы, связанные с поступлением вин на дегустационные конкурсы.
Организаторы конкурса «Russian Wines Competition 2018» осуществляли закупку образцов вин в розничной сети без какого-либо участия производителей вина, в то время как на дегустационные конкурсы «Южная Россия», «Кубок СВВР» образцы предоставляются самими производителями. Естественно, при наличии у них желания и финансовых возможностей принять участие в мероприятии. Таким образом, на данные конкурсы могут быть предоставлены любые образцы вин.
Конкурс «Russian Wines Competition 2018» – также первый российский конкурс, в результатах которого присутствует стоимость (подтвержденная) конкурсных образцов, что обеспечивает прозрачность процедуры поступления образцов на конкурс [13].
Сопоставимые конкурсы готовностью к публикации такого набора результатов похвастать не могут. Их результаты – стандартный пресс-релизный набор сведений о вине, перечисленных выше. При наличии возможности в дегустационном листе добавлять примечания и пояснения членам жюри по каждому образцу, данные результаты, к сожалению, не публикуются либо по причине их отсутствия, либо по причине их исключения в процессе обработки результатов конкурса.
Важным преимуществом конкурса «Russian Wines Competition 2018» является использование программного обеспечения, одобренного МОВВ (VinAgora), и независимого персонала для обработки дегустационных оценок, обеспечивающего как прозрачную процедуру подсчета, так и расширяющего возможности жюри в части дополнения дегустационных оценок вербальными характеристиками, аналитической информацией в численном и графическом виде.
Отдельное внимание уделено общности квалификационных признаков всех членов жюри, а также включению в конкурс специалиста-энолога для консультаций в случае выявления среди конкурсных образцов вин с дефектами.
На первый-второй…
Один из главных вопросов любого конкурса – репрезентативность выборки вин (по категориям, производителям, ассортименту, ценовому диапазону).
При взгляде со стороны на проведение подобных мероприятий всегда будут возникать вопросы о предвзятости, повышенном внимании и предпочтении определенных ценовых сегментов, узости охвата ценовых категорий вин, возраста вин, регионов их производства. В общем, корректном формировании выборки образцов вин для их оценки.
Правилами конкурса «Russian Wines Competition 2018» была установлена отметка в 180 наименований вин исключительно российского производства. Причем для достижения этой планки проводилась предварительная селекция из намного большего количества наименований – более 330.
К сожалению, имеющаяся аналитика доступна по меньшему количеству – 302 образцам вин (рис. 5). Однако неучтенные образцы лишь расширяют репрезентативность выборки образцов для конкурса «Russian Wines Competition 2018» и вносят свой вклад в увеличение количества наименований вин, ранжированных по различным показателям: категории (рис. 5), год урожая (рис. 7).
Рис. 5. Распределение российских вин на предварительной селекции конкурса «Russian Wines Competition 2018» по категориям
Предварительной селекции подверглись сопоставимые количества образцов тихих красных (135 наименований) и белых (133 наименования) вин. Доля игристых вин, принявших участие в отборе, была чуть выше 10% при сопоставимом количестве образцов игристых вин, произведенных традиционным и резервуарным методами (15 и 19 наименований соответственно).
После предварительной селекции практически вдвое уменьшился пул дегустационных образцов категории тихих белых вин (до 68 наименований) и немногим более 1,5-ра раз пул образцов категории тихих красных вин (до 85 наименований) (рис. 6).
Рис. 6. Распределение российских вин после предварительной селекции конкурса «Russian Wines Competition 2018» по категориям
В итоге в конкурсе «Russian Wines Competition 2018» приняли участие вина 37 российских производителей, в том числе в категории тихих красных вин – 31 российский производитель, в категории тихих белых вин – 33 российских производителя, в категориях игристых вин, произведенных традиционным и резервуарным методами, - по 7 производителей соответственно [11].
Возникает вопрос – почему так много тихих вин и так мало игристых (оба метода производства)? Предвзятость? Включение в конкурс для общей массы?
Можно подыскивать множество домыслов, но стоит обратить внимание на сторонние конкурсы. Какое у них положение дел?
Структура выборки вин по категориям на сторонних конкурсах, например, «Южная Россия 2018» [14], «Кубок СВВР 2017» [15], «Южная Россия 2017» [16] носит сопоставимый характер (рис. 7, 8, 9).
Основная категория в них – тихие вина (78-85% от общего числа конкурсных образцов), с примерно сопоставимым распределением образцов между красными и белыми винами. Доля игристых вин – 15-20% от общего количества образцов.
Рис. 7. Распределение российских вин конкурса «Южная Россия 2018» по категориям
Исключая из 226 образцов винодельческой продукции, представленных на конкурс «Южная Россия 2018» [14], категории ликерных вин, виноградных крепких напитков, дистиллятов, сидров, коньяков и бренди, а также вина, произведенные за пределами Российской Федерации, получаем совокупную выборку по аналогичным категориям тихих и игристых вин в 162 наименования и сопоставимое распределение образцов по категориям вин. То есть практически 85% представленных на конкурс «Южная Россия 2018» вин относятся к категории тихие (белые, красные, розовые). Исключение данного конкурса – отдельная категория «Тихие розовые вина».
В составе представленных на конкурс «Кубок СВВР 2017» [15] 185 наименований вин 14 образцов относились к разряду «реперных» и были произведены на территории Италии, Франции, Германии, Испании, в связи с чем они исключены из сравнительного анализа. Таким образом, на конкурсе «Кубок СВВР 2017» была проведена дегустационная оценка 171 образца российских вин, причем 80% представленных на конкурс образцов – категория тихих вин (белые и красные, рис. 8).
Рис. 8. Распределение российских вин конкурса «Кубок СВВР 2017» по категориям
После исключения фруктовых вин, коньяков, бренди, дистиллятов из результатов дегустационного конкурса «Южная Россия 2017», а также образцов вин, произведенных за пределами Российской Федерации (45 наименований), оставшийся пул дегустационных образцов вин сократился до 183 наименований вин с акцентом на категории тихих красных и белых вин (85% от представленных на конкурс образцов) (рис. 9).
Рис. 9. Распределение российских вин конкурса «Южная Россия 2017» по категориям
В части репрезентативности выборки и объемов наполнения категорий вин образцами для дегустационной оценки, рассмотренные дегустационные конкурсы проявляют завидное подобие и схожесть, но отличаются наличием или отсутствием категории тихих розовых вин. Причем количество оцениваемых образцов в рамках данной категории не превышает 10 наименований (погрешность 5%).
В зависимости от конкурса акцент, включающий 10-15 образцов вин, плавно перемещается между различными категориями.
Вина, принявшие участие в конкурсах, по совокупному количеству облюбовали диапазон 160-185 образцов.
В части выборки вин по категориям в конкурсах формируется скорее правило, отражающее реалии рынка российского вина.
«Ты чьих будешь?» Или пару слов о географии производства
К категориям не придерешься. Нестрашно, есть иной взгляд на конкурсы российских вин – через географию производства образцов.
Что с географией производства образцов у «Russian Wines Competition 2018»? Регионы производства образцов вин (после прохождения предварительной селекции) «Russian Wines Competition 2018» была представлены Краснодарским краем (105 наименований), Республикой Крым (37 наименований), Севастополем (26 наименований) и Ростовской областью (12 наименований) (рис. 10).
Рис. 10. Структура распределения российских вин конкурса «Russian Wines Competition 2018» по регионам производства
Дегустационные конкурсы «Южная Россия 2018», «Кубок СВВР 2017», исходя из пула вин в 162 и 171 наименование соответственно, отличаются акцентом на вина, произведенные в Краснодарском крае (рис. 11, 12). Как в относительных, так и в абсолютных единицах. При этом в конкурсе «Южная Россия 2018» присутствовали вина, произведенные в республике Абхазия (7 наименований), но полностью отсутствовали вина из Ростовской области. Республика Крым и Севастополь были представлены меньшим числом образцов.
Рис. 11. Структура распределения российских вин конкурса «Южная Россия 2018» по регионам производства
География регионов производства образцов вин дегустационного конкурса «Кубок СВВР 2017» была шире, по сравнению с конкурсом «Russian Wines Competition 2018», за счет вин, произведенных в Абхазии, Дагестане, Санкт-Петербурге (прочие регионы на диаграмме, рис. 12). Однако охват регионов производства, включающих Республику Крым, Севастополь и Ростовскую область, по количеству вин меньше суммарно на 29 наименований вин.
Рис. 12. Структура распределения российских вин конкурса «Кубок СВВР 2017» по регионам производства
Дегустационный конкурс вин «Южная Россия 2017» отличается от конкурса «Russian Wines Competition 2018» и других сравниваемых конкурсов меньшей выборкой вин, произведенных в Краснодарском крае (87 наименований), но большим в Ростовской области, а также присутствием на конкурсе вин из Волгоградской области (18 наименований).
Рис. 13. Структура распределения российских вин конкурса «Южная Россия 2017» по регионам производства
Сравнительное распределение образцов вин по регионам и различия между конкурсами по данному показателю нагляднее проследить в таблице 1.
Лидер, несомненно, Краснодарский край. Добавив к произведенным на его территории образцам вина из Республики Крым, Севастополя, Ростовской области, получим практически сформированный перечень наименований вин-участников конкурса. Далее можно добавлять в перечень единичные нюансы из иных регионов России, которые не могут похвастаться большими объемами производства вина, а также широким ассортиментом вин и большим количеством его производителей.
Таблица 1. Распределение вин по регионам на российских дегустационных конкурсах
Наименование региона | Количество образцов вин из региона на конкурсе: | |||
---|---|---|---|---|
Russian Wines Competition 2018* | Южная Россия 2018 | Кубок СВВР 2017 | Южная Россия 2017 | |
Краснодарский край | 105 | 117 | 119 | 87 |
Республика Крым | 37 | 23 | 26 | 28 |
Севастополь | 26 | 15 | 12 | 16 |
Ростовская область | 12 | - | 8 | 22 |
Волгоградская область | - | - | - | 18 |
Республика Абхазия | - | 7 | 3 | 6 |
Прочие регионы | - | - | 3 | 6 |
Итого: | 180 | 162 | 171 | 183 |
* - после проведения предварительной селекции
Резюмируя результаты сравнительного анализа дегустационных конкурсов 2017-2018 гг. «Russian Wines Competition 2018», «Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017» по категориям вин, количеству наименований и регионам их производства, не представляется возможным выявить какой-либо оптимальный подход к формированию выборки вин. Даже в рамках одного конкурса «Южная Россия», проведенного в разные годы прослеживаются кардинальные различия в формировании регионального среза российских вин и наполнения категорий. Уникальной формулы оптимального охвата ассортимента российских вин, произведенных в разных регионах, не существует.
С другой стороны, конкурс «Russian Wines Competition 2018» отличается явным преимуществом в формировании выборки вин по количеству охваченных наименований для проведения предварительной селекции.
О возрасте не спрашивают
Интересен и иной ракурс на выборку вин-участников конкурса - каким образом она распределяется по годам урожая?
Ранжирование выборки вин по годам урожая до проведения предварительной селекции и после ее проведения для конкурса «Russian Wines Competition 2018» представлено на рис. 14.
Рис. 14. Сравнительное распределение категорий российских вин «Russian Wines Competition 2018» по году урожая до и после предварительной селекции
В результате порядка 90% наименований вин по году урожая укладываются в 3-4-летнюю ретроспективу до проведения конкурса (включая вина без указания года урожая). За пределами данного диапазона ширина и глубина ассортимента российских вин резко сужаются. Указанное утверждение относится как к аналитическим данным по винам до проведения предварительной селекции, так и после ее проведения с формированием пула из 180 образцов.
Какие-либо намерения организатора по исключению образцов определенного года урожая по результатам предварительной селекции выявить не представляется возможным.
«Предселекционный» фильтр конкурса «Russian Wines Competition 2018» затронул все представленные на графике годы. Более того, вина некоторых российских производителей, относящиеся к условной категории дорогих вин, были допущены для участия в конкурсе без предварительной селекции.
Методология отбора вин после предварительной селекции представляла равные условия для включения в конкурсный лист вин каждого производителя, несмотря на возможное наличие дефектов и качество вин. Из трех групп вин, прошедших предварительную селекцию и ранжированных по диапазону оценок, проводился равный пропорциональный отбор.
Характер распределения вин по году урожая (рис. 14) конкурса «Russian Wines Competition 2018» можно было бы списать на огрехи организации выборки вин.
Однако такая ситуация является правилом как для сторонних конкурсов, так и для рынка российских вин в целом. Причем аналогичные тенденции прослеживаются в иных конкурсах российских вин – «Южная Россия 2018» [14] (рис. 15), «Кубок СВВР 2017 [15] (рис. 16), «Южная Россия 2017» [16] (рис. 17).
Рис. 15. Распределение категорий российских вин конкурса «Южная Россия 2018» по году урожая (количество образцов)
Практически 90% наименований вин по годам урожая в сравниваемых конкурсах так же укладываются в аналогичный ретроспективный временной диапазон до проведения конкурса. Отличия – в смещении акцента на конкурсе «Южная Россия 2018» на молодые вина урожая 2017 года с резким падением количества образцов за пределами 2-хлетней временной ретроспективы по году урожая.
Различия в количестве образцов 2017 года урожая объяснимы разными подходами в поступлении образцов на дегустационный конкурс. В случае конкурса «Russian Wines Competition 2018» – самостоятельный поиск и закупка организаторами вин в рознице при их наличии и поступлении в продажу до момента проведения конкурса в период февраль-апрель 2018 года (период проведения конкурса – конец мая 2018 года). Многие вина 2017 года урожая физически отсутствуют в розничной продаже. В случае конкурса «Южная Россия 2018» - предоставление вин производителями лично, возможно раньше фактического поступления вин в продажу (период проведения конкурса – конец апреля 2018 года).
Анализируя результаты даже одного конкурса «Южная Россия», проведенного в разные годы (2017-2018 гг., период проведения – конец апреля), можно увидеть кардинальные различия в распределении образцов вин по годам. Особенно в отношении образцов вин года урожая, предшествующего году проведения конкурса.
Рис. 16. Распределение категорий российских вин конкурса «Южная Россия 2017» по году урожая (количество образцов)
Анализ распределения вин по году урожая конкурса «Кубок СВВР 2017» показал схожую тенденцию с рассмотренными выше конкурсами (рис. 17).
Рис. 17. Распределение категорий российских вин конкурса «Кубок СВВР 2017» по году урожая (количество образцов)
Рассмотренные конкурсные выборки российских вин, ранжированные по годам урожая, для наглядности сведены в таблицу 2.
Таблица 2. Распределение вин по годам на российских дегустационных конкурсах
Наименование показателя / Год урожая | Количество образцов российских вин года урожая на конкурсе: | ||||
---|---|---|---|---|---|
Russian Wines Competition 2018* | Russian Wines Competition 2018** | Южная Россия 2018 | Кубок СВВР 2017 | Южная Россия 2017 | |
Период проведения | Февраль-апрель 2018 г. | Конец мая 2018 г. | Конец апреля 2018 г. | Середина октября 2017 г. | Конец апреля 2017 г. |
Без указания года урожая | 27 | 13 | 8 | - | 9 |
2017 | 10 | 6 | 57 | 3 | - |
2016 | 87 | 53 | 53 | 67 | 39 |
2015 | 88 | 46 | 25 | 48 | 85 |
2014 | 59 | 38 | 15 | 31 | 39 |
2013 | 11 | 10 | 3 | 9 | 4 |
2012 | 10 | 8 | 1 | 8 | 4 |
2011 | 8 | 4 | - | 2 | 3 |
2010 | 1 | 1 | - | 2 | - |
2009 | - | - | - | 1 | - |
2008 | 1 | 1 | - | - | - |
Итого: | 302 | 180 | 162 | 171 | 183 |
* - до проведения предварительной селекции (частичные данные по количеству образцов)
** - после проведения предварительной селекции
Резюмируя аналитику конкурсов с точки зрения распределения вин по году урожая можно заключить, что вина длительной выдержки, превышающей 3-4-летний период, представлены буквально в единичном количестве. На фоне плавающей величины объема потребления вина на душу населения и общей экономической ситуации в стране данный фактор скорее отражает отсутствие внимания российских производителей к производству вин длительного срока выдержки.
Основной акцент на конкурсах российских вин приходится на вина, год урожая которых укладывается в 3-4-летний ретроспективный период до проведения конкурса. Доля таких вин – 85-90% от общего числа образцов, принявших участие в конкурсной дегустации.
Более того, результаты закупки вин в розничной продаже (специализированные магазины) организаторами конкурса «Russian Wines Competition 2018» в объеме, превышающем потребности конкурса (180 наименований российских вин), лишь поддержали указанный вывод.
Присутствие на конкурсах образцов молодых вин (года урожая, предшествующего году проведения конкурса) зависит от выбора организатором периода проведения конкурса в течение года и готовности на указанный момент к поступлению в розницу или наличия в рознице данных вин (при условии переработки производителями винограда в предшествующий сезон и производства из него вина).
Соотношение вин по годам варьируется и скорее ограничено общим количеством вин, принимающих участие в конкурсе.
В случае предоставления образцов вин на конкурс производителями, формирование пула конкурсных образцов сводится к принципу «что и какое вино предоставили, то и участвует», с учетом регламентных ограничений в каждом конкурсе. При этом главным фактором в таких конкурсах выступает общее количество образцов, принимающих участие в конкурсе.
Ментальная арифметика цен
Принципиальная закупка вин в рознице без участия производителей при организации конкурса «Russian Wines Competition 2018» является сильной стороной данного конкурса. Соответственно, доступна информация о ценах вин, прошедших предварительную селекцию.
К сожалению, сторонние конкурсы такими данными не располагают в связи с иной идеологией их организации – получение вин от производителей «из рук в руки». Стоимость вина, как показатель, в таком случае становится абсолютно лишним.
В этой связи взглянем сквозь ценовую призму только на выборку вин из розницы для конкурса «Russian Wines Competition 2018» (рис. 18, количество образцов – до проведения предварительной селекции) и ограничимся только указанным конкурсом.
Рис. 18. Гистограмма распределения вин конкурса «Russian Wines Competition 2018» по стоимости (до предварительной селекции, сплошная линия – кривая логнормального распределения)
С точки зрения математики, цена не может принимать отрицательные значения, но изменяется от «0» до «∞», поэтому анализ таких данных проводится с учетом исключения возможности получения результатов с отрицательными значениями.
Распределение вин по стоимости является классическим примером известного в статистике «логнормального закона распределения» - график с большим пиком области низкой цены и пологим ниспадающим склоном в область увеличения цены (на рис. 18 обозначен кривой красного цвета). Похожим образом распределяются цены на многие товары и услуги. Вино в данном случае не исключение.
Рассматривая таким образом ценовой показатель, можно увидеть перекосы в части предпочтения или игнорирования организатором конкурса определенных ценовых сегментов.
Рис. 19. Сравнительное распределение вин «Russian Wines Competition 2018» по стоимости (до и после предварительной селекции)
Как до, так и после проведения предварительной селекции распределение вин по стоимости носит схожий характер. Особых намерений организатора конкурса к исключению вин определенных ценовых сегментов не прослеживается. Более того, вина премиальных ценовых сегментов приняли участие в конкурсе без прохождения предварительной селекции.
Изменчивость стоимости вин визуально удобно анализировать с использованием инструмента описательной статистики – диаграммы размаха (ее иное название «ящик с усами»). Построение такой диаграммы позволяет отобразить средние значения стоимости вин (медиана), степень разброса значений относительно среднего значения стоимости, минимальные и максимальные значения, выбросы и экстремальные значения стоимости (рис. 20).
Рис. 20. Диаграмма размаха стоимости вин конкурса «Russian Wines Competition 2018»
Примечательно, что половина всех конкурсных образцов имеет стоимость в пределах 1000 рублей, то есть вполне доступна значительному числу российских потребителей. В то же время для 75% образцов верхняя граница ценового диапазона упирается в значение 1750 рублей.
Если рассматривать показатель стоимости всей выборки вин, то, начиная с отметки 3500 рублей и выше, вплоть до самого дорогого образца конкурса (около 9000 рублей), ценообразование данных вин можно назвать нестандартным, неестественным или аномальным (необычная природа данных стоимости вина; данные величины нельзя списать на ошибочные, так как стоимость установлена и документально подтверждена). В этой связи данные цены являются выбросами, а начиная со стоимости вина от 5490 руб. и выше, до максимального значения (8790 руб.) - еще и экстремальными значениями, так как резко выделяются из общей выборки цен.
Вина с указанной стоимостью относятся к следующим производителям: Uppa Winery, Винодельня Ведерниковъ, Дом Захарьиных, Лефкадия.
Однако такой подход в рассмотрении стоимости вин является наиболее общим. Одним из возможных вариантов аналитики – сопоставление стоимости образцов вин, сгруппированных по идентичному сортовому составу.
Учитывая, что образцы вин неравнозначны между собой хотя бы по году урожая, данные о стоимости лучше сгруппировать по образцам одного года урожая (рис. 21).
Рис. 21. Диаграмма распределения стоимости вин конкурса «Russian Wines Competition 2018» по категориям и году урожая
В результате восприятие стоимости меняется – в рамках одного года урожая (речь в основном о периоде 2012-2016 гг.) предприняты усилия к включению в выборку вин образцов разных ценовых сегментов. Оставшиеся периоды до 2012 года не могут похвастать физическим наличием значительного числа наименований вин в рознице (доля наименований, попавших на предварительную селекцию, еле достигла отметки 3% от общего количества образцов!).
Дальнейший анализ распределения стоимости вин конкурса «Russian Wines Competition 2018» по году урожая удобнее проводить с использованием упомянутой выше диаграммы размаха (рис. 22).
Рис. 22. Диаграмма размахов стоимости вин конкурса «Russian Wines Competition 2018» с учетом года урожая
Представленные результаты позволяют проводить сравнительный анализ стоимости вин разных годов урожая между собой, демонстрируют средние значения (медианы) стоимости вин каждого рассматриваемого года урожая, а также стоимости иных отдельных образцов вин, попадающих с точки зрения статистики в категорию выбросов и экстремальных значений. Однако данный анализ вполне потянет на отдельную тему. Можно отметить, что в выборке значений цены следующих годов урожая – 2013, 2014, 2015, 2016 присутствуют наименования вин, стоимость которых крайне резко отличается от стоимости вин в каждой из указанных групп.
Один из результатов – рост среднего значения стоимости данной выборки вин с увеличением года урожая вплоть до 2012 года (справочно: 2017 г. – 595 рублей; 2016 г. – 700 рублей; 2015 г. – 1.082,5 рублей; 2014 г. – 1.750 рублей; 2013 г. – 1.635 рублей; 2012 г. – 3.992 рубля). Период с 2008 по 2011 год содержит предельно малое количество значений стоимости, пригодных для проведения достоверного сравнительного анализа.
Главный вывод такого долгого рассмотрения «ценового вопроса» конкурса - в пределах года урожая при выборе образцов для участия в конкурсе «Russian Wines Competition 2018» обеспечен, по возможности, широкий охват вин из различных ценовых сегментов. Иными словами, закупка вин в рознице стимулирует к формированию репрезентативной по цене выборке вин для участия в конкурсе.
Когнитивный диссонанс винной сенсорики
Перед тем как рассмотреть результаты конкурса, следует отметить одно важное «Но». Исключение. В процессе конкурсной дегустации «Russian Wines Competition 2018» жюри исключило из дегустационной оценки 17 образцов вин по причине наличия в них явных дефектов с высокой концентрацией, при которой не представлялось возможным оценить вино [12].
Как отмечено организатором, обнаружение дефекта влекло за собой открытие второй резервной бутылки для повторного подтверждения его наличия. В случае повторного обнаружения дефекта в резервной бутылке на голосование судей выносилось предложение о снятии вина с конкурса. Причем решение о снятии вина с конкурса всегда принималось единогласно всеми судьями. Особенностью конкурса является присутствие консультанта по вопросам виноделия (энолога) без вхождения в состав жюри, с которым проводилось согласование и подтверждение наличия дефектов.
Таким образом, дефекты были зафиксированы всеми членами жюри (использовалось программное обеспечение VinAgora, содержащее в том числе вербальные дескрипторы всех возможных дефектов вина).
Все отмеченные дефекты, ранжированные по частоте их упоминания членами жюри, представлены на рис. 23.
Рис. 23. Вербальные характеристики дефектов, выявленные в исключенных образцах вин (по частоте упоминания)
Перечисленные дефекты, к сожалению, своим происхождением обязаны исключительно производству (виноградник, винодельня). С нарушением условий транспортировки и хранения, неправильным обращением с вином в рознице они не связаны.
Рассмотрение распределения стоимости исключенных вин (рис. 24) позволяет заключить - исключения коснулись всех ценовых сегментов.
Рис. 24. Диаграмма распределения стоимости исключенных вин конкурса «Russian Wines Competition 2018» по категориям и годам урожая
Установить какое-либо намеренное исключение вин определенного ценового диапазона организаторами не представляется возможным.
Так, среди исключенных образцов 9 наименований относились к ценовому сегменту до 1500 рублей, 8 наименований – к ценовому сегменту свыше 1500 рублей. Наибольшее количество исключенных образцов относилось к 2015 году урожая – 7 наименований тихих как белых, так и красных вин.
Какие-либо намерения организатора по исключению из конкурсной оценки определенных образцов вин не прослеживаются.
Качество и цена в состоянии холодной войны
Самая интересная часть любого конкурса – балльные оценки вин. Их прикладное значение – поиск сакрального соотношения «цена/качество» и наличия ожидаемой зависимости между ростом стоимости вина и его балльной оценки.
Результаты конкурса «Russian Wines Competition 2018» наглядно показали, что какая-либо, даже слабая, связь между качеством вина (балльной оценкой/рейтингом) и его стоимостью отсутствует. Отсутствует как класс, балльная оценка связана со стоимостью вин только одним соотношением – хаотическим (рис. 25).
Рис. 25. Соотношение между итоговой балльной оценкой вин и их стоимостью по итогам конкурса «Russian Wines Competition 2018»
Применение статистических методов не способствовало выявлению зависимости, пусть даже самой слабой.
Причем даже внутри представленных на конкурс категорий вин (белые, красные, игристые) не прослеживается связь между показателями балльной оценки вин и их стоимостью, например, коэффициенты корреляции (R) между ними меньше значения 0,1 (рис. 26, линия регрессии, уравнение регрессии, коэффициенты корреляции, детерминации, а также статистические критерии, подтверждающие значимость коэффициента корреляции не приводятся). Справочно – коэффициент корреляции показывает тесноту связи между двумя величинами, чем он ближе к 1, тем зависимость между величинами теснее.
Рис. 26. Соотношение между итоговой балльной оценкой вин и их стоимостью (с группировкой вин по конкурсным категориям)
Наглядное представление результатов работы жюри позволяет в очередной раз с уверенностью развенчать один из популярных мифов о якобы существующей зависимости между качеством вина (оцененным в баллах органолептическими характеристиками) и его стоимостью.
Например, некоторые вина, имеющие стоимость ниже отметки 1000-1500 рублей, были оценены выше вин, стоимость которых превосходит планку 2000 рублей.
Одной из гипотез может являться обнаружение намечающейся связи между ценой и качеством вина (балльной оценкой/рейтингом) в группе вин из одного сорта или идентичных сортов винограда. Однако для подтверждения данной гипотезы необходима более обширная выборка вин в пределах сорта/идентичных сортов винограда.
Отсутствие явной зависимости между ценой и качеством вина (балльной оценкой/рейтингом) не только один из скрытых результатов конкурса «Russian Wines Competition 2018», но и гораздо более обширная проблема мирового рынка вина. Достаточно много попыток предпринято в надежде ее преодоления [17-22]. Даже проведен анализ более 180 существующих различных моделей, связывающих стоимость вина с балльной оценкой/рейтингом [23]. На данный момент результаты не обнадеживают и поиски моделей, адекватно связывающих стоимость вина с балльной оценкой/рейтингом, продолжаются.
Тем не менее, в некоторых зарубежных исследованиях можно встретить намечающиеся зависимости между рейтингом и стоимостью вина (причем до 30% балльной оценки вин обусловлено вкладом фактора стоимости вина). Такая ситуация, с одной стороны, отражает положительное влияние рейтинга на стоимость вина, когда цена «подтягивается» за рейтингом. С другой стороны, демонстрирует частичное влияние стоимости вина на его финальную оценку.
Из всех вин, принявших участие в конкурсе «Russian Wines Competition 2018», данные о балльных оценках для выборки из 76 образцов конкурса с подтвержденной стоимостью (из них 70 образцов с оценками, 6 образцов без оценок и исключены по причине наличия дефектов) также были представлены в составе Авторского гида А. Саркисяна «Российские вина 2017-2018» [6]. К сожалению, в указанном гиде сведения о рекомендованной или розничной стоимости данных образцов отсутствуют.
Принимая во внимание объем выборки вин (76 идентичных образцов) и наличие подтвержденных сведений о розничной стоимости вин, приобретенных в рознице в рамках конкурса «Russian Wines Competition 2018» [11], представляется возможным провести сравнительный анализ зависимости балльной оценки идентичных вин как по Авторскому гиду А. Саркисяна «Российские вина 2017-2018» [6] (рис. 27), так и по результатам конкурса «Russian Wines Competition 2018» [11] (рис. 28) с данными о стоимости вин (по состоянию на 1-2 кв. 2018 г.).
Рис. 27. Соотношение между балльной оценкой вин (по Авторскому гиду А. Саркисяна «Российские вина 2017-2018» [6]) и их розничной стоимостью (по состоянию на 1-2 кв. 2018 г. [11])
Следует отметить различия в подходах к проведению дегустаций: на конкурсе «Russian Wines Competition 2018» [11] – слепая, с шифрованием образцов и участием 9 членов жюри, при составлении Авторского гида «Российские вина 2017-2018» А. Саркисяном [6] – открытая, с участием автора гида.
Между балльной оценкой 76 образцов вин по Авторскому гиду А. Саркисяна «Российские вина 2017-2018» [6] и их стоимостью выявлена связь, причем фактор стоимости вина более чем на 30% обусловливает балльную оценку (рис. 27, коэффициент корреляции 0,61, теснота связи средняя, коэффициент детерминации 0,37). Полученные результаты дополняют выводы ряда зарубежных исследований о положительном влиянии рейтинга на стоимость вина и/или положительном влиянии стоимости вина на его финальную оценку, но уже применительно к выборке российских вин.
Связь для тех же образцов вин между балльной оценкой, полученной на конкурсе «Russian Wines Competition 2018», и их стоимостью отсутствует (рис. 28). Фактор стоимости менее чем на 2% обусловливает балльную оценку (коэффициент корреляции 0,14, связь отсутствует, коэффициент детерминации 0,019).
Рис. 28. Соотношение между балльной оценкой вин (конкурс «Russian Wines Competition 2018») и их розничной стоимостью (по состоянию на 1-2 кв. 2018 г. [11])
Как было отмечено выше, при упоминании работ [7-9, 17-23], основная тенденция мирового винного рынка, с точки зрения цены и рейтингов, – отсутствие связи между данными показателями. Результаты конкурса российских вин «Russian Wines Competition 2018» лишь подтверждают ее.
Итоговые оценки выборки идентичных вин как конкурса «Russian Wines Competition 2018», так и Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] выставлялись по сопоставимой 100-балльной шкале. При этом оценки выборки 70 образцов идентичных вин в целом были выше по данным указанного выше гида [6] по сравнению с данными конкурса «Russian Wines Competition 2018» (рис. 29, 30).
Рис. 29. Соотношение между балльными оценками выборки идентичных вин по данным Авторского гида А. Саркисяна «Российские вина 2017-2018» и конкурса «Russian Wines Competition 2018»
Балльные оценки вин конкурса «Russian Wines Competition 2018» компактно сгруппированы вокруг среднего значения – медианы (82,53 балла), 50% всех оценок выборки вин распределились практически симметрично в диапазоне 2,78 балла вблизи среднего значения. Медиана балльных оценок идентичных сравниваемых вин Авторского гида А. Саркисяна «Российские вина 2017-2018» смещена в область более высоких оценок и составляет 85,0 баллов. При этом 50% всех оценок выборки распределились несимметрично в более широком диапазоне, составляющем 4 балла (25% на промежутке 1 балл, 25% на промежутке 3 балла).
Учитывая, что корреляции между группами балльных оценок нет, выбросы оценок соответствуют различным образцам. Так, выброс оценки 95 баллов Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] соответствует оценке 83,13 балла конкурса «Russian Wines Competition 2018». И, наоборот, выброс балльной оценки 91,22 балла конкурса «Russian Wines Competition 2018» соответствует оценке 83 балла Авторского гида А. Саркисяна «Российские вина 2017-2018» [6]. Схожая ситуация и в отношении остальных выбросов.
В обоих случаях в выборке из 70 образцов присутствуют вина, чья балльная оценка резко отличается от усредненной величины, выделяя их на фоне всех образцов своим качеством.
Рис. 30. Сравнительная диаграмма размахов балльных оценок выборки идентичных вин по данным конкурса «Russian Wines Competition 2018» и Авторского гида А. Саркисяна «Российские вина 2017-2018»
Разные виды диаграммы размахов связаны, в том числе с явно выраженными достоинствами и недостатками одного дегустатора в сравнении с группой дегустаторов, чьи индивидуальные достоинства и недостатки нивелированы другими членами, входящими в состав группы. На данный фактор обращают внимание некоторые нормативные документы, действующие на территории РФ [30].
Рассматривая результаты поиска связи между различными мировыми рейтингами вин [7-9], как и в случае указанных работ, возникает интерес сопоставления для идентичных вин балльных оценок, полученных в рамках различных дегустационных мероприятий – конкурса «Russian Wines Competition 2018» и при создании Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] (рис. 31). Анализ показал полное отсутствие какой-либо связи между оценками двух данных источников. Однако при сравнении в зарубежных исследованиях мировых рейтингов друг с другом связи с различной степенью тесноты наблюдалась (коэффициенты корреляции изменялись от 0,35 до 0,77) [9].
Основные причины в таких различиях следует искать в различных периодах проведения дегустации вин (с течением времени вино эволюционирует с изменением органолептических показателей), подходах к критериям отбора и формирования состава жюри, организации дегустаций, их проведению, получению результатов с учетом влияния внешних факторов.
Рис. 31. Соотношение между балльными оценками выборки идентичных вин конкурса «Russian Wines Competition 2018» и Авторского гида А. Саркисяна «Российские вина 2017-2018»
Распределяй и властвуй – еще один способ «побалловаться»
Итоговый балл складывается из суммы баллов, выставленных за каждый органолептический показатель, причем баллы являются безразмерными величинами и не привязаны к каким-либо стилям, категориям вин.
Один из подходов к оценке надежности и точности информации, полученной от экспертов в виде рейтинга/балльной оценки, является построение распределения указанного показателя. Такой подход используется, в том числе, при сравнительном анализе рейтингов, присвоенных винам различными известными винными критиками, экспертными группами винных конкурсов, журналов [17-23], даже группами потребителей с использованием популярного приложения «Vivino» [24].
Как правило, кривая распределения балльных оценок в данных исследованиях рейтингов имела один максимум, одну вершину – моду. Иначе говоря, каждая из совокупностей рейтингов в исследованиях унимодальна.
С учетом данных факторов, возможно провести группировку итоговых оценок образцов вин конкурс «Russian Wines Competition 2018» с построением графика распределения оценок – гистограммы распределения (рис. 32).
Рис. 32. Гистограмма распределения балльных оценок вин конкурса «Russian Wines Competition 2018» (сплошная линия – кривая нормального распределения)
Распределение балльных оценок вин конкурса «Russian Wines Competition 2018» так же оказалось унимодально (аппроксимируется кривой нормального закона распределения, гипотеза о нормальном законе распределения оценок подтверждается статистическими критериями).
Усредненное значение всей совокупности оценок вин конкурса составляет 82,22 балла (медианное значение, совокупность оценок имеет асимметрию с коэффициентом 0,63), то есть в распределении балльных оценок чаще встречаются оценки меньше усредненной оценки, иными словами, среди вин больше количество образцов с качеством ниже усредненного показателя по конкурсу.
Данный факт можно было бы интерпретировать как настороженность жюри в отношении вин, произведенных из автохтонных сортов винограда. Однако существенная доля таких вин (порядка 50%) получила балльную оценку, превышающую общую усредненную балльную оценку вин конкурса. В результате связывать с предвзятостью или настороженностью членов жюри в отношении некоторых российских вин такое поведение балльных оценок не следует, необходимо искать иные причины и факторы, повлиявшие на их асимметрию.
С учетом доминирования на конкурсе «Russian Wines Competition 2018» вин, произведенных из международных сортов винограда, такой характер распределения балльных оценок с преобладанием образцов, качество которых ниже усредненной балльной оценки, скорее объективно отражает реальное качество и уровень произведенных из них в России вин.
Кроме того, минимальный проходной балл в медальный диапазон – 83, однако значительное число образцов по оценкам распределено в диапазоне меньше 82 баллов.
Характер распределения балльных оценок также обусловлен жесткой регламентацией уровней изменения каждого органолептического показателя, входящего в состав балльной оценки (дегустационный лист МОВВ).
Для сравнения полезно привести аналогичные графики-гистограммы распределения балльных оценок вин сторонних конкурсов российских вин «Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017» (рис. 33, 34, 35).
Рис. 33. Гистограмма распределения балльных оценок вин конкурса «Южная Россия 2018»
Рис. 34. Гистограмма распределения балльных оценок вин конкурса «Южная Россия 2017»
Рис. 35. Гистограмма распределения балльных оценок вин конкурса «Кубок СВВР-2017»
Распределение балльных оценок указанных конкурсов имеет схожий характер – унимодальность с наличием асимметрии в распределении оценок. Однако асимметрия направлена в противоположную сторону и является следствием преобладания образцов вин с качеством, превосходящим усредненную балльную оценку каждого из конкурсов в отдельности (таблица 3).
С точки зрения статистики несимметричная форма распределения образуется при невозможности достижения крайнего значения, теоретическом регулировании одной из границ распределения с отсортировкой результатов за ее пределами (например, медальные диапазоны), физическом запрете получения данных за пределами одной из границ распределения, преобладающим влиянием какой-либо систематической причины (как вариант, различные дегустационные комиссии при оценке категорий вин).
В качестве границ распределения выступают медальные и наградные диапазоны, поэтому распределения балльных оценок следует рассматривать во взаимоувязке с регламентированными медальными диапазонами конкурсов (таблица 3).
Таблица 3. Медальные диапазоны конкурсов российских вин
Вид награды | Russian Wines Competition 2018 | Южная Россия 2017-2018 | Кубок СВВР 2017 | Рекомендации МОВВ [1] |
---|---|---|---|---|
Гран При, балл | Х | ≥92 (не ниже 89) | НД | ≥92 |
Золотая медаль, балл | ≥94 | ≥86 | НД | ≥85 |
Серебряная медаль, балл | ≥88 | ≥83 | НД | ≥82 |
Бронзовая медаль, балл | ≥83 | ≥81 | НД | ≥80 |
Лимит по наградам, % | 30 | 30 | 30 | 30 |
НД – нет данных.
В отношении условий награждения вин конкурса «Кубок СВВР 2017» информация в явном виде отсутствует, можно сделать косвенные предположения о схожести медальных диапазонов с рекомендациями МОВВ и конкурсом «Южная Россия».
Конкурс «Russian Wines Competition 2018» имеет боле жесткие критерии к медальному диапазону. Даже в сравнении с рекомендациями МОВВ [1] проходные баллы для получения бронзовой, серебряной и золотой медалей выше на 3, 6, 9 баллов соответственно, что в целом является несомненным плюсом, повышает ценность наград и сокращает массовость их получения. При этом отсутствует такой вид награды, как «Гран При».
Резкое различие форм распределения балльных оценок прослеживается при сравнении идентичных выборок 70 образцов вин конкурса «Russian Wines Competition 2018» и Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] (рис. 36, 37).
В случае балльных оценок выборки идентичных вин Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] (рис. 36) скос с левой стороны обусловлен установлением нижней границы балльной оценки, составляющей 82 балла. Такая форма распределения (не аппроксимируется кривой нормального закона распределения, гипотеза о несоответствии ему подтверждается статистическими критериями) может быть обусловлена, с одной стороны, присуждением балльных оценок, округленных до целого числа, отсутствием жестко регламентированных дискретных значений каждого органолептического показателя, входящего в состав балльной оценки. С другой стороны, связаны с работой одного дегустатора, чьи сильные и слабые стороны не уравновешены иными дегустаторами (в связи с их отсутствием), его личным мнением, проведением открытой дегустации.
Кроме того, вероятной причиной «ненормальности» распределения балльных оценок выборки вин Авторского гида А. Саркисяна «Российские вина 2017-2018» [6] может являться наложение нескольких распределений, каждое из которых имеет свои меры среднего уровня (медиана, среднее значение, мода), например, отдельное распределение балльных оценок меньшей выборки вин из области свыше 86 баллов (уровень «золото» и следующий за ним «Гран При»).
В любом случае такой характер распределения балльных оценок выборки идентичных 70 образцов вин Авторского гида А. Саркисяна «Российские вина 2017-2018» [6], отличный от характера распределения балльных оценок идентичной выборки конкурса «Russian Wines Competition 2018», а также резкого отличия от характера распределения балльных оценок иных конкурсов – «Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017», требует отдельного детального изучения.
Рис. 36. Гистограмма распределения балльных оценок идентичной выборки вин Авторского гида А. Саркисяна «Российские вина 2017-2018» [6]
Характер распределения балльных оценок идентичных образцов конкурса «Russian Wines Competition 2018» (рис. 37) схож с рассмотренным выше распределением бальных всех конкурсных вин (рис. 32). При этом меры среднего уровня (медиана, среднее значение) между выборками 70 образцов и 163 образца различаются лишь в десятых долях балла. В данном случае характер распределения оценок характеризуется работой конкурсной комиссии, в которой сильные и слабые стороны каждого отдельного члена жюри нивелируются остальными членами жюри, слепой дегустацией зашифрованных образцов вин, жесткой регламентацией уровней изменения каждого органолептического показателя, входящего в состав балльной оценки (дегустационный лист МОВВ).
Рис. 37. Гистограмма распределения балльных оценок идентичной выборки вин конкурса «Russian Wines Competition 2018»
Конкурсы помимо усредненных балльных оценок, асимметрии их распределения отличаются размахом между минимальной и максимальной балльными оценками (таблица 4). Чем меньше размах, тем больше наименований вин группируется вокруг усредненной балльной оценки, и наоборот. Усредненная оценка российских вин на конкурсах пока не превышает 85 баллов.
Таблица 4. Статистические показатели конкурсов российских вин
Меры среднего уровня и рассеяния | Russian Wines Competition 2018 | Южная Россия 2018 | Кубок СВВР 2017 | Южная Россия 2017 |
---|---|---|---|---|
Общее количество балльных оценок | 163 | 162 | 171 | 183 |
Медиана, балл | 82,2 | 82,7 | 83,8 | 83,4 |
Мода, балл | 83,0 | 81,0 | 83,8 | 84,5 |
Среднее значение, балл | 82,2 | 82,4 | 83,4 | 82,7 |
Дисперсия | 7,9 | 13,0 | 3,9 | 17,3 |
Стандартное отклонение | 2,8 | 3,6 | 2,0 | 4,2 |
Эксцесс | 1,7 | 1,1 | 1,0 | 2,3 |
Асимметрия | 0,6 | -0,5 | -0,8 | -1,0 |
Размах, баллов | 18,1 | 22,3 | 11,2 | 28,3 |
Минимум | 74,4 | 70,0 | 76,8 | 63,6 |
Максимум | 92,6 | 92,3 | 88,0 | 91,8 |
В графическом виде данные таблицы 4 выглядят следующим образом (рис. 38).
Наличие выбросов и экстремальных значений балльных оценок связано с группой образцов вин с резко отличающимся качеством от всей выборки вин, их балльная оценка резко отличается от усредненной величины (что также может являться следствием закона распределения балльных оценок).
Рис. 38. Сравнительная диаграмма размахов балльных оценок конкурсов российских вин
Тем ценнее видеть явных лидеров конкурса «Russian Wines Competition 2018», оценки которых превышают уровень 87 баллов, в то время как оценки 50% образцов вин сконцентрированы вокруг усредненного балла в диапазоне от 80,67 до 83,25 баллов (размах - 2,58 балла). Попадание единичных образцов в область свыше 87 баллов обусловлено с одной стороны качеством данных образцов, с другой – жесткими критериями к медальному диапазону.
Явные аутсайдеры конкурса (вина с балльными оценками, выходящими за пределы диаграммы размаха в области низких баллов) получили оценки ниже 76 баллов, тем самым так же резко выделяются из всей выборки вин.
В сторонних конкурсах так же присутствуют явные лидеры (Гран При «Южная Россия 2018», вино с балльной оценкой, выходящее за пределы диаграммы размаха в области высоких баллов) и аутсайдеры (вина с балльными оценками, выходящими за пределы диаграммы размаха в области низких баллов). В конкурсе «Кубок СВВР 2017» присутствовали «реперные» образцы вин зарубежного производства (исключены из анализа), однако их оценки превысили отметку 88 баллов, на диаграмме размахов данные образцы заняли бы место выбросов.
Более глубокий анализ качества оценок отдельных органолептических показателей в структуре общей балльной оценки, анализ согласованности мнений членов жюри, выявление наличия выбросов и экстремальных значений в оценках образцов вин требует доступа к данным дегустационных листов по каждому образцу.
Наличие таких данных в открытом доступе обеспечивает полную прозрачность и открытость любого конкурса.
Шаг в данном направлении сделан организаторами конкурса «Russian Wines Competition 2018» - для всех образцов от членов жюри получена информация о винах, которая систематизирована и подготовлена в виде комплексных листов оценки вин, содержащих отдельные оценки по органолептическим показателям вин, формирующих общую балльную оценку, а также дополнительная информация в виде дескрипторов вкуса и аромата (в числовом, вербальном, графическом представлении). В качестве примера данный лист был приведен на рис. 4 (пример листа опубликован организатором [10]).
Учитывая объем статьи, из нее были исключены аналитические данные по распределению балльных оценок рассматриваемых конкурсов по категориям вин и годам урожая, диаграммы размахов балльных оценок по годам урожая, а также рассчитанные статистические показатели.
Кратко резюмируя сказанное, можно отметить, что при проведении конкурса «Russian Wines Competition 2018» отбор образцов вин затронул все ценовые сегменты.
Для российских вин какая-либо даже слабая зависимость между стоимостью и качеством отсутствует.
Не обошлось без исключений образцов по причине наличия в них дефектов с высокой концентрацией (при которой не представлялось возможным оценить вина), подтвержденных всеми членами жюри и консультантом-энологом. Природа дефектов связана с производственными процессами и их источник – виноградник и/или винодельня. Из всех конкурсных образцов дефектов, связанных с неправильным хранением вина в рознице не выявлено.
Статистический анализ балльных оценок конкурсных выборок вин позволяет выявить общий уровень качества вин, тенденции его изменения, а также исследовать характер поведения балльных оценок. Дальнейшее направление работы за рамками данной статьи – проведение анализа в увязке с дополнительными характеристиками вина (сортовой состав, год урожая и т.д.).
Отсутствие данных относительно оценок каждого члена жюри, выставленных каждому образцу в рассматриваемых конкурсах, не позволяет более глубоко развить статистический анализ балльных оценок каждого конкурса, а также провести анализ работы жюри.
Победители получают все
Условиями конкурса «Russian Wines Competition 2018» был установлен следующий диапазон баллов, позволяющий претендовать оцениваемым винам на медали [25]
- 83-87 баллов – бронзовая медаль;
- 88-93 балла – серебряная медаль;
- 94-100 баллов – золотая медаль.
В то же время лимит по наградам был ограничен 30% от общего количества вин, принимавших участие в конкурсе, начиная с наивысшего полученного балла (в соответствии с рекомендациями МОВВ). То есть потенциально на награды могли претендовать, в случае попадания в установленные диапазоны, 54 наименования вин.
По причинам наличия дефектов с концентрацией, превышающей порог восприятия, выявленных в процессе дегустации, из 180 прошедших предварительную селекцию вин, участвовавших в конкурсе, выбыло 17 наименований вин.
Однако по итогам конкурса число претендентов на награды оказалось меньше – 45 наименований (27,6% от количества вин, принявших участие в конкурсе). Учитывая, что нижний проходной балл (83,0) получили 20 наименований вин, количество образцов, претендующих на награды составило бы 65. Такое число победителей нарушало 30%-ный лимит, в связи с чем, в целях его сохранения указанные 20 равнозначных по балльной оценке наименований вин были исключены из списка претендентов на награду – бронзовую медаль.
Попытка выявить значимую связь между качеством вина (балльной оценкой/рейтингом) и его стоимостью для вин, получивших награды по итогам конкурса «Russian Wines Competition 2018», как и в случае всех образцов, успеха не принесла - даже слабая связь отсутствовала (рис. 39).
Рис. 39. Соотношение между итоговой балльной оценкой вин, получивших награды и их стоимостью (с группировкой по конкурсным категориям)
Стоимость конкурсных вин, получивших награды, изменяется в широких диапазонах, затрагивая разные ценовые сегменты, и снова без определенных преференций какому-то определенному диапазону/сегменту. График распределения стоимости вин-победителей по годам урожая наглядно демонстрирует данный факт (рис. 40).
Рис. 40. Диаграмма распределения стоимости конкурсных вин, получивших награды, по категориям и годам урожая
Активно рассматривая в начале статьи распределение вин конкурса «Russian Wines Competition 2018» по году урожая, возникает закономерный вопрос – каким образом распределились по году урожая из общего числа участников вина-победители конкурса? Сравнительное соотношение количества вин, принявших участие в конкурсе, и вин-победителей представлено на рис. 41. Лидером по количеству вин-победителей в абсолютном выражении стал 2014 год – 14 наименований (рис. 41, 42).
Рис. 41. Сравнительная диаграмма распределения категорий вин участников и победителей «Russian Wines Competition 2018» по году урожая
Рис. 42. Диаграмма распределения балльных оценок получивших награды конкурсных вин по категориям и годам урожая
Выделение группы вин, попавших в медальный диапазон, и сопоставление их цены с качеством, выраженным балльной оценкой, не привели к положительным результатам – связь между ценой и качеством отсутствует.
А судьи кто?
Балльные оценки являются отражением состава жюри, квалификации, компетенции каждого члена жюри.
Как правило, отбор экспертов для участия в составе жюри винных конкурсов основан на приписываемому каждому эксперту гипотетическому профессиональному весу, учитывающему его объективные качества, самооценку, профессиональные признаки (опыт работы, занимаемая должность, стаж работы, участие в схожих сторонних конкурсах и т.д.), квалификационные признаки, известность, оценку и признание со стороны профессионального сообщества, связи в профессиональном сообществе.
Сравниваемые конкурсы российских вин существенным образом отличаются как по численности жюри, по составу, так и квалификации. Сведения о численности, квалификации членов жюри исходя из сведений, представленных в источниках [3, 26, 27, 28, 29], сведены в таблицу 5. В ее основе – сравнительный анализ состава жюри по имеющейся квалификации ее членов.
Таблица 5. Сравнение состава и квалификации жюри конкурсов российских вин
Показатель сравнения | Конкурс «Russian Wines Competition 2018» | Конкурс «Южная Россия 2018» | Конкурс «Кубок СВВР 2017» | Конкурс «Южная Россия 2017» | Авторский гид А. Саркисяна «Росс. вина 2017-2018»* |
---|---|---|---|---|---|
Численность жюри, чел., в т.ч. | 9 (+11) | 26 | 6 | 23 | 1 |
- российские эксперты | 2 | 22 | 1 | 20 | 1 |
- зарубежные эксперты | 7 (+11) | 4 | 5 | 3 | - |
Разделение жюри на отдельные дегустационные комиссии для оценки вин по категориями | Нет | Да | Нет | Да | - |
Квалификация членов жюри, в т.ч.: | |||||
- Master of Wine | 5 | - | - | - | - |
- Weinakademiker | 4 | - | - | - | - |
- WSET Diploma (DipWSET) 2 | 9 | - | 13 | 13 | - |
- WSET (level 1-3) | - | 3 | - | 3 | - |
- M.S./Bachelor Viticulture/Oenology | (+11) | 1 | 13 | 2+13 | - |
- Ph.D. Viticulture/ Oenology | - | 2 | - | 1 | - |
- Dr. Viticulture/ Oenology | - | 1 | - | 1 | - |
- Prof. Viticulture/ Oenology | - | - | 1 | - | - |
- Иное (отсутствие специализированного образования в винной сфере / российские, зарубежные школы сомелье и пр.) 4 | - | 19 | 4
|
15 | 1 |
* - Авторский гид А. Саркисяна «Российские вина 2017-2018» [6] не является конкурсом вин, представляет авторский проект по оценке российских вин. Сравнение с конкурсами представлено как дополнение, так как автор гида входил в состав жюри конкурсов «Южная Россия 2018», «Южная Россия 2017».
1 - участие в конкурсе консультанта по вопросам виноделия (энолога), не входящего в состав жюри.
2 - WSET Diploma – высший уровень WSET (при его наличии квалификации низших уровней не рассматриваются). Наличие диплома WSET является обязательным условием для получения квалификации Weinakademiker. Для получения квалификации Master of Wine обязательным условием является наличие диплома WSET и/или наличие иного эквивалента винного образования (энология, виноградарство, винный бизнес и тд).
3 - наличие квалификации у одного члена жюри.
4 – отсутствие специализированного образования в винной сфере, получение образования в российских и/или зарубежных школах сомелье по различными программам и уровням обучения, прочее образование.
При формировании жюри конкурса «Russian Wines Competition 2018» упор сделан на квалификационные признаки каждого члена жюри и общего для всех фактора – подтвержденное наличие WSET Diploma, дополненное квалификацией Master of Wine или Weinakademiker, а также длительным опытом работы (более 5 лет в винной и/или виноградарской индустрии), не связанным с деятельностью сомелье. Данный фактор можно оценить как сильную сторону конкурса «Russian Wines Competition 2018».
Кроме того, в конкурсе «Russian Wines Competition 2018» в роли консультанта по вопросам выявления дефектов и разъяснения относительно качества образцов вин принимал участие зарубежный энолог, проводивший дегустацию параллельно с членами жюри, но без выставления оценок и не участвовавший в принятии решений членами жюри.
Исходя из данных таблицы 5, в случае сравниваемых конкурсов основным критерием выступали профессиональные и иные признаки (квалификационные признаки разнородны, связаны с получением образования ряда членов жюри в российских и/или зарубежных школах сомелье по различными программам и уровням обучения).
Значительная численность жюри в конкурсах «Южная Россия» 2017-2018 гг. обусловлена последующим разделением и формированием нескольких дегустационных комиссий (меньшей численности) для параллельной конкурсной оценки различных категорий вин и напитков. В отношении конкурсов «Russian Wines Competition 2018» и «Кубок СВВР 2017» следует отметить, что единая комиссия жюри в каждом из конкурсов проводила конкурсную оценку всех образцов вин.
Формирование жюри осуществляется с учетом, в основном, профессиональных признаков каждого привлекаемого эксперта, без должной оглядки на квалификационные признаки. В результате возникает ситуация, когда в состав образцов конкурсных вин могут включаться реперные (эталонные, калибровочные и т.д.) образцы для скрининга сенсорных параметров и квалификации членов жюри в процессе проведения конкурса.
Формирование таких разнородных комиссий, в совокупности с включением реперных образцов, зачастую вызывает недоверие к балльным оценкам конкурса и желанию оценить согласованность оценок членов жюри (что не представляется возможным вследствие отсутствия в открытом доступе исходных данных).
Следует отметить, что контроль деятельности жюри допустим только при включении в состав дегустации образцов с известными характеристиками. Вино, как известно, развивается со временем с изменением органолептических характеристик, в связи с чем одно и то же вино, оцененное на разных конкурсах в разное время своего жизненного цикла будет различаться по органолептическим характеристикам и балльным оценкам. В рамках одного конкурса корректнее вводить закодированные повторы образцов вин.
Иной вариант – предварительный отбор экспертов до проведения конкурса через скрининг с использованием как реперных образцов вин, так и простых веществ (как, например, в стандарте по органолептическому анализу [30]), и формирование состава жюри до проведения конкурса исходя из согласованности их оценок, выраженных различными статистическими критериями. Важным фактором является хорошее понимание отобранными в состав жюри экспертами диапазона характеристик вин, с которыми им предстоит столкнуться на конкурсной оценке.
В любом случае, отбор экспертов в состав жюри должен обеспечивать схожесть множества их признаков, начиная с квалификационных.
Не менее важным фактором, дополняющим квалификационные признаки, является такой профессиональный признак, как опыт участия (желательно многократный) каждого члена жюри в качестве судьи в иных международных винных конкурсах. Акцент на данный признак у большинства членов жюри (7 человек) сделан организаторами конкурса «Russian Wines Competition 2018» [26]. Из сведений, представленных организаторами конкурсов «Кубок СВВР 2017» [3] и «Южная Россия 2018» [27], можно заключить, что схожим опытом обладали соответственно 2 и 7 членов жюри.
Систематизируя сведения о конкурсах, их сравнительные характеристики в первом приближении можно представить в виде таблицы 6.
Таблица 6. Сравнительная характеристика конкурсов российских вин
Показатель сравнения | Russian Wines Competition 2018 | Южная Россия 2018 | Кубок СВВР 2017 | Южная Россия 2017 |
---|---|---|---|---|
Период проведения | Конец мая 2018 г. | Конец апреля 2018 г. | Середина октября 2017 г. | Конец апреля 2017 г. |
Доступность вин предшествующего конкурсу года урожая в рознице | Нет* | НД | Да | НД |
Численность жюри, чел., в т.ч.: | 9 (+1**) | 26 | 6 | 23 |
- российские эксперты | 2 | 22 | 1 | 20 |
- зарубежные эксперты | 7 (+1**) | 4 | 5 | 3 |
Наличие квалификации у членов жюри, в т.ч.: - MW1 - WA1 - WSET Diploma2 - WSET (Level 1-3) - энологическое образование (см. таб. 5) - иное5 |
5 4 9 - (+1**) - |
- - - 3 4 19 |
- - 13 - 1+13 4 |
- - 13 3 4+13 15 |
Разделение жюри на отдельные дегустационные комиссии для оценки вин по категориями | Нет | Да | Нет | Да |
Система оценки | 100-балльная, МОВВ | 100-балльная, Паркер/МОВВ3 | 100-балльная, Паркер | 100-балльная, Паркер/МОВВ4 |
Дегустационный лист | МОВВ | МОВВ | НД | МОВВ |
Система обработки результатов дегустации (оценок) | VinAgora | НД | НД | НД |
Наличие независимого персонала для обработки результатов дегустации (оценок) | Да (VinAgora) | НД | НД | НД |
Наличие расширенных сведений об образцах (по результатам дегустации) | Да | Нет | Нет | Нет |
Сведения о дефектах вин | Есть | Нет | Нет | Нет |
Регламент конкурса / сведения об условиях награждения | Есть | Есть | НД | Есть |
Предварительная селекция вин | Да | Нет | Нет | Нет |
Наличие реперных (эталонных) образцов | Нет | Нет | Да | Нет |
Наличие образцов вин зарубежного производства | Нет | Да | Да | Да |
Источники поступления образцов | Закупка в рознице | Предоставление производителями | Предоставление производителями | Предоставление производителями |
Оплата производителями вина участия в конкурсе (за образец) | Нет | Да | Да | Да |
Участие в конкурсе вин, произведенных организаторами/ спонсорами конкурса | Нет | НД | Да | НД |
Количество образцов российских вин | 180 | 162 | 171 | 183 |
Сведения об исключенных образцах / причинах исключения | Есть | Нет | Нет | Нет |
НД – нет данных.
* - с учетом периода проведения закупки вин для предварительной селекции в период с февраля по апрель 2018 года.
** - участие в конкурсе консультанта по вопросам виноделия (энолога), не входящего в состав жюри.
1 - MW – Master of Wine (Мастер Вина), WA – Weinakademiker (Винный Академик).
2 - WSET Diploma – высший уровень WSET.
3 - наличие квалификации у одного члена жюри.
4 - В «Положении о конкурсе» представлены 2 разнородные системы оценки [5].
5 - отсутствие специализированного образования в винной сфере, получение образования в российских и/или зарубежных школах сомелье по различными программам и уровням обучения, прочее образование.
Отдельное внимание следует обратить на участие в конкурсах вин, произведенных компаниями – непосредственными организаторами конкретного конкурса и/или спонсорами конкурса, оказывающими финансовую поддержку в его организации и проведении (а также производители вина – взаимозависимые и аффилированные с организаторами/спонсорами юридические лица).
Так, спонсоры конкурса «Russian Wines Competition 2018» (АО «Скалистый Берег» и ООО «Шато де Талю») на момент проведения конкурса являлись сельскохозяйственными предприятиями (выращивание винограда), не имеющими мощностей по производству вина и не арендующими их у сторонних производителей вина, соответственно не производящими вино [32, 33].
Проведенный в рамках VII Всероссийского Саммита виноделов в Абрау-Дюрсо конкурс «Кубок СВВР 2017», одним из организаторов которого выступил Русский винный дом «Абрау-Дюрсо» [34], включал образцы вин, произведенных как ЗАО «Абрау-Дюрсо», так и АО «Миллеровский винзавод» (всего 17 образов, из них 7 получили медали) [15]. Согласно файлам раскрытия информации ПАО «Абрау-Дюрсо» - годовому отчету за 2017 г. [35], консолидированной финансовой отчетности ПАО «Абрау-Дюрсо» и его дочерних компаний за 2017 г. [36], списку аффилированных лиц на 31.03.2018 [37] ЗАО «Абрау-Дюрсо» и АО «Миллеровский винзавод» входят в группу компаний ПАО «Абрау-Дюрсо». Помимо указанных производителей в конкурсе также приняли участие образцы вин ООО «Лазурная Ягода» (Усадьба Дивноморское) (всего 14 образцов, из них 6 получили медали), связанного с ПАО «Абрау-Дюрсо» [38, 39, 40].
Учитывая отсутствие каких-либо регламентирующих требований в части полноты предоставления данных о конкурсе (сведения о членах жюри, условиях организации и проведения конкурсов) и принимая во внимание опубликованную организаторами информацию [3, 5, 10-16, 25, 29], данная таблица не претендует на полноту и содержащаяся в ней информация может быть, как уточнена и скорректирована, так и дополнена иными данными, расширяющими диапазон сравнения конкурсов.
Выводы
Итоги рассмотрения результатов конкурса «Russian Wines Competition 2018» и его сравнения с иными конкурсами российских вин позволяют сделать следующие выводы:
- на конкурсах российских вин («Russian Wines Competition», «Южная Россия», «Кубок СВВР») используются идентичные на первый взгляд 100-балльные шкалы оценки вин (МОВВ, Р. Паркер), но резко различающиеся по структуре органолептических показателей (в некоторых случаях она невнятна) и их весам в общей оценке. Система оценки МОВВ отличается наличием дегустационного листа с понятной и прозрачной структурой органолептических показателей и регламентированными дискретными значениями каждого показателя;
- несравнимость и разноплановость различных рейтингов и балльных оценок идентичных вин – общемировая тенденция, как следствие – сильнейший дрейф качества вин с различных экспертных точек зрения и сомнения в объективности полученных винами оценок;
- объективность и правдоподобность оценок конкурсов может быть выявлена, в том числе на основе всестороннего сравнительного анализа не только итоговых балльных оценок, но и подходов к организации и проведению конкурсов, критериям отбора членов жюри, источникам поступления образцов, детального статистического анализа исходных данных по образцам и результатов конкурсов;
- оптимальный подход к формированию выборки вин для участия в различных конкурсах отсутствует, репрезентативность выборки вин, участвующих в конкурсах, стремится к диапазону из 160-185 наименований;
- в разных конкурсах доли отдельных конкурсных категорий вин (тихие белые и красные, игристые) в общей структуре конкурсных образцов схожи;
- предварительная селекция вин на конкурс «Russian Wines Competition 2018» с охватом около 330 наименований позволяет взвешенно подойти к формированию пула конкурсных образцов, по результатам ее проведения намерений организаторов в части исключения вин по какому-либо признаку (категория, регион производства, год урожая, стоимость) не выявлено. Более того, все закупленные образцы получили равные возможности для участия, невзирая на их качество;
- охват по географии производства вин сводится к Краснодарскому краю, Республике Крым, Севастополю, Ростовской области. Причем включение в конкурс 10-20 наименований вин из других регионов нивелируется снижением количества вин, произведенных в Краснодарском крае;
- важное значение имеет период проведения конкурса в течение года, от которого зависит готовность к дегустации вин предшествующего конкурсу года урожая, и что важнее – их доступность в рознице. В этой связи конкурсы резко различаются по количеству вин года урожая, предшествующего году проведения конкурса. Производителями на конкурсы вин при их проведении в конце 1 квартала – начале 2 квартала могут предоставляться вина до их официального поступления в розничную продажу;
- год урожая практически 90% вин, принявших участие в различных конкурсах, укладывается в трехлетний временной диапазон до года проведения конкурса. Свыше данного периода вина представлены в единичном количестве;
- в части поступления образцов вин организаторы конкурсов придерживаются разных концепций: в случае «Russian Wines Competition 2018» - самостоятельная закупка в рознице без извещения производителей вина и их финансовой поддержки в любом виде, в случае сторонних конкурсов – получение вин от производителей при обязательной оплате за участие каждого образца в конкурсе. Закупка вин в рознице – кардинальное отличие конкурса «Russian Wines Competition 2018», так как позволяет оценить качество вин, реализуемых исключительно на полках магазинов, с позиции потребителей (без возможности любых манипуляций с образцами со стороны производителей вина);
- подтвержденная стоимость закупки вин в рознице (как в случае конкурса «Russian Wines Competition 2018») исключает варианты поступления образцов на конкурс из иных источников;
- закупка вин в рознице стимулирует к формированию репрезентативной по цене выборки вин для участия в конкурсе (что важно для потребителей), при этом организаторами конкурса «Russian Wines Competition 2018» предприняты шаги для максимального охвата вин из всех ценовых сегментов;
- конкурсы, придерживаясь рекомендаций МОВВ, различаются медальными и наградными диапазонами. В случае конкурса «Russian Wines Competition 2018» проходные баллы для получения бронзовой, серебряной и золотой медалей выше рекомендованных МОВВ на 3, 6, 9 баллов соответственно. Такой жесткий подход повышает ценность наград и сокращает массовость их получения;
- важным преимуществом конкурса «Russian Wines Competition 2018» является использование программного обеспечения VinAgora, одобренного МОВВ, и независимого персонала для обработки дегустационных оценок, обеспечивающего прозрачную процедуру подсчета, расширяющего возможности жюри в части дополнения дегустационных оценок вербальными характеристиками;
- по результатам конкурса «Russian Wines Competition 2018» впервые получена и систематизирована расширенная информация по винам, содержащая: оценки по всем органолептическим показателям; дескрипторы, балльные оценки и диаграммы вкусовых ощущений; вербальные дескрипторы ароматического профиля, внешнего вида и качества, полученного от каждого члена жюри;
- жюри конкурса «Russian Wines Competition 2018» исключили из дегустационной оценки 17 образцов вин по причине наличия в них дефектов с высокой концентрацией, при которой не представлялось возможным оценить данные образцы. При этом во всех образцах дефектам даны вербальные характеристики, источник происхождения всех дефектов – исключительно производство (виноградник/винодельня). Дефекты выявлены в образцах различных ценовых диапазонов – от 400 до 6100 рублей;
- по результатам конкурса «Russian Wines Competition 2018» для конкурсной выборки российских вин связь между стоимостью и качеством (балльная оценка) полностью отсутствует. Данная связь отсутствует и для вин-победителей конкурса. При этом стоимость вин обусловлена не их органолептическими характеристиками, оцененными в баллах, а иными факторами;
- вина конкурса «Russian Wines Competition 2018» в количестве 70 образцов были представлены в Авторском гиде А. Саркисяна «Российские вина 2017-2018». Сравнение балльных оценок идентичных образцов вин конкурса «Russian Wines Competition 2018» и Авторского гида А. Саркисяна «Российские вина 2017-2018» показало полное отсутствие связи между ними (пресловутый дрейф качества вин с точки зрения различных экспертных групп);
- для отмеченной в предыдущем пункте выборки вин между их стоимостью (по состоянию на 1-2 кв. 2018 г.) и балльной оценкой по Авторскому гиду А. Саркисяна «Российские вина 2017-2018» выявлена связь, причем фактор стоимости вина более чем на 30% обусловливает балльную оценку. В случае балльных оценок конкурса «Russian Wines Competition 2018» для выборки идентичных вин связь между балльной оценкой и стоимостью вин полностью отсутствует. В среднем балльная оценка вин по Авторскому гиду А. Саркисяна «Российские вина 2017-2018» оказалась выше балльной оценки вин по результатам конкурса «Russian Wines Competition 2018»;
- характер распределения балльных оценок (гистограммы) конкурсов «Russian Wines Competition 2018», «Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017» носит схожий характер (аппроксимируется кривой нормального закона распределения), при этом наблюдается смещение части оценок конкурсов как в сторону оценок меньше усредненной величины («Russian Wines Competition 2018»), так и в сторону оценок выше усредненной величины («Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017»);
- гистограмма распределения оценок 70 образцов из Авторского гида А. Саркисяна «Российские вина 2017-2018» (идентичные образцам конкурса «Russian Wines Competition 2018») по внешнему виду отличается как от конкурсной, так и от сторонних конкурсов, что может быть связано с рядом факторов (наложением нескольких распределений со своими средними значениями, округлением оценок, отсутствием регламентированного дегустационного листа, проведением открытой дегустации, сильными и слабыми сторонами эксперта, проводящего оценку, его личным мнением);
- по результатам конкурса «Russian Wines Competition 2018» усредненный показатель качества выборки вин можно условно определить на уровне 82,2 балла. На фоне данного показателя ряд вин резко выделяется своим качеством (как лидеры, так и аутсайдеры);
- в формировании состава жюри жесткие требования к квалификационным признакам (обязательное подтвержденное наличие WSET Diploma, подтвержденные квалификации Master of Wine и/или Weinakademiker, минимум 5 лет работы в винной и/или виноградарской индустрии, не связанной с деятельностью сомелье) членов жюри соблюдены организаторами конкурса «Russian Wines Competition 2018». Организаторами конкурсов «Южная Россия 2018», «Южная Россия 2017», «Кубок СВВР 2017» при формировании состава жюри в качестве основных критериев приняты профессиональные и иные признаки, квалификационные признаки разнородны;
- важным фактором при формировании состава жюри является наличие профессионального признака у максимального количества членов жюри – опыта (желательно многократного) участия в международных конкурсах вин в качестве судей;
- формирование состава жюри из экспертов с разнородными квалификационными признаками может способствовать включению в состав конкурсных вин реперных (эталонных/калибровочных) образцов для скрининга сенсорных параметров и квалификации членов жюри во время конкурса. Предварительный отбор экспертов в состав жюри через скрининг их сенсорных параметров на реперных образцах или чистых веществах должен быть проведен до конкурса;
- важным фактором при организации конкурса «Russian Wines Competition 2018» является полное исключение спонсорства и финансовой поддержки в части его организации и проведения со стороны производителей вина (а также взаимозависимых и аффилированных с производителями юридических и физических лиц). При анализе результатов различных конкурсов следует, в том числе, обращать внимание на участие вин, произведенных организаторами и/или спонсорами конкурса.
Библиография
1. Resolution OIV/Concours 332A/2009. OIV Standard for International Wine and Spirituous Beverages of Vviticultural Origin Competitions. URL: http://www.oiv.int/public/medias/4661/oiv-concours-332a-2009-en.pdf
2. ГОСТ 32051-2013. Продукция винодельческая. Методы органолептического анализа. URL: http://protect.gost.ru/
3. «Кубок СВВР 2017». URL: http://summit.abraudurso.ru/kubok-svvr/
4. TWA Rating System. URL: https://www.robertparker.com/ratings
5. 20 Юбилейный конкурс винодельческой продукции Южная Россия. Положение о конкурсе. URL: http://www.vinorus.ru/ru-RU/south-russia/about.aspx
6. А. Саркисян. Авторский гид Артура Саркисяна «Российские вина 2017-2018».
7. Hodgson R.T. An Analysis of the Concordance Among 13 U.S. Wine Competitions. – J. Wine Econ., 2009, v. 4, p. 1-9.
8. Reuter J. Does Advertising Bias Product Reviews? An Analysis of Wine Ratings. – J. Wine Econ., 2009, v. 4, p, 125-151.
9. Cardebat J.M., Paroissien E. Standardizing Expert Wine Scores: An Application for Bordeaux en primeur. – J. Wine Econ., 2015, v. 10, p. 329-348.
10. Комплексный лист дегустационной оценки вина (пример). URL: https://www.facebook.com/leonid.fadeev.1/posts/10216522670079990
11. Результаты конкурса Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/rezultaty/
12. Дефекты, выявленные в винах, снятых с конкурса Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/poleznaya-informatsiya/4050/
13. Документы (кассовые чеки), подтверждающие факт покупки всех вин, участвовавших в конкурсе Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/poleznaya-informatsiya/4052/
14. Результаты 20 Юбилейного Международного дегустационного конкурса «Южная Россия». URL: http://www.vinorus.ru/ru-RU/press/news/1647.aspx
15. Результаты дегустационного конкурса «Кубок СВВР 2017». URL: http://summit.abraudurso.ru/wp-content/uploads/2018/06/2-Itogi_kubka_2017_final.xlsx
16. Результаты дегустационного конкурса «Южная Россия 2017». URL: https://www.alcoexpert.ru/2017/04/26/rezultaty-konkursa-yuzhnaya-rossiya-obyavili-na-ceremonii-nagrazhdeniya-v-ramkax-vystavki-vinorus.html
17. Lecocq S., Visser M. What Determines Wine Prices: Objective vs. Sensory Characteristics. – J. Wine Econ., 2006, v.1, p. 42-56.
18. Cuellar S.S., Claps M. Differential effects of brand, ratings and region on willingness to pay: a hedonic price approach. – J. Wine Res., 2013, v. 24, p. 138-155.
19. Vita G.D., Caracciolo F., Cembalo L., Pomarici E., D’Amico M. Drinking Wine at Home: Hedonic Analysis of Sicilian Wines Using Quantile Regression. – Am. J. App. Sci., 2015, v.12, p. 679-688.
20. Cao J. Quantifying Randomness Versus Consensus in Wine Quality Ratings. – J. Wine Econ. – 2014, v.9, p. 202-213.
21. Delmas M.A., Gergaud O., Lim J. Does Organic Wine Taste Better? An Analysis of Experts’ Ratings. – J. Wine Econ., 2016, v. 11, p. 329-354.
22. Visscher P.M. Statistical analysis of the price and subjective quality ratings on Australian wines, 2014. URL: https://arxiv.org/abs/1402.3646.
23. Oczkowski E. Wine Prices and Quality Ratings: A Meta-regression Analysis. – Amer. J. Agric. Econ., 2015, v. 97, p. 103-121.
24. The Vivino 5-Star Rating System: What You Need To Know. URL: https://www.vivino.com/wine-news/vivino-5-star-rating-system
25. Система оценки вина на Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/poleznaya-informatsiya/4029/
26. Члены дегустационного жюри. «Russian Wines Competition 2018» URL: https://vineandwine.vin/ru/russian-wines-competition/uchastniki/
27. Жюри 20-го Юбилейного международного дегустационного конкурса «Южная Россия» 2018. URL: http://www.vinorus.ru/ru-RU/south-russia/jury.aspx
28. Международный дегустационный конкурс «Южная Россия» – беспрецедентное количество образцов и самый представительный состав жюри. URL: http://www.krasnodarexpo.ru/ru-RU/news/27409.aspx
29. Результаты конкурса «Южная Россия» объявили на церемонии награждения в рамках выставки Vinorus. URL: https://www.alcoexpert.ru/2017/04/26/rezultaty-konkursa-yuzhnaya-rossiya-obyavili-na-ceremonii-nagrazhdeniya-v-ramkax-vystavki-vinorus.html
30. ГОСТ ISO 8586-2015. Органолептический анализ. Общие руководящие указания по отбору, обучению и контролю за работой отобранных испытателей и экспертов-испытателей. URL: http://protect.gost.ru/
31. ГОСТ ISO 13299-2015. Органолептический анализ. Методология. Общее руководство по составлению органолептического профиля. URL: http://protect.gost.ru/
32. ООО «Шато де Талю» спонсор Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/poleznaya-informatsiya/4003/
33. АО «Скалистый берег» спонсор Russian Wines Competition. URL: https://vineandwine.vin/ru/russian-wines-competition/poleznaya-informatsiya/4002/
34. VII Всероссийский Саммит виноделов в Абрау-Дюрсо. URL: http://summit.abraudurso.ru/
35. Файлы раскрытия информации ПАО «Абрау-Дюрсо». Годовой отчет за 2017 г. URL: http://www.abraudurso.ru/upload/iblock/8ed/godovoy-otchet-za-2017-g.pdf
36. Консолидированная отчетность. IFRS Consolidated FS 2017 RUS. URL: http://www.abraudurso.ru/upload/iblock/ce8/ifrs-consolidated-fs-2017-rus.pdf
37. Файлы раскрытия информации ПАО «Абрау-Дюрсо». Список аффилированных лиц на 31.03.2018. URL:http://www.abraudurso.ru/upload/iblock/4e3/spisok_affilirovannih_liz_pao_31.03.2018.rtf
38. Премиальные тихие вина «Абрау-Дюрсо». URL: http://usadbadivnomorskoe.ru/news/abraudursorepresent
39. «Абрау-Дюрсо» вышло на рынок тихих вин. URL: http://usadbadivnomorskoe.ru/news/abrau-dyurso-vyshlo-na-rynok-tihih-vin
40. У «Абрау-Дюрсо» появился новый партнер. URL: https://www.rbc.ru/newspaper/2017/09/04/59a5828e9a7947e876704fa6