Отзывы о продуктах: как превратить смешанную жалобу в проверяемые задачи

«Йогурт вкусный, но привезли тёплым, крышка повреждена, а в карточке непонятно, сколько хранить после открытия». У такого отзыва несколько предметов. Общая отметка «нейтрально» скрывает вопросы доставки, упаковки и информации о продукте.

Производителю и фирменному магазину нужен процесс разбора: сохранить исходное сообщение, выделить отдельные утверждения, связать их с известными обстоятельствами и назначить ответственных. Сводка полезна, когда после неё можно проверить конкретное исправление.

Разделить аспекты, не потеряв исходный текст

Аспект — то, о чём человек говорит: вкус, упаковка, доставка, состояние, цена или карточка. Тональность относится к этому предмету. Одно сообщение может содержать положительную оценку вкуса и отрицательную оценку вручения.

SemEval-2014 Task 4 описывает аспектный анализ, включая отдельные оценки разных предметов одного отзыва. Исследовательские данные ресторанов и ноутбуков не подтверждают качество выбранной модели на ваших русскоязычных пищевых отзывах. Для этого нужен собственный размеченный материал.

Первоначальный текст сохраняют рядом с результатом. У каждой выделенной части должна быть опора в сообщении. Модель не вправе дорисовать причину: «тёплый при получении» ещё не доказывает, где именно нарушились условия.

Связать сообщение с доступными данными

Для разбора могут понадобиться SKU, заказ, дата получения, точка и партия. Не все сведения известны из публичного отзыва. Неизвестное оставляют неизвестным и уточняют через предусмотренный канал, собирая только нужные данные.

Публичный ответ не должен раскрывать данные заказа или покупателя. Внутренняя задача и опубликованная реакция — разные представления одной ситуации. Доступ к ним назначают по работе исполнителя.

Похожая фраза в двух каналах не обязательно означает два происшествия. Сохраняют сообщения, связывают предполагаемые дубли и проверяют их. Разные жалобы на один SKU тоже нельзя автоматически объединять в один случай: даты, партии и обстоятельства могут различаться.

Назначать по действию, а не по тональности

У задачи есть предмет, владелец, срок и ожидаемое подтверждение. «Передали маркетологу» не решает вопрос повреждённой упаковки. «Ответили покупателю» не подтверждает исправление карточки.

Сигналы о возможном вреде, состоянии или нарушении хранения идут по предусмотренному порядку работы с качеством. Их нельзя закрывать общим ответом языковой модели. Одновременно сам отзыв остаётся сообщением человека, а не установленным заключением о безопасности всей партии.

Для информационной ошибки исполнитель сравнивает фактическую карточку с утверждённым источником. Если источник не содержит нужного условия, ответ «обычно хранится несколько дней» не подходит. Сначала подтверждают сведения, затем исправляют нужные места публикации.

Проверить классификацию до автоматической маршрутизации

Подготовьте разрешённый набор разных сообщений: коротких, смешанных, саркастических, без заказа и с серьёзными претензиями. Ответственные вручную выделяют темы и действия. Спорные примеры разбирают, чтобы правила имели одинаковый смысл для команды.

Ошибки считают по задачам. Для передачи в качество особенно важны пропущенные сигналы; для других исполнителей — ложные назначения и потеря существенного фрагмента. Общий процент правильной тональности не отвечает на эти вопросы.

Учебный пример: среди 20 сообщений, которые вручную признаны требующими проверки качества, система нашла 16. Она также передала четыре сообщения, для которых такой маршрут по принятой разметке не нужен. Полнота на этом наборе — 16/20, или 80%; правильность этих 20 назначений — 16/20, также 80%. Четыре пропущенных случая требуют разбора независимо от общего показателя остальных отзывов.

Замкнуть задачу подтверждением

Исправление описывают конкретно: какое поле изменено, в какой версии, кто подтвердил источник и где проверена публикация. Для операционной проблемы сохраняют результаты проверки по её процессу. При повторном сообщении виден прежний разбор и текущая ситуация.

В сводке показывают число сообщений, число отдельных случаев, распределение причин и незакрытые задачи. Доля отзывов — не частота дефекта среди всех проданных упаковок: далеко не каждый покупатель оставляет отзыв.

Изменения продаж после появления блока отзывов также нельзя автоматически приписать ему. Сначала проверяют качество разбора и исполнения. Тогда отзывы становятся источником наблюдений, которые помогают исправлять продуктовую информацию и операции, сохраняя разницу между мнением, предположением и подтверждённым фактом. Очередь исправлений не из чего строить, пока нет первых живых отзывов. Как собрать первый реальный опыт покупателей нового товара — это шаг до разбора смешанных жалоб.