Названия и aliases
качество карточки предложения, качество объявления
Формула
единой формулы не существует; публикуется вектор индикаторов — полнота обязательных атрибутов, доля расхождений с фактическим предметом, актуальность цены и доступности, доля модерационных правок
Паспорт метрики
| Единица | вектор индикаторов; сводного балла нет |
|---|---|
| Источник данных | Схема обязательных и рекомендованных атрибутов, снимки карточек, события модерации, споры о несоответствии описанию, обновления цены и доступности. |
| Частота | По снимкам eligible-предложения и по когортам создания карточек. |
| Сегментация | микрорынок, категория, способ создания карточки, тип продавца, когорта |
Ошибки интерпретации
- Отождествлять полноту заполнения с качеством: заполненные поля с недостоверным содержанием ухудшают решение сильнее, чем пустые.
- Сводить индикаторы в один балл и использовать его в ранжировании: платформа получит рост балла и не получит роста информативности.
- Считать качество свойством карточки, а не свойством пары «карточка — запрос»: достаточная информация зависит от того, что именно ищет спрос.
Пример
Иллюстративный пример вектора для когорты: полнота обязательных атрибутов 82%, расхождения с фактическим предметом 2,4%, доля карточек с устаревшей ценой 6%. Числа не относятся к реальной платформе.
Как применять
Определите схему обязательных атрибутов по каждому микрорынку отдельно и публикуйте индикаторы раздельно: полнота, достоверность и актуальность управляются разными операционными процессами и не должны прятаться в одном числе. Проверяйте модель на исходах: если карточки с высокой полнотой не получают более высокого квалифицированного отклика, схема требует пересмотра, а не карточки.
Если балл всё же используется в ранжировании, публикуйте это как редакционное и продуктовое решение вместе с наблюдением за тем, что происходит с индикаторами после его внедрения. Метрика, ставшая целью, перестаёт описывать реальность — этот эффект нужно измерять, а не предполагать его отсутствие.
Антипример
Введение требования загрузить не менее пяти фотографий поднимает полноту до 95%. Продавцы добавляют повторяющиеся и нерелевантные изображения, доля расхождений с фактическим предметом не меняется, а квалифицированный отклик остаётся прежним. Индикатор полноты вырос, информативность карточки — нет.
Ограничения
- Достоверность наблюдаема только косвенно — через споры, возвраты и модерацию, — поэтому индикатор смещён в сторону случаев, которые кто-то оспорил.
- Обязательные атрибуты задаются схемой платформы, поэтому значение несопоставимо между платформами и между версиями схемы.
- Как только балл качества начинает влиять на ранжирование, он перестаёт быть измерением и становится целью со всеми последствиями закона Гудхарта.
- Конструкт не валидирован на данных; до внешней проверки он остаётся рабочей моделью измерения.
Связанные метрики
qualified-response-rate, match-quality, zero-exposure-share, refund-rate
Контекстные источники
Эти работы задают контекст двухсторонних рынков; конкретная формула выше остаётся рабочим определением автора.
- Hanna Halaburda, Mikolaj Jan Piskorski, Pinar Yildirim. Competing by Restricting Choice: The Case of Matching Platforms (2017).
- Kong-Pin Chen, Yen-Chi Huang. A Search-Matching Model of the Buyer-Seller Platforms (2012).
- OECD, European Union, European Commission Joint Research Centre. Handbook on Constructing Composite Indicators: Methodology and User Guide (2008).