Зачем рекомендательная система, если заказчик может вручную менять поставщиков
Заказчик может удалить предложенных поставщиков и добавить своих. Как объяснить ценность рекомендательной системы в таком продукте и какие метрики из этого следуют?
Ответить самому
Сначала сформулируйте ответ как на собеседовании, затем откройте разбор и оцените себя.
Короткий ответ
Рекомендации ценны как хороший стартовый список: они сокращают ручной поиск, показывают новых релевантных поставщиков и помогают заказчику быстрее получить конкурентные предложения.
Полный разбор
Ручное редактирование не отменяет рекомендательную систему, а задает ее роль. Система должна дать хороший стартовый список, чтобы заказчик не искал поставщиков с нуля. Если рекомендации качественные, заказчик меньше удаляет, меньше добавляет вручную, быстрее запускает закупку и получает больше релевантных предложений.
Из этого следуют продуктовые метрики: доля предложенных поставщиков, оставшихся в списке приглашений; manual add/delete rate; response или bid rate среди рекомендованных поставщиков; coverage новых полезных поставщиков; время до отправки заявки; downstream success, например наличие хотя бы одного приемлемого предложения или победителя среди рекомендованных.
Для B2B важно не обещать только top-1 precision. У заказчика могут быть внутренние предпочтения и ограничения, поэтому хорошая рекомендательная система должна быть управляемой: filters, explanations, diversity, business rules и возможность ручного override остаются частью продукта.
Теория
В enterprise recommender systems модель часто является decision support, а не полностью автономным агентом. Ручное редактирование дает полезный feedback signal и одновременно требует объяснимости и контроля.
Типичные ошибки
- Сказать, что ручное редактирование делает ML ненужным.
- Оптимизировать только winner rate и забыть про time saved.
- Не использовать удаления и ручные добавления как feedback.
Как отвечать на собеседовании
- Объясни рекомендации как стартовый список, а ручное редактирование как feedback loop.
- Назови хотя бы одну метрику friction: add/delete rate или time-to-submit.