Число сообщений и число задач покупателя — разные показатели.
Почему объём подборки преувеличивается
Автор может разместить один поиск подрядчика в нескольких сообществах. Его сообщение также могут переслать другие участники. Если каждую публикацию учитывать отдельно, отчёт покажет рост возможностей, хотя компания видит одну и ту же задачу.
Не сравнивайте только текст
Одинаковый шаблон иногда используют разные заказчики. И наоборот, один человек может переписать собственный запрос другими словами. Для решения учитывайте задачу, дату, доступный контекст автора и связь сообщений. Совпадение одного признака не является безошибочным доказательством дубля.
Что делать с повтором
Сохраните один рабочий запрос и отметьте дополнительные источники, если это нужно для анализа. Изменение срока или состава задачи фиксируйте как обновление, а не всегда как новую возможность.
- Описывается ли тот же проект?
- Связаны ли авторы или публикации?
- Изменились ли условия задачи?
- Нужна ли ручная проверка спорного совпадения?
Как отразить это в отчёте
Покажите отдельно найденные сообщения и уникальные задачи по согласованному правилу. Не обещайте идеальную дедупликацию. Отметка неоднозначных случаев честнее, чем точная цифра, полученная из ненадёжного автоматического сравнения.
Сопоставляйте задачу и контекст
Одинаковый текст может быть пересылкой, повтором автора или новым запросом с изменёнными условиями. Простое равенство слов не всегда определяет дубль. Проверьте дату, источник и предмет.
Один проект не должен превращаться в несколько лидов из-за повторных уведомлений. При этом не объединяйте разные задачи только по похожему описанию. В отчёте различают события обнаружения и уникальные проверенные ситуации.