ReviewScope: анализатор аномалий в отзывах на эмбеддингах и графах
Поводом стал подозрительный отзыв на булочную, а вырос из этого инструмент, который ищет в отзывах повторяющиеся тексты и необычные закономерности.
История инструмента началась с бытового случая: автор искал булочную на Яндекс Картах и наткнулся на отзыв с очень характерным началом. Похожих текстов нашлось больше, чем ожидалось, и из этого вырос ReviewScope — анализатор отзывов, который ищет аномалии, повторы и необычные закономерности. Внутри используются эмбеддинги для сравнения смысла фраз и графы совпадений, связывающие отзывы между собой в группы. Автор объясняет, почему рейтинг заведения сам по себе мало о чём говорит: у большинства мест он выше четырёх, поэтому читать приходится именно отзывы, начиная с отрицательных. Инструмент помогает выявлять накрутку и шаблонные тексты, которые не видны по звёздочкам. В статье разобрано устройство конвейера и то, какие закономерности в отзывах встречаются чаще всего.