21.12.2018
Текстовый анализ отзывов для маркетингового агентства ARORA с точностью 88%
Основной профиль компании ARORA (https://arora.pro/) – разработка IT решений для владельцев ресторанов и служб доставок. Программный, медийный комплекс сервисов и маркетинговых кейсов позволяет генерировать целевой траффик на сайты и мобильные приложения с высокой эффективностью в заказ, а инструменты аналитики выстраивают прозрачный процесс развития бизнеса.
Агентство работает с компаниями службы доставки еды и для своих клиентов проводит исследование репутации в интернете по отзывам пользователей. Работа выполняется вручную. Цель апробации решения – оценить выгоду от автоматизации основной деятельности агентства с помощью технологий лингвистического анализа.
С помощью Luxms Sentiment Analytics ARORA обработала выборку отзывов об одном из клиентов: решение выявляло упоминания ряда критериев, оценивало тональность каждого критерия и общую эмоциональную окраску отзыва. Ту же выборку отзывов по тем же критериям вручную проанализировали три специалиста. Результат одного из них приняли за эталон и оценили расхождения в отзывах анализатора и двух других людей.
Luxms Sentiment Analytics показало точность 88%. Два специалиста дали результаты с 91% и 92% точностью по отношению к третьему. Как выяснилось, люди по-разному оценивали одни и те же факты. Были неучтённые критерии и ложные срабатывания. Были и единичные ошибки с тональностью.
По скорости работы решение при минимальном аппаратном ресурсе превзошло человека – обрабатывало 3 отзыва в секунду.
ARORA признала результаты удовлетворительными.
"Результаты можно улучшить, если провести тонкую настройку решения на предметную область и добавить численные критерии анализа: например, быстро – это меньше 40 минут, дорого – это дороже 500 рублей", - комментирует Максим Розанов, директор по BI решениям ГК Luxms, - " В будущем применение инструментов лингвистического анализа поможет Заказчику добиться сокращения времени на выполнение заказов и получить технологическое преимущество перед конкурентами."