一、项目简介
推荐一款舆情数据挖掘和分析的开源系统,包括1.数据展示,2.数据处理,3.数据采集,4.数据大屏,5.管理后台,但是属于部分开源。
二、实现功能
舆情监测:通过全文搜索、来源搜索、热搜监测等多重功能实现对全网文本、图片、视频舆情实时发现;
舆情预警:根据用户设置预警条件,判别舆情信息,并第一时间通过多渠道告知用户;
舆情分析:全网事件分析、事件分析、传播分析、竞品分析、评论分析、热度指数,6类大数据分析;
舆情报告:一键快速生成日、周、月、季度报告,自带行业舆情案例库,为舆情应对提供参考。
三、技术选型
开发平台:Java EE & SpringBoot
采集框架:Spider-flow & WebMagic & HttpClient
APP采集:Xposed框架
URL仓库:Redis
网页渲染解析:Jvppeteer & Playwright(微软开源)
web应用服务器:Nginx & Tomcat
储存任务发送:Kafka & Zookeeper
抓取任务发送:RabbitMQ
配置管理:MySQL
前端展示:Bootstrap & VUE
四、演示地址
http://open-yuqing.stonedt.com/login
五、界面展示


系统架构

功能架构

六、源码地址
源码地址:
https://gitee.com/stonedtx/yuqing/tree/master
版权归原作者所有 如有侵权请联系删除


