佛山网站建设在哪,网站防火墙咋样建设,域名申请了怎么做网站,短租网站建设思通舆情 是一款开源免费的舆情系统。
支持本地化部署#xff0c;支持在线体验。
支持对海量舆情数据分析和挖掘。
无论你是使用者还是共同完善的开发者#xff0c;欢迎 pull request 或者 留言对我们提出建议。 您的支持和参与就是我们坚持开源的动力#xff01;请 sta…思通舆情 是一款开源免费的舆情系统。
支持本地化部署支持在线体验。
支持对海量舆情数据分析和挖掘。
无论你是使用者还是共同完善的开发者欢迎 pull request 或者 留言对我们提出建议。 您的支持和参与就是我们坚持开源的动力请 star 或者 fork! 思通舆情 的功能
舆情监测通过全文搜索、来源搜索、热搜监测等多重功能实现对全网文本、图片、视频舆情实时发现;舆情预警根据用户设置预警条件判别舆情信息并第一时间通过多渠道告知用户;舆情分析全网事件分析、事件分析、传播分析、竞品分析、评论分析、热度指数6类大数据分析;舆情报告一键快速生成日、周、月、季度报告,自带行业舆情案例库为舆情应对提供参考。智写报告提供了丰富的写作模板和样式,用户只需根据模板填充相应内容后端基于AI技术即可快速生成报告。
在线体验
环境地址https://open-yuqing.stonedt.com/打开页面使用微信扫码关注微信公众号后直接登录在线体验。
思通舆情 的优势
开源开放零门槛线上快速获取和安装快速获取用户反馈、按月发布新版本简单易用极易上手通过鼠标点击和拖拽即可完成分析秒级响应超大数据量下秒级查询返回延时
思通舆情 的数据
新闻媒体新闻、app、电子报网络自媒体搜狐、百家号、今日头条、博客、企鹅号、微信公众号、微博论坛贴吧、论坛、问答、知乎短视频抖音、快手等众多平台。
思通舆情 的百科
关于本舆情系统项目的 心路历程、开发计划、入门文档、团队介绍、实际案例等等
你想知道的一切都在这里 文档预览 - Gitee.com 思通舆情 技术栈
数据采集
开发平台Java J2EE SpringBoot采集框架Spider-flow WebMagic HttpClientAPP采集Xposed框架URL仓库布隆过滤器 Redis网页渲染解析Jvppeteer Playwright微软开源 Seleniumweb应用服务器Nginx Tomcat储存任务发送Kafka Zookeeper抓取任务发送RabbitMQ配置管理MySQL前端展示Bootstrap VUE
数据处理
开发框架SpringBoot开发语言Java J2EE数据暂存MySQL数据索引Redis深度学习PaddlePaddle自然语言处理HaNLP THUCTC数据处理和储存任务发送Kafka Zookeeper数据中台自研 DataEase数据初始化集成FlyWay自动初始化MySQL数据总线RocketAPI 进行了二次开发
数据分析
数据库MySQL数据检索Elasticsearch中文分词器IK分词相似度计算Clickhouse数据同步DataX文章储存Mongodb数据缓存Redis消息队列Kafka RabbitMQ开发框架SpringBoot开发语言Java J2EE图表展示Apache Echarts AnyCharts
UI 展示 系统架构 功能架构 开源计划 整个系统分为五个部分1.数据展示2.数据处理3.数据采集4.数据大屏5.管理后台。 由于整个系统非常庞大目前只开源了第一部分 “数据展示”。 数据处理 和 数据采集我们会先开源文档以及部分代码。 数据大屏 有开源计划但是具体时间尚未明确。 数据处理 和 数据采集目前(2022-2-19)文档和代码正在规整中。 系统管理后台 将于2022年4月份之前开放源代码。 智写报告 将于2023年10月份之前开放源代码。(后端引擎由我司写作宝团队提供服务与支持)
舆情数据采集 目前正在整理编写文档正式发布时间待定。 【数据采集】技术架构说明文档 数据采集 系统已经开源预计2022年6月完成开源计划。 【数据采集】已经在2023年9月份重新架构预计在2024年打算重新开源。
舆情数据处理 文档预计在2022年3月份提到开源社区。 【数据处理】技术架构说明文档 【数据处理】 中的核心部分已经开源请查阅 nlp.stonedt.com 和 AI多模态能力平台: 免费的自然语言处理、情感分析、实体识别、图像识别与分类、OCR识别、语音识别接口功能强大欢迎体验。
舆情数据大屏
基础版舆情大屏目前已于2023年10月份开源。
自然语言处理
思通数科-自然语言处理文本挖掘引擎
系统管理后台 系统很容易上手简单易懂。2022年4月份 会全部开放源代码同时也会提供运行部署程序下载。 开源代码访问地址思通舆情后台管理系统: 开源免费思通舆情监测网络监控系统的后台管理系统对用户配置方案和用户管理的管理系统。该项目与开源舆情系统项目紧密关联。
Docker 部署
1.安装Docker
对于Ubuntu用户 apt install -y docker.io对于Centos用户 yum install -y docker 然后启动Docker服务
systemctl start docker
2.Docker拉取镜像并运行
在命令行输入下面一行命令即可完成镜像的拉取以及运行,拉取镜像大概需要花费5-10分钟。
docker run -itd --name stonedt_yuqing -p 8085:8085 registry.cn-beijing.aliyuncs.com/stonedt_yuqing/stonedt_yuqing:1.0.6
3.验证是否成功运行
使用docker ps命令获取我们运行的容器ID
docker ps
使用docker logs 容器ID -f 查看容器日志
docker logs 容器ID -f
屏幕出现运行日志即为部署成功 访问地址 http://ip:8085 用户名13900000000 密码stonedt
安装依赖
JavaEE 8 以上版本MySQL 5.7 以上版本Redis 4.0 以上版本
详见思通舆情安装部署手册install_guide.md · 思通数科 StoneDT/开源免费舆情监测网络监控系统 - Gitee.com
运行版本
仅需五步快速安装 思通舆情 1.安装 MySQL 5.7、redis 4.0 2.下载 stonedt-yuqing.7z解压zip包执行 nohup java -jar stonedt-yuqing.jar 启动舆情系统。 3.下载 opinion_screen.zip解压zip包进入apache-tomcat-8.5.46/bin文件夹.执行 ./startup.sh 4.配置nginx,在http块中增加如下内容: server {listen 8085;server_name 127.0.0.1;location / {proxy_pass http://127.0.0.1:8084;}location /opinion_screen {proxy_pass http://127.0.0.1:8080;}
} 5.本地访问http://127.0.0.1:8085/ 用户名13900000000 密码stonedt
详见思通舆情安装部署手册install_guide.md · 思通数科 StoneDT/开源免费舆情监测网络监控系统 - Gitee.com
备注修改配置文件[application.yml]设定 MySQL、Redis 用户和密码等。 修改配置文件[application.properties]修改xmlFilePath文件路径并且拷贝config文件下的xml文件到指定路径等。 舆情大屏下载地址opinion_screen.zip
安装手册
我们把用户在安装部署中遇到的问题归纳整理成一份文档手册
详见思通舆情安装部署手册 及 常见问题
install_guide.md · 思通数科 StoneDT/开源免费舆情监测网络监控系统 - Gitee.com
产品手册
https://gitee.com/stonedtx/yuqing/raw/master/产品手册V1.0.pdf
版本更新
每次版本更新的记录说明都在此查看详情 。
