xiaobaiaixibai / Real-time-visualization-of-national-news
使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开源的echarts对处理后的新闻内容进行可视化展示。展示分为以下5个方面: ① 时间新闻标题弹幕，展示最近新闻的标题 ② 最新新闻图谱，展示前10条最新新闻的标题 ③ 新闻热点地图，展现全国城市发生新闻的概况 ④ 省市关键字图谱，展示各个城市发生新闻的关键词 ⑤ 新闻分类占比饼状图，展示各个类别的新闻的占比。
☆26Updated 2 years ago
Alternatives and similar repositories for Real-time-visualization-of-national-news:
Users that are interested in Real-time-visualization-of-national-news are comparing it to the libraries listed below
- 007 基于网络爬虫技术的新闻分析系统-毕业设计展示 python django vue scrapy jieba nlp 爬虫抓取 新闻列表 新闻详情 新闻分类 新闻摘要抽取 关键词分析 情感分析 朴素贝叶斯算法 词性分析 后台管理新闻数据☆12Updated last year
- 微博评论情感分析，爬虫，文本分类，Web。☆46Updated 2 years ago
- 中北大学大数据学院毕业设计-使用OpenCV技术实现的是否佩戴口罩的识别☆16Updated 7 months ago
- 电商产品评论数据情感分析模型☆16Updated 2 years ago
- 通过python爬虫获取人民网、新浪等网站新闻作为训练集，基于BERT构建新闻文本分类模型，并结合node.js + vue完成了一个可视化界面。☆43Updated 3 years ago
- 实习实训大作业：基于python的电商产品评论数据情感分析☆26Updated 2 years ago
- 计算机毕业设计吊炸天spark+hive+nlp慕课Mooc在线教育课程数据分析可视化大屏 知识图谱课程推荐系统 课程爬虫 文本分类 LSTM情感分析 大数据毕业设计 知识图谱 大数据毕业设计 预测系统 实时计算 离线计算 数据仓库 人工智能 神经网络☆11Updated last year
- 请切换分支到Django-vue！！！毕业设计-中国知网（cnki）爬虫及数据可视化，采用Django和Celery将爬虫内置在网站内，展示实时爬取的数据☆78Updated 3 years ago
- 关键词：京东商品评论爬虫 苏宁商品评论爬虫 评论情感分析 爬取京东苏宁商品信息（手机 笔记本电脑） 以及商品的评论 然后集成到web上，实现了价格评价的比较 并且对每件商品评论进行了情感分析，绘制了评论的词云☆55Updated 2 years ago
- 利用Python编程爬虫搜集微博平台上关于大学生网课的评论，使用SPSS、机器学习、自然语言处理等方法，对收集到的文本数据进行分词、数据清洗、词频统计和聚类分析。最后根据所得到的数据进行以及分析，发现目前在线教学 中学生体验的现状、趋势以及一些待解决的问题。☆44Updated 3 years ago
- 一个自然语言处理的可视化系统，实现自动生成词云图、文章关键信息提取、多文档主题分布、文本分类等功能，还有一些业务数据的可视化图表展示。☆34Updated 4 years ago
- 携程/榛果民宿实时 评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆75Updated 4 years ago
- 观察者新闻网爬虫（新闻爬虫），基于python+Flask+Echarts，实现首页与更多新闻页面爬取（Requests+etree+Xpath）+新闻存储(MySQL)+文本分析(Jieba)+可视化(新闻词云，词频统计）。☆99Updated 3 years ago
- python实现微博热点事件舆情分析（爬虫）☆9Updated 2 years ago
- 使用python，从知网上爬取相关的数据，并进行数据分析，涉及到pycharm和jupyter notebook☆26Updated 4 years ago
- 数据挖掘常用算法：关联分析Apriori算法，数据分类决策树算法，数据聚类K-means算法☆24Updated 5 years ago
- 本软件包括对于百度外卖平台的原始评论采集、评论情感计算并分类展示、以及对于用户打分、服务评分等结构化数据进行可视化三个主要功能模块。本软件的主要技术特征在于改造和使用了网络爬虫，来为本软件提供实时数据采集的能力，并将评论情感极性分析和用户打分相结合，在首先考虑用户打分的情况…☆45Updated 4 years ago
- 爬取新浪微博数据并可视化分析☆37Updated 4 years ago
- 上海地区新房和二手房数据的爬虫抓取, 数据处理和可视化分析☆35Updated 2 years ago
- 数据挖掘可视化系统（Data Mining Visualization System）通过数据挖掘理论、机器学习算法以及数据可视化等信息技术，并基于 Flask 框架搭建 Web 服务器，实现数据挖掘可视化。☆100Updated 3 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间 、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆31Updated last year
- python-租房数据爬取和可视化分析☆9Updated last year
- 基于微博用户信息数据的分布式爬虫所做的毕业设计，有一小部分简单的数据分析。这个也是为了纪念大学四年！里面包括了源代码，论文的一稿二稿等等还有查重终稿，UML图 、PPT等等☆74Updated 6 years ago
- Python二手车价格预测案例数据挖掘☆28Updated 2 years ago
- Python中国知网（cnki）爬虫及数据可视化分析设计毕业源码案例设计☆15Updated last year
- 毕业设计,旅游景点评论情感分析。包含携程，马蜂窝爬虫，Adaboost+bayes分类☆64Updated 2 years ago
- 智能舆情分析与商品评价系统 python flask。2019年（第12届）中国大学生计算机设计大赛国赛三等奖。河北省第七☆9Updated 4 years ago
- 数据挖掘大作业——股票分析预测☆32Updated 4 years ago
- 豆瓣电影top250爬虫，并对数据进行可视化分析，运用Echarts插件☆39Updated 6 years ago
- 1421基于python网易新闻scrapy爬虫数据分析与可视化大屏展示-毕业源码案例设计☆20Updated last year