xiaobaiaixibai / Real-time-visualization-of-national-newsLinks
使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开源的echarts对处理后的新闻内容进行可视化展示。展示分为以下5个方面: ① 时间新闻标题弹幕，展示最近新闻的标题 ② 最新新闻图谱，展示前10条最新新闻的标题 ③ 新闻热点地图，展现全国城市发生新闻的概况 ④ 省市关键字图谱，展示各个城市发生新闻的关键词 ⑤ 新闻分类占比饼状图，展示各个类别的新闻的占比。
☆29Updated 3 years ago
Alternatives and similar repositories for Real-time-visualization-of-national-news
Users that are interested in Real-time-visualization-of-national-news are comparing it to the libraries listed below
Sorting:
- 007 基于网络爬虫技术的新闻分析系统-毕业设计展示 python django vue scrapy jieba nlp 爬虫抓取 新闻列表 新闻详情 新闻分类 新闻摘要抽取 关键词分析 情感分析 朴素贝叶斯算法 词性分析 后台管理新闻数据☆13Updated 2 years ago
- 网络舆情分析系统☆189Updated 9 years ago
- 基于 Scrapy 的新闻智能分类微信小程序，是一个文本分类相关的应用，目的是打造出一个可以对新闻进行智能分类的微信小程序。技术栈：Python + Scrapy + MongoDB + scikit-learn + Flask + 微信小程序，涉及爬虫、文本分类、Web …☆63Updated 6 years ago
- 系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务☆95Updated 7 years ago
- 基于分布式爬虫，采集互联网公开来源的金融类新闻和文档类文本； 基于文本挖掘技术，进行无监督/半监督学习的数据ETL与特征工程； 基于金融数据挖掘技术，进行宏观经济分析，基本面分析与行业分析☆106Updated 7 years ago
- 利用Python编程爬虫搜集微博平台上关于大学生网课的评论，使用SPSS、机器学习、自然语言处理等方法，对收集到的文本数据进行分词、数据清洗、词频统计和聚类分析。最后根据所得到的数据进行以及分析，发现目前在线教学 中学生体验的现状、趋势以及一些待解决的问题。☆45Updated 4 years ago
- (Python/Java)爬虫 + Redis + MySQL实现股票的历史数据查询, 降价通知, 下跌预警, 可视化等功能☆24Updated 4 years ago
- 分布式采集拉钩网中杭州爬虫相关职位的数据并使用Flask进行数据的可视化与分析☆36Updated 7 years ago
- 大数据平台舆情分析系统前端模版☆29Updated 10 years ago
- 请切换分支到Django-vue！！！毕业设计-中国知网（cnki）爬虫及数据可视化，采用Django和Celery将爬虫内置在网站内，展示实时爬取的数据☆79Updated 4 years ago
- 金融反欺诈预测系统，技术涉及Vue3、Flask、XGBoost等。本项目提供了完整的Web系统，系统功能包括信贷数据分析、信贷欺诈数据检测、用户历史预测记录、用户数据管理等。项目整体并不复杂，适合新手练手学习机器学习与Web系统的结合。☆57Updated 3 years ago
- 美团民宿房源数据抓取以及可视化分析，使用scrapy+django，进行数据抓取以及数据管理和可视化展示的构建。☆33Updated 4 years ago
- 数据挖掘可视化系统（Data Mining Visualization System）通过数据挖掘理论、机器学习算法以及数据可视化等信息技术，并基于 Flask 框架搭建 Web 服务器，实现数据挖掘可视化。☆103Updated 4 years ago
- 一个基于关键词爬虫生成词云的网络内容可视化工具，可爬取百度、谷歌、必应、知乎、微博、微信公众平台☆35Updated 5 years ago
- 毕设项目--面向短视频的流量数据爬取和分析系统☆34Updated 5 years ago
- 百度搜索指数 对标 股票数据，分析相关性，后面研究 搜索数量、热度 与 股票价值、涨跌预测的 数学模型☆16Updated 4 years ago
- 项目介绍： 智能交互金融智能聊天。具体实现用户在所有关于股票话题的智能问答。其中难点是问题 分类、数据预处理、参数提取。 ☆个人工作： 实现金融智能聊天,实现所有股票问题的精确回答。通过提取通用特征将5亿+条训练语料缩减为10w条，语料内存占用量从10G减少到2M，并将…☆66Updated 6 years ago
- 关键词：京东商品评论爬虫 苏宁商品评论爬虫 评论情感分析 爬取京东苏宁商品信息（手机 笔记本电脑） 以及商品的评论 然后集成到web上，实现了价格评价的比较 并且对每件商品评论进行了情感分析，绘制了评论的词云☆55Updated 2 years ago
- 北京二手房房价分析和预测☆58Updated 7 years ago
- Python网络爬虫与推荐算法新闻推荐平台：网络爬虫：通过Python实现新浪新闻的爬取，可爬取新闻页面上的标题、文本、图片、视频链接（保留排版） 推荐算法：权重衰减+标签推荐+区域推荐+热点推荐☆119Updated 4 years ago
- 携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆80Updated 4 years ago
- 本项目旨在设计并实现一个舆情监控系统，具体基于对知乎热榜话题的数据抓取、分析与可视化。☆17Updated 2 years ago
- 数据挖掘大作业——股票分析预测☆33Updated 4 years ago
- 共享单车时空数据分析与管理系统基于大数据平台框架，对现有的共享单车数据进行流量的时间和空间统计。通过某一个时期的共享单车大数据的分析和管理，得以观察到某区域或者某时间段的单车具体情况，也实现了管理员对单车的远程操作，让当代城市中共享单车的摆放和调度更加具有合理性。☆30Updated 4 years ago
- 股票交易数据处理的整个业务流程 数据源--->数据采集--->数据归类--->数据储存--->数据分析--->数据可视化☆31Updated 8 years ago
- 观察者新闻网爬虫（新闻爬虫），基于python+Flask+Echarts，实现首页与更多新闻页面爬取（Requests+etree+Xpath）+新闻存储(MySQL)+文本分析(Jieba)+可视化(新闻词云，词频统计）。☆103Updated 3 years ago
- 通过python爬虫获取人民网、新浪等网站新闻作为训练集，基于BERT构建新闻文本分类模型，并结合node.js + vue完成了一个可视化界面。☆42Updated 3 years ago
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆135Updated 2 years ago
- 智慧物流算法大赛简介： 根据包括货值、路程和油价等字段的数据集，对每趟货物运送的运价进行回归预测。 本项目为我的参赛代码，分为四个主要的部分：1.数据预处理；2.特征工程；3.建模调参训练；4.数据可视化。 最终获得了大赛的二等奖。☆38Updated 6 years ago
- 人工智能Python全栈工程师 人工智能时代已经来临，再不学习就会被淘汰！ python考试，已经被列为国家计算机二级考试 python课程，已经被浙江的中学列为必修课内容之一 python课程，已经被山东的小学列为选修课课程之一 零基础？ 怕啥，君社教育来帮你！ Pyt…☆106Updated 4 years ago