Davidchent / David
知网爬虫cnkispider，输入关键字爬取知网检索数据
☆32Updated 6 years ago
Related projects ⓘ
Alternatives and complementary repositories for David
- 文本分类是指在给定分类体系下 , 根据文本的内容自动确定文本类别的过程。首先我们根据scrapy爬虫根据中国知网URL的规律，爬取70多万条2014年公开的发明专利，然后通过数据清洗筛选出了60多万条含标签数据。通过TF-IDF对60多万条本文进行词频提取，依照词频排序提取…☆102Updated 6 years ago
- 系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务☆78Updated 6 years ago
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆48Updated 4 years ago
- 对舆情事件进行词云展示，对评论进行情感分析和观点抽取。情感分析基于lstm 的三分类，观点抽取基于AP 算法的聚类和MMR的抽取☆178Updated 5 years ago
- 中国知网爬虫☆142Updated 7 years ago
- 携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆68Updated 3 years ago
- Simple examples of text data visualization. 文 本人物可视化，词云、人物关系图谱☆109Updated 7 years ago
- 利用文本挖掘技术进行新闻热点关注问题分析☆155Updated 5 years ago
- 新闻爬虫，爬取新浪、搜狐、新华网即时财经新闻。☆168Updated 4 years ago
- 情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫☆65Updated 3 years ago
- 文本热点挖掘，基于DBSCAN聚类模型，对文本的热点事件进行挖掘☆38Updated 4 years ago
- 基于分布式爬虫，采集互联网公开来源的金融类新闻和文档类文本； 基于文本挖掘技术，进行无监督/半监督学习的数据ETL与特征工程； 基于金融数据挖掘技术，进行宏观经济分析，基本面分析与行业分析☆95Updated 6 years ago
- 微博模拟登录+微博关键词爬虫+微博短文本情感语义分析+生成词云☆19Updated 6 years ago
- 本软件包括对于百度外卖平台的原始评论采集、评论情感计算并分类展示、以及对于用户打分、服务评分等结构化数据进行可视化三个主要功能模块。本软件的主要技术特征在于改造和使用了网络爬虫，来为本软件提供实时数据采集的能力，并将评论情感极性分析和用户打分相结合，在首先考虑用户打分的情况…☆40Updated 3 years ago
- Python Spider for weibo friends analysis. (Professional Edition) / 微博用户好友人际关系网络深度分析（可使用 Gephi、Tableau 进行数据可视化）。☆32Updated last year
- 一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载☆118Updated 4 years ago
- 依据香港中文大学设计的规则系统，先用小样本评论建立初始关键词库，再结合18种句式逐条匹配评论，能够快速准确地识别评论对象及情感极性。经多次迭代优化关键词库后，达到较高准确率的基础上，使用Tableau进一步分析数据，识别出客户集中关注的商品属性、普遍好评差评的商品属性；通过…☆53Updated 7 years ago
- 网络舆情分析系统☆171Updated 8 years ago
- 基于新浪微博数据的情感极性分析☆57Updated 6 years ago
- 豆瓣Top250影评爬虫（用于情感分析语料）☆20Updated last year
- 微博评论爬取及nlp情感分析☆20Updated 6 years ago
- 基于微博的数据挖掘与社交舆情分析☆207Updated 6 years ago
- 关于百度旅游、大众点评、驴妈妈、猫途鹰、携程的评论爬虫☆22Updated 6 years ago
- 中文微博评论情感分类☆23Updated 5 years ago
- 與情分析系统，包括爬虫、数据清洗、文本摘要、主题分类、情感倾向性识别以及分析结果数据可视化☆325Updated 2 years ago
- 包含leleketang.com做文库十万余条作文信息，每条作文包含标题、作者、时间、地点、正文、评语、等级等信息。根据文本数据，从多个维度对数据进行分析，并用python中的pyecharts绘制图表。使用TF-IDF和Doc2Vec模型统计关键词☆14Updated 5 years ago
- 微博爬虫，爬去微博语料，情感分析，user-agent池，充足IP，scrapy，mongodb☆16Updated 6 years ago
- 微博爬虫 有问题欢迎提出来☆17Updated 5 years ago
- 基于 Simhash 的论文查重系统☆73Updated 2 years ago