Alternatives and similar repositories for Spiders:

Users that are interested in Spiders are comparing it to the libraries listed below

• linukey / DataMining-And-Social-Sentiment-Analysis-Based-On-Weibo
  基于微博的数据挖掘与社交舆情分析
  ☆214Updated 6 years ago
• dataabc / weiboPR
  用python判断微博用户的影响力
  ☆52Updated 9 years ago
• speciallurain / CNKI_Patent_SVM
  文本分类是指在给定分类体系下 , 根据文本的内容自动确定文本类别的过程。首先我们根据scrapy爬虫根据中国知网URL的规律，爬取70多万条2014年公开的发明专利，然后通过数据清洗筛选出了60多万条含标签数据。通过TF-IDF对60多万条本文进行词频提取，依照词频排序提取…
  ☆106Updated 7 years ago
• chhu1 / tripCAnalysis
  游客旅行评论爬虫 + 词频分析 + 情感分析（使用达观数据API）
  ☆23Updated 7 years ago
• MaxwellJack / pinglun_spyder
  关于百度旅游、大众点评、驴妈妈、猫途鹰、携程的评论爬虫
  ☆23Updated 6 years ago
• GGL12 / TextMining
  某电商手机评论的文本挖掘初体验 功能板块：数据预处理、LDA模型获取特征词、情感极性判断与程度计算、回归模型预测销量排序
  ☆116Updated 6 years ago
• CarryChang / UGC-Analysis
  本软件包括对于百度外卖平台的原始评论采集、评论情感计算并分类展示、以及对于用户打分、服务评分等结构化数据进行可视化三个主要功能模块。本软件的主要技术特征在于改造和使用了网络爬虫，来为本软件提供实时数据采集的能力，并将评论情感极性分析和用户打分相结合，在首先考虑用户打分的情况…
  ☆45Updated 4 years ago
• ChenHuabin321 / zhihuSpider
  本爬虫用于爬取知乎网站问题、回答的相关字段信息，问题的标题、内容、发布时间、话题、回答数量、评论数、点击数、关注数等字段，及对该问题回答的内容，作者、点赞数、评论数、回答时间等等字段信息。可用于对社会话题、热点进行数据分析。
  ☆43Updated 6 years ago
• Gordon-Deng / CrawlWeiBo
  Python爬取微博，采集的数据属性如下：微博内容，是否原创，转发内容，发布时间，转发数，评论数，点赞数，设备源，微博ID。对于抓取到的页面源码分析不同属性对应的标签分别提取数据。最后将采集到的数据保存为csv格式，供数据分析使用。
  ☆33Updated 5 years ago
• raymon-tian / networkPublicOpinionAnalysisSystem
  网络舆情分析系统
  ☆184Updated 9 years ago
• langgithub / yuqing_system
  线下爬虫设计 舆情新闻系统 LDA主题分类 关键字提取 实现一个文本分类器
  ☆16Updated 5 years ago
• gugug / WeiboNewsProject
  系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务
  ☆91Updated 6 years ago
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆12Updated 4 years ago
• CarryChang / Real_Time_DataMining_Software
  携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…
  ☆75Updated 4 years ago
• xiaopangxia / duck_prophet
  春江水暖“鸭先知”，“鸭先知”是一个利用新闻文本做舆情分析的系统
  ☆46Updated 4 years ago
• Jacen789 / HotNewsAnalysis
  利用文本挖掘技术进行新闻热点关注问题分析
  ☆161Updated 6 years ago
• NateHuangHao / sina_comment
  一个基于SnowNLP的新浪微博评论情感分析工具
  ☆49Updated 7 years ago
• sherpahu / Weibo_User_portrait
  基于Flask和爬虫的微博用户画像生成器
  ☆14Updated 4 years ago
• Yuzhen-Li / Analysis-of-Public-Opinion-Based-on-Microblogging-Reptile
  这是我参加招商银行fintech精英选拔时，做的一个课题。用Python对新浪微博进行爬虫，然后进行舆情分析。爬虫之前，需要模拟登陆，这里采用RSA加密模块模拟登陆。舆情分析的时候，我直接调用腾讯文智的感情分析API。
  ☆201Updated 7 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆38Updated 5 years ago
• galaxyyao / public-opinion-analysis
  舆情分析平台
  ☆34Updated 7 years ago
• rio26 / weibo-comments-word-cloud
  微博评论爬虫+评论html tag清洗+中文词云生成
  ☆27Updated 6 years ago
• iaminblacklist / Financial_Analysis
  基于分布式爬虫，采集互联网公开来源的金融类新闻和文档类文本； 基于文本挖掘技术，进行无监督/半监督学习的数据ETL与特征工程； 基于金融数据挖掘技术，进行宏观经济分析，基本面分析与行业分析
  ☆102Updated 6 years ago
• ljw9609 / SentimentAnalysis
  基于新浪微博数据的情感极性分析
  ☆59Updated 6 years ago
• ZingBug / WeiboSentimentAnalysis
  微博模拟登录+微博关键词爬虫+微博短文本情感语义分析+生成词云
  ☆20Updated 6 years ago
• Henryhaohao / Xiecheng_Comment
  Xiecheng_Comment多线程Threading爬取携程的丽江古城景点评论并生成词云
  ☆25Updated 6 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆44Updated 7 years ago
• timmmGZ / Weibo-sentiment-analysis-and-crawler
  情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫
  ☆68Updated 4 years ago
• Davidchent / David
  知网爬虫cnkispider，输入关键字爬取知网检索数据
  ☆34Updated 7 years ago
• melo4 / weibo
  微博评论爬取及nlp情感分析
  ☆20Updated 7 years ago