Alternatives and similar repositories for newscrawler:

Users that are interested in newscrawler are comparing it to the libraries listed below

• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆107Updated 9 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• evanleungc / GoldSentAnalysis
  黄金舆情数据分析
  ☆46Updated 7 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆71Updated 5 years ago
• lcdevelop / page-classify
  机器学习文本分类器
  ☆46Updated 8 years ago
• linyiqun / opinion-mining-system
  新闻评论观点挖掘系统，粗粒度的分析出新闻网评观点的倾向和走势
  ☆53Updated 9 years ago
• sileixinhua / News-classification
  新闻分类系统&谣言处理系统
  ☆80Updated 7 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 9 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• qibinlou / SinaWeibo-Emotion-Classification
  新浪微博情感分析应用
  ☆141Updated 9 years ago
• lcdevelop / weixin-crawler
  微信公众号批量抓取器
  ☆55Updated 8 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆20Updated 7 years ago
• TongzheZhang / DF-competition-sogou
  大数据精准营销中搜狗用户画像挖掘
  ☆36Updated 8 years ago
• YijunRan / Opinion-leaders-mining
  本文提出一种基于应答关系来挖掘QQ群中意见领袖的方法，该方法首先构建回应词词库，然后基于Aho-Corasick算法来匹配聊天文本中的回应词数据，构建出用户应答关系的网络结构，最后使用社交网络中重要节点识别的方法来发现意见领袖。该方法对QQ群中的意见领袖发现具有较高的准确率…
  ☆21Updated 8 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆42Updated 6 years ago
• Marco2333 / user-portrait
  twitter用户画像
  ☆32Updated 5 years ago
• multiangle / Distributed_Microblog_Spider
  分布式新浪微博爬虫
  ☆31Updated 8 years ago
• gsh199449 / DistributeCrawler
  基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类
  ☆76Updated 11 years ago
• alicelmx / wechat_public_spider
  通过搜狗搜索引擎爬取微信公众号文章
  ☆28Updated 7 years ago
• lihait / EmotionAnalysis
  针对手机评论数据的情感挖掘与分析项目，基于依存句法分析和情感词库提取特征词，并对特征词做情感极性预测标注。
  ☆34Updated 8 years ago
• felixglow / Tianyancha
  scrapy 爬取tianyancha网站的 公司注册信息
  ☆3Updated 5 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 8 years ago
• wemakebug / Knowledge
  基于知识图谱技术的搜素引擎研发
  ☆19Updated 7 years ago
• ml-distribution / semantic-similarity
  语义、情感、相似度分析。
  ☆58Updated 9 years ago
• miaofu / WebDataProduct
  A Web Page Of Public Sentiment For P2P Industry( P2P 行业的舆情分析前端展示)
  ☆25Updated 8 years ago
• ywcmaike / recommender_system
  使用scrapy框架爬取微博数据存储到mongodb中，利用numpy/tensorflow等python库对数据进行处理（基于transE算法），形成推荐系统。使用Springboot框架实现系统的可视化。有不同分支，master、transE、spring分别存储不同的…
  ☆17Updated 8 years ago
• Google1234 / Information_retrieva_Projectl-
  新闻检索：爬虫定向采集3-4个网页，实现网页信息的抽取、检索和索引。网页个数不少于10个，能按时间、相关度、热度等属性进行排序，并实现相似主题的自动聚类。可以实现：有相关搜索推荐、snippet生成、结果预览(鼠标移到相关结果， 能预览)功能
  ☆127Updated 8 years ago
• jfzhang95 / news_spider
  新闻爬虫 (腾讯,网易,新浪,今日头条,搜狐,凤凰网,腾讯滚动新闻)
  ☆55Updated 6 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• Glacier759 / Sentiment
  基于情感词典和朴素贝叶斯算法实现中文文本情感分类
  ☆82Updated 10 years ago