Alternatives and similar repositories for NCspider

Users that are interested in NCspider are comparing it to the libraries listed below

• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆109Updated 9 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• lcdevelop / page-classify
  机器学习文本分类器
  ☆46Updated 8 years ago
• multiangle / Distributed_Microblog_Spider
  分布式新浪微博爬虫
  ☆31Updated 8 years ago
• guiyang882 / NewsSearch
  主要使用python+Scrapy框架去抓取新闻网站
  ☆25Updated 8 years ago
• sunshinenum / sina_news
  基于Scrapy的爬虫，爬取新浪新闻，数据库使用mysql和mongoDB附带master分支docker镜像。
  ☆19Updated 8 years ago
• xianhu / PSpiderDemos
  demos based on PSpider
  ☆17Updated 6 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• mathbugua / zheye
  在线问答系统，享受分享知识的快乐
  ☆53Updated 2 years ago
• llfccc / qichachaSpider
  企查查的scrapy爬虫实践
  ☆12Updated 8 years ago
• build2last / EC-Master
  电商爬虫与观点挖掘 Crawler:selenium+phantomJS. NLP: NLTK + jieba. 施工中...
  ☆15Updated 7 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆35Updated 10 years ago
• MashiMaroLjc / dudulu
  APIs of text mining
  ☆34Updated 8 years ago
• yanshengli / sina_weibo_crawler
  利用urllib2加beautifulsoup爬取新浪微博
  ☆69Updated 9 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆47Updated 7 years ago
• liuhuanyong / WeiboIndexSpyder
  self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数
  ☆31Updated 7 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• Germey / Weibo
  Weibo Spider
  ☆49Updated 8 years ago
• YijunRan / Opinion-leaders-mining
  本文提出一种基于应答关系来挖掘QQ群中意见领袖的方法，该方法首先构建回应词词库，然后基于Aho-Corasick算法来匹配聊天文本中的回应词数据，构建出用户应答关系的网络结构，最后使用社交网络中重要节点识别的方法来发现意见领袖。该方法对QQ群中的意见领袖发现具有较高的准确率…
  ☆21Updated 8 years ago
• tpeng / weibosearch
  A distributed Sina Weibo Search spider base on Scrapy and Redis.
  ☆145Updated 12 years ago
• younghz / scrapy-redis
  Redis-based components for scrapy that allows distributed crawling
  ☆46Updated 10 years ago
• terry2tan / weiboCAR
  【爬虫】基于Scrapy开发的微博（评论、转发、点赞）爬虫，可以批量抓取。
  ☆27Updated 8 years ago
• xiaosimao / weibo_spider
  ☆20Updated 8 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 7 years ago
• boss-mao / scrapy_enterprise_architecture
  python scrapy 企业级分布式爬虫开发架构模板
  ☆91Updated 7 years ago
• CodingCrush / LianJia_Crawl
  使用aiohttp+asyncio简易的上海链家租房爬虫
  ☆23Updated 8 years ago
• luzhijun / weiboSA
  微博主题搜索分析，上海租房
  ☆115Updated 8 years ago
• Johnson0722 / News_scrapy_redis
  ☆32Updated 6 years ago
• zhisheng17 / Python-Projects
  some projects of python during my study
  ☆49Updated 8 years ago