Alternatives and similar repositories for baidu_spider:

Users that are interested in baidu_spider are comparing it to the libraries listed below

• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• AillsonWei / niusouyixia
  面向证券信息类专业搜索引擎，基于WEB信息挖掘技术的专业搜索引擎设计与实现并着重分析基于特定主题的爬取方法，通过下载Internet上WEB文档，进行过滤、分词、转换等处理工作，并建立索引数据库，最终可由检索器通过用户输入查询关键字，搜索器支持微博客、短信等内容短小而又不规…
  ☆23Updated 6 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆106Updated 7 years ago
• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆108Updated 9 years ago
• miaofu / WebDataProduct
  A Web Page Of Public Sentiment For P2P Industry( P2P 行业的舆情分析前端展示)
  ☆25Updated 9 years ago
• nladuo / lianjia_crawler
  学习scrapy，爬取链家网北京二手房信息并进行数据可视化。
  ☆19Updated 7 years ago
• wanghuafeng / zhihu_spider
  知乎爬虫---知乎点赞数超过1000的问题及回答，知乎神回复
  ☆23Updated 8 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆35Updated 9 years ago
• shuizhengqi1 / MaiMaiSpider
  ☆14Updated 7 years ago
• AoboJaing / thirdDemo
  python3 scrapy crawler crawl taobao.com, data import to MySQL
  ☆21Updated 8 years ago
• build2last / NCspider
  A Scrapy Project 中文门户网站新闻和评论抓取——重启维护工作
  ☆14Updated 2 years ago
• shidenggui / huatai_web_java
  华泰 Web 接口的 Java版本
  ☆10Updated 9 years ago
• JackonYang / renren
  人人网信息抓取与数据挖掘。social network analysis
  ☆96Updated 10 years ago
• llfccc / qichachaSpider
  企查查的scrapy爬虫实践
  ☆12Updated 8 years ago
• shelmesky / crawler
  淘宝爬虫原型，基于gevent
  ☆49Updated 11 years ago
• iamccme / weibo-mining
  微博情感分析
  ☆12Updated 11 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• JackonYang / distributed-vertical-crawlers
  分布式垂直爬虫框架 & 爬虫们
  ☆15Updated 9 years ago
• lzxue / 51job
  下载51job招聘信息，公司简介，岗位简介，经纬度
  ☆32Updated 10 years ago
• sunshinenum / sina_news
  基于Scrapy的爬虫，爬取新浪新闻，数据库使用mysql和mongoDB附带master分支docker镜像。
  ☆19Updated 8 years ago
• wukaiying / EventWarning
  食品安全舆情分析系统（前端展示模块）
  ☆15Updated 9 years ago
• KDF5000 / SpiderRef
  爬虫资料汇总
  ☆17Updated 9 years ago
• cforth / stock-trading
  股票模拟交易网站（PHP + MySQL实现）。
  ☆23Updated 10 years ago
• zongtui / zongtui-webcrawler
  基于hadoop思维的分布式网络爬虫。
  ☆86Updated 9 years ago
• chenjiandongx / pyocr
  利用 tesseract 解析简单数字验证码图片
  ☆21Updated 6 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 8 years ago
• ChenHuabin321 / company_ino_spider
  本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。
  ☆24Updated 6 years ago
• gsh199449 / DistributeCrawler
  基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类
  ☆77Updated 11 years ago
• andieguo / poi-parent
  关于通过百度地图API采集POI数据，并存储到HBase的项目。
  ☆24Updated 9 years ago