Alternatives and similar repositories for structure_spider

Users that are interested in structure_spider are comparing it to the libraries listed below

• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆45Updated 8 years ago
• chenjiandongx / pyocr
  利用 tesseract 解析简单数字验证码图片
  ☆21Updated 7 years ago
• awolfly9 / job_wxbot
  微信机器人抓取并分发招聘信息
  ☆25Updated 8 years ago
• ShichaoMa / proxy_factory
  基于redis的简单代理工厂
  ☆61Updated 2 years ago
• qiaofei32 / yunCrawler
  智能云爬虫Demo
  ☆32Updated 8 years ago
• netxfly / dianying
  中国主流在线电影网站爬虫及搜索web代码
  ☆35Updated 11 years ago
• dingyaguang117 / ImageRecognizeOf58
  58同城图片验证码识别
  ☆58Updated 10 years ago
• conwaywang / jiemeibang
  python实现采集数据并发表到论坛中。涉及数据的爬取分析，discuz论坛的登录、发帖及回复等
  ☆40Updated 11 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆104Updated 7 years ago
• LiuRoy / spider_docker
  为爬虫引用创建container，包括的模块：scrapy, mongo, celery, rabbitmq
  ☆37Updated 9 years ago
• hk029 / LagouSpider
  【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）
  ☆83Updated 9 years ago
• jinhang / 12306_captcha
  CNN对12306、sina、baidu的验证码破解。
  ☆96Updated 9 years ago
• Rockyzsu / getProxy
  爬虫获取http://www.xicidaili.com/ 代理服务器
  ☆84Updated 8 years ago
• arrti / proxypool
  A python async proxy crawler and proxy pool.
  ☆14Updated 8 years ago
• howie6879 / hproxy
  hproxy - Asynchronous IP proxy pool, aims to make getting proxy as convenient as possible.(异步爬虫代理池)
  ☆66Updated 3 years ago
• zhangslob / Taobao_duoshou
  使用Scrapy采集淘宝数据，Flask展示
  ☆66Updated 7 years ago
• staugur / grab_huaban_board
  这是Python版花瓣网爬虫，js版用户脚本请访问https://github.com/staugur/userscript
  ☆44Updated 4 years ago
• facert / scrapy_helper
  Dynamic configurable crawl (动态可配置化爬虫)
  ☆87Updated 7 years ago
• strongbugman / ant_nest
  Simple, clear and fast Web Crawler framework build on python3.6+, powered by asyncio.
  ☆95Updated 3 years ago
• cw1997 / get-email-by-tieba
  用于抓取贴吧发帖中的手机号和电子邮箱的一个爬虫
  ☆63Updated 8 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 9 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆110Updated 8 years ago
• qqxx6661 / flask_yzd
  旧版某东监控网站前后端，轻量级Flask网站，可用作学习Flask
  ☆74Updated 2 years ago
• lsdlab / 80s_spider
  www.80s.tw 爬虫，用 pyspider，只爬电影、电视剧、动漫、综艺，爬取后存储至 MongoDB。
  ☆16Updated 7 years ago
• darrenfantasy / image_crawler
  网站图片爬虫(已包含：微博，微信公众号，花瓣网)及免费IP代理 豆瓣电影爬虫
  ☆145Updated 8 years ago
• widy28 / scrapy-taobao
  scrapy模拟淘宝登陆
  ☆74Updated 5 years ago
• luyishisi / Nyspider
  各种爬虫---大众点评,安居客，58，人人贷，拍拍贷, IT桔子,拉勾网，豆瓣,搜房网,ASO100,气象数据,猫眼电影,链家,PM25.in...
  ☆198Updated 8 years ago
• pkhopper / scripts
  视频、直播下载（m3u8）；http多线程、分段下载库（miniaxel）；系统配置备份工具；单词笔记等
  ☆13Updated 8 years ago
• Vespa314 / douban_scrapy
  将会陆续添加豆瓣里面各种信息的爬虫代码和分析
  ☆25Updated 11 years ago