Alternatives and similar repositories for User-Python-Write-a-web-crawler

Users that are interested in User-Python-Write-a-web-crawler are comparing it to the libraries listed below

• jin10086 / pachong
  一些爬虫的代码
  ☆147Updated 6 years ago
• Jaysong2012 / tutorial
  Scrapy爬虫实战系列，从零开始爬取腾讯百度淘宝知乎各大网站内容 \n 12306刷票脚本系列
  ☆82Updated 6 years ago
• lihansunbai / Fang_Scrapy
  这是一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。
  ☆327Updated 9 years ago
• lawlite19 / PythonCrawler-Scrapy-Mysql-File-Template
  scrapy爬虫框架模板，将数据保存到Mysql数据库或者文件中。
  ☆214Updated 7 years ago
• yyyy777 / crawler
  python爬虫练习
  ☆111Updated 6 years ago
• Germey / Zhihu
  Zhihu User Spider
  ☆133Updated 6 years ago
• keejo125 / web_scraping_and_data_analysis
  网络爬虫和数据分析，当当、豆瓣、知乎、猫眼、微信公众号、联想官网、今日头条爬虫
  ☆122Updated 6 years ago
• fuyunzhishang / python-spider
  拉钩职位爬虫
  ☆26Updated 7 years ago
• dangsh / hive
  lots of spider (很多爬虫）
  ☆118Updated 6 years ago
• Germey / TaobaoProduct
  Selenium Demo of Taobao Product
  ☆81Updated 6 years ago
• thsheep / mzitu_scrapy
  基于Scrapy的www.mzitu.com的全站图片下载脚本
  ☆71Updated 6 years ago
• qqxx6661 / scrapy-yzd
  该项目为scrapy框架脚手架，整合了自动切换agent，自动切换代理ip等中间件，可以下载后自行编写爬虫。 支持： 豆瓣电影，某东商品信息（名称价格等）。
  ☆35Updated 6 years ago
• Germey / MaoYan
  MaoYan Top100 Spider
  ☆61Updated 5 years ago
• TTyb / Baiduindex
  百度指数-图像识别抓取，逻辑不难，代码写得渣渣
  ☆172Updated 7 years ago
• CoolWell / wechat_spider
  基于搜狗微信入口的微信爬虫程序。 由基于phantomjs的python实现。 使用了收费的动态代理。 采集包括文章文本、阅读数、点赞数、评论以及评论赞数。 效率：500公众号/小时。 根据采集的公众号划分为多线程，可以实现并行采集。
  ☆233Updated 6 years ago
• zhangslob / Taobao_duoshou
  使用Scrapy采集淘宝数据，Flask展示
  ☆66Updated 7 years ago
• xiaosimao / wx_code
  公众号文章代码
  ☆62Updated 6 years ago
• Germey / Weibo
  Weibo Spider
  ☆49Updated 8 years ago
• pujinxiao / weixin
  scrapy搜狗微信文章爬取
  ☆38Updated 8 years ago
• echoTheLiar / DoubanAuto
  Automatic Robot for Douban | 豆瓣机器人：自动加入/退出小组、自动在小组发帖/删帖、自动回复
  ☆129Updated 7 years ago
• Northxw / City58
  58同城 (全国) 房屋信息爬虫
  ☆64Updated 6 years ago
• Python3WebSpider / ScrapySeleniumTest
  Scrapy Selenium on Taobao Product
  ☆84Updated 7 years ago
• Flowingsun007 / littleSpiders
  ☆110Updated 6 years ago
• zza2205260 / Python-sphinx
  利用python爬虫抓取了知乎上所有健身精华帖用户，并将他们的地理信息读取并做数据可视化展示在了百度地图上
  ☆11Updated 8 years ago
• zhangslob / Web-crawler-engineer-for-Python
  Web-crawler-engineer-for-Python
  ☆43Updated 6 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆109Updated 8 years ago
• cuanboy / scrapyTest
  SCRAPY爬虫实验，主要是一些简单的栗子，让你快速了解scrapy玩法！
  ☆134Updated 7 years ago
• Hopetree / Jobs-search
  招聘网站爬虫合集，不定期更新分支
  ☆139Updated 7 years ago
• Wooden-Robot / scrapy-tutorial
  Scrapy 爬虫框架教程源码
  ☆104Updated 5 years ago
• gusibi / momo
  微信聊天机器人
  ☆88Updated 5 years ago