SpiderClub / weibospider

Related projects ⓘ

Alternatives and complementary repositories for weibospider

• LiuXingMing / SinaSpider
  新浪微博爬虫（Scrapy、Redis）
  ☆3,267Updated 6 years ago
• xianhu / PSpider
  简单易用的Python爬虫框架，QQ交流群：597510560
  ☆1,826Updated 2 years ago
• SpiderClub / haipproxy
  High available distributed ip proxy pool, powerd by Scrapy and Redis
  ☆5,440Updated last year
• SpiderClub / smart_login
  各大网站登陆方式，有的是通过selenium登录，有的是通过抓包直接模拟登录（精力原因，目前不再继续维护）
  ☆1,011Updated 2 years ago
• luyishisi / Anti-Anti-Spider
  越来越多的网站具有反爬虫特性，有的用图片隐藏关键数据，有的使用反人类的验证码，建立反反爬虫的代码仓库，通过与不同特性的网站做斗争（无恶意）提高技术。（欢迎提交难以采集的网站）（因工作原因，项目暂停）
  ☆7,281Updated 3 years ago
• lucasjinreal / weibo_terminater
  Final Weibo Crawler Scrap Anything From Weibo, comments, weibo contents, followers, anything. The Terminator
  ☆2,317Updated 5 years ago
• xchaoinfo / fuck-login
  模拟登录一些知名的网站，为了方便爬取需要登录的网站
  ☆5,868Updated 6 years ago
• qiyeboy / IPProxyPool
  IPProxyPool代理池项目，提供代理ip
  ☆4,172Updated 6 years ago
• gnemoug / distribute_crawler
  使用scrapy,redis, mongodb,graphite实现的一个分布式网络爬虫,底层存储mongodb集群,分布式使用redis实现,爬虫状态显示使用graphite实现
  ☆3,246Updated 7 years ago
• nghuyong / WeiboSpider
  持续维护的新浪微博采集工具🚀🚀🚀
  ☆3,675Updated 3 months ago
• awolfly9 / IPProxyTool
  python ip proxy tool scrapy crawl. 抓取大量免费代理 ip，提取有效 ip 使用
  ☆1,978Updated last year
• chyroc / WechatSogou
  基于搜狗微信搜索的微信公众号爬虫接口
  ☆5,917Updated 11 months ago
• jumper2014 / lianjia-beike-spider
  链家网和贝壳网房价爬虫，采集北京上海广州深圳等21个中国主要城市的房价数据（小区，二手房，出租房，新房），稳定可靠快速！支持csv,MySQL, MongoDB,Excel, json存储，支持Python2和3，图表展示数据，注释丰富 ，点星支持，仅供学习参考，请勿用于商…
  ☆2,823Updated 4 months ago
• ramsayleung / jd_spider
  Two dumb distributed crawlers
  ☆727Updated 5 years ago
• GeneralNewsExtractor / GeneralNewsExtractor
  新闻网页正文通用抽取器 Beta 版.
  ☆3,625Updated 4 months ago
• imWildCat / scylla
  Intelligent proxy pool for Humans™ to extract content from the internet and build your own Large Language Models in this new AI era
  ☆3,966Updated 2 months ago
• LiuRoy / zhihu_spider
  知乎爬虫
  ☆1,220Updated 8 years ago
• dataabc / weiboSpider
  新浪微博爬虫，用python爬取新浪微博数据
  ☆8,414Updated 5 months ago
• lzjun567 / zhihu-api
  Zhihu API for Humans
  ☆965Updated 3 years ago
• lining0806 / PythonSpiderNotes
  Python入门网络爬虫之精华版
  ☆6,923Updated 3 years ago
• Kr1s77 / Python-crawler-tutorial-starts-from-zero
  python爬虫教程，带你从零到一，包含js逆向，selenium, tesseract OCR识别,mongodb的使用，以及scrapy框架
  ☆4,356Updated 3 years ago
• egrcc / zhihu-python
  获取知乎内容信息，包括问题，答案，用户，收藏夹信息
  ☆2,292Updated 2 years ago
• isnowfy / snownlp
  Python library for processing Chinese text
  ☆6,428Updated 4 years ago
• marchtea / scrapy_doc_chs
  scrapy中文翻译文档
  ☆1,111Updated 5 years ago
• bowenpay / wechat-spider
  微信公众号爬虫
  ☆3,185Updated 3 years ago
• offu / WeRoBot
  WeRoBot 是一个微信公众号开发框架
  ☆4,585Updated 4 months ago