Alternatives and similar repositories for Scrapy-Kafka-Demo:

Users that are interested in Scrapy-Kafka-Demo are comparing it to the libraries listed below

• adrian9631 / CrawlerMonitor
  爬虫监控及可视化 ( Prometheus and Grafana ) Building a crawler with distributed task queues (Celery) and fetching data with a reliable monitor sy…
  ☆45Updated 2 years ago
• Germey / DragCaptcha
  Drag Captcha
  ☆20Updated 3 years ago
• tianjingle / sMain
  sMain 实时个股盯盘，交易信号邮件提醒，微信提醒，短信提醒，好望角，分水岭，一鼓作气，顶底指标。
  ☆18Updated 2 years ago
• runtangr / taoyoulue_spider
  基于mongodb存储，redis缓存，celery 实现的分布式爬虫。
  ☆13Updated 2 years ago
• tenlee2012 / scrapy-kafka-redis
  Distributed crawling/scraping, Kafka And Redis based components for Scrapy
  ☆45Updated 4 years ago
• Metatronxl / phantom
  怪盗キッド（Kaitou Kiddo）
  ☆23Updated 2 years ago
• apachecn / fastapi-docs-cn
  官方文档已经有翻译的人在做了，
  ☆27Updated 5 years ago
• crawlab-team / crawlab-sdk
  SDK for Crawlab, including SDK for different programming languages such as Python, Node.js and Java, and a CLI Tool written in Python.
  ☆55Updated 9 months ago
• ltachi1 / amasd
  Amasd是一款基于scrapyd的scrapy部署工具
  ☆28Updated 5 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 4 years ago
• saintic / flask-thirdLogin-demo
  使用Flask的第三方社会化账号登录演示样例，QQ、Weibo、GitHub等。
  ☆21Updated 8 years ago
• 1414044032 / pyppeteer_taobao
  基于pyppeteer实现对淘宝网的模拟登陆
  ☆11Updated 5 years ago
• apachecn / scrapy-doc-zh
  Scrapy 1.6 文档
  ☆30Updated 4 years ago
• xsren / frontera-docs-zh_CN
  frontera的中文翻译文档
  ☆36Updated 7 years ago
• fandsimple / chrome_copy
  chrome浏览器扩展，复制各大平台文章为本地文章
  ☆26Updated 4 years ago
• shiqinying / AdslProxy
  自己搭建的adsl动态拨号代理池
  ☆14Updated 5 years ago
• aleimu / asyncio_different
  go与python的协程对比,以及python中协程的改进历史,和示例代码
  ☆39Updated 5 years ago
• Germey / Review_Reverse
  2019年末总结下今年做过的逆向，整理代码，复习思路。拼夕夕Web端anti_content参数逆向分析 WEB淘宝sign逆向分析；努比亚Cookie生成逆向分析；百度指数data加密逆向分析 今日头条WEB端_signature、as、cp参数逆向分析知乎登录formd…
  ☆47Updated 5 years ago
• cyhleo / DaZongDianPing
  爬取大众点评中11205条厦门美食商铺信息，其中包含店名、人均消费、所属菜系、所属商圈、详细地址、口味评分、环境评分、服务评分信息。
  ☆19Updated 4 years ago
• aniu-lee / xiaoniu_cron
  基于APScheduler二次开发，支持集群，可视化，API动态调用等等。BUG及时通知到微信，网页等等。
  ☆61Updated 2 years ago
• sml2h3 / openlawClawer
  openlaw数据爬虫v1.1 更新日期:2017.12.16 解决新版openlaw多种加密问题。引入celery轻松异步分布式，爬取速度再次翻倍！！
  ☆58Updated 5 years ago
• jiongmefeishi / jiongmefeishi
  这里收集整理最近两年大厂多篇真实面经，整理出一批高频面试题，其中包括腾讯，阿里，字节跳动，百度，京东，美团等一线大厂。
  ☆14Updated 2 years ago
• yoonper / ZooHelper
  ZooKeeper可视化工具
  ☆15Updated 7 years ago
• yangxb2010000 / delay-schedule
  分布式、高可用的延迟调度系统、可以配合消息队列实现延迟任务队列
  ☆12Updated last year
• analysys / Kong_Plus
  易观KongPlus
  ☆19Updated 2 years ago
• yangcvo / MySQL5.6
  mysql.mongodb,sqlite,主从，读写分离，优化，监控
  ☆31Updated 8 years ago
• ToonoW / SpiderManager
  爬虫管理平台
  ☆31Updated 2 years ago
• yeyeye777 / weixin_article_spider
  搜狗微信文章爬虫，对于临时链接进行转换为永久链接。
  ☆11Updated 4 years ago
• solarhell / ZhihuZhuanlanCrawler
  知乎专栏爬虫
  ☆22Updated 3 years ago
• Python3WebSpider / AjaxHookSpider
  Ajax Hook Demo
  ☆29Updated 4 years ago