Alternatives and similar repositories for Scrapy-SearchEngines

Users that are interested in Scrapy-SearchEngines are comparing it to the libraries listed below

• Ryuchen / DeadPool
  该项目是一个使用celery作为主体框架的爬虫应用，能够灵活的添加爬虫任务，并且同时运行多站点的爬虫工作，所有组件都能够原生支持规模并发和分布式，加上celery原生的分布式调用，实现大规模并发。
  ☆40Updated 3 years ago
• crawlaio / zsxqcrawler
  知识星球爬虫
  ☆65Updated 5 years ago
• zezhix / html-extractor
  基于行块分布函数的通用网页正文抽取算法优化，Python实现
  ☆61Updated 5 years ago
• deng00 / auto-proxy
  自动切换代理IP的代理
  ☆25Updated last year
• JackonYang / maya
  骂丫--对骂机器人。君子动口不动手，科技改变骂丫
  ☆236Updated 3 years ago
• luobo157 / weiyuanchuang
  伪原创相关
  ☆14Updated 6 years ago
• howie6879 / magic_google
  Google search results crawler, get google search results that you need
  ☆407Updated last year
• ljk99 / fangchan
  房产语料库
  ☆26Updated 7 years ago
• ZhaoMeng8959 / Spider-GongZhongHao
  微信公众号爬虫，根据指定公众号名称，爬取该公众号所有文章。
  ☆36Updated 3 years ago
• Evilran / baidusearch_spider
  百度搜索爬虫，爬取百度搜索结果
  ☆16Updated 3 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆67Updated 6 years ago
• LunaticTian / TieBa-API-Sentiment
  贴吧API 微信智能控制 贴吧舆情监控 关键词分析 热点分析 python3 爬虫
  ☆103Updated 5 years ago
• txtcn / data
  中文语料库-每日自动更新版 ── 语料文件
  ☆162Updated 4 years ago
• az0ne / WEIBO_USER_DATA
  一个以前的项目 收集了20W新浪微博用户的数据 可以用于数据分析
  ☆28Updated 9 years ago
• 1049451037 / MagicBaidu
  Baidu search API. Get baidu search results. Brother repository of MagicGoogle. 百度搜索API
  ☆29Updated 7 years ago
• shaonianruntu / Spam-Message-Word-Frequency
  Word frequency statistics of spam messages
  ☆37Updated 3 years ago
• lxzmads / zsxqbackup
  知识星球备份工具
  ☆104Updated 4 years ago
• wuyifan18 / spider
  裁判文书网爬虫
  ☆39Updated 2 years ago
• zhaoboy9692 / add_corporate_information_daily_of_china
  中国大陆 31 个省份最近几日新增工商企业注册信息以及其他部分企业数据，大概100余万信息，包含企业名称、注册地址、统一社会信用代码、省份、城市、注册日期、经营范围、负责人、邮箱、注册资金、企业类型等资料。 In 31 provinces in mainland China…
  ☆181Updated 5 years ago
• fly-dragon211 / Wechat-message-analysis
  a Wechat-message-analysis.
  ☆29Updated 5 years ago
• mscb402 / Cybertrolls-Detection
  Cybertrolls Detection using deep learning （基于深度学习的网络欺凌/网络暴力检测）
  ☆34Updated last year
• wbsabc / zsxq-spider
  爬取知识星球内容，并制作 PDF 电子书。
  ☆213Updated 4 years ago
• Zzzz0zzzZ / py-spider-for-wechat
  微信公众号爬虫，PyQT5搭建GUI界面，request实现多线程爬虫。
  ☆40Updated 2 years ago
• Litre-WU / businessInfo-api
  企业工商信息接口(包含天眼查、企查查、爱企查、国家企业公示系统平台、快准)
  ☆110Updated 2 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆76Updated 3 years ago
• lining0806 / TextFilter
  敏感词过滤系统
  ☆60Updated 9 years ago
• kelvinBen / HistoricalArticlesToPdf
  一款可以将微信公众号历史文章、知识星球历史文章、博客文章批量转换为PDF的工具。
  ☆77Updated 4 years ago
• shakenetwork / onionscan
  OnionScan暗网爬虫是一个免费的开源工具，用于调查黑网。 OnionScan is a free and open source tool for investigating the Dark Web https://github.com/s-rah/onionsca…
  ☆51Updated 8 years ago
• Leezj9671 / socialdb_vue_flask
  一个小型的较为简陋的社工库查询系统,使用Vue.js+Flask+MongoDB.可用52g, 本人不提供任何社工库资源. A tiny social engineering database system, including backend and frontend.
  ☆258Updated 6 years ago
• wainshine / Medical-Names-Corpus
  医疗语料库。医疗机构名语料库。药品本位码。
  ☆69Updated last year