Alternatives and similar repositories for Scrapy-SearchEngines:

Users that are interested in Scrapy-SearchEngines are comparing it to the libraries listed below

• Ryuchen / DeadPool
  该项目是一个使用celery作为主体框架的爬虫应用，能够灵活的添加爬虫任务，并且同时运行多站点的爬虫工作，所有组件都能够原生支持规模并发和分布式，加上celery原生的分布式调用，实现大规模并发。
  ☆40Updated 2 years ago
• cnyangkui / html-extractor
  基于行块分布函数的通用网页正文抽取算法优化，Python实现
  ☆58Updated 4 years ago
• crawlaio / zsxqcrawler
  知识星球爬虫
  ☆60Updated 4 years ago
• mymusise / Baidu-Hot
  记录每天百度搜索热点
  ☆24Updated 2 years ago
• samzhangjy / BaiduSpider
  项目已经移动至：https://github.com/BaiduSpider/BaiduSpider ！！ 一个爬取百度搜索结果的爬虫，目前支持百度网页搜索，百度图片搜索，百度知道搜索，百度视频搜索，百度资讯搜索，百度文库搜索，百度经验搜索和百度百科搜索。
  ☆32Updated 4 years ago
• shibing624 / pinyin-tokenizer
  pinyintokenizer, 拼音分词器，将连续的拼音切分为单字拼音列表。
  ☆28Updated last year
• az0ne / WEIBO_USER_DATA
  一个以前的项目 收集了20W新浪微博用户的数据 可以用于数据分析
  ☆27Updated 9 years ago
• lemontang93 / news_feed
  🌏实时监控900多家中国企业的新闻动态
  ☆20Updated 7 years ago
• eastmountyxz / CSDNBlog-AI-for-Python
  为了更好地管理博客文章，分享更好的知识，该系列资源为作者CSDN博客的备份文件。本资源为作者Python人工智能的系列博客，涉及Theano、TensorFlow、Keras搭建的回归神经网络、CNN、RNN、LSTM等内容。基础性文章，希望对您有所帮助。
  ☆21Updated 3 years ago
• realzhengyiming / newsSpier_scrapy
  news spider wrote by scrapy ,now it can crawl the news in sina ,and continue to update it.这个是多新闻的增量爬虫版本，爬取腾讯，网易，搜狐的每日新闻 scrapy 实现的版本
  ☆11Updated 5 years ago
• deng00 / auto-proxy
  自动切换代理IP的代理
  ☆26Updated last year
• yanqiangmiffy / pyspider-project
  Python爬虫项目集合
  ☆54Updated 6 years ago
• sph116 / zhongxin_search
  中国新闻网爬虫（全站增量爬虫，可用时间至2019.7）
  ☆16Updated 5 years ago
• iwhgao / PyTextScan
  利用python脚本对文本内容进行敏感信息的识别与过滤
  ☆36Updated 9 years ago
• carrie0307 / MyNotes
  学习笔记
  ☆17Updated 5 years ago
• fly-dragon211 / Wechat-message-analysis
  a Wechat-message-analysis.
  ☆27Updated 4 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆40Updated 4 years ago
• shaonianruntu / Spam-Message-Word-Frequency
  Word frequency statistics of spam messages
  ☆37Updated 2 years ago
• yaleimeng / Free_proxy_pool
  对免费代理IP网站进行爬取，收集汇总为自己的代理池。关键是验证代理的有效性、匿名性、去重复
  ☆77Updated 3 years ago
• lxzmads / zsxqbackup
  知识星球备份工具
  ☆98Updated 3 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆37Updated 5 years ago
• Evilran / baidusearch_spider
  百度搜索爬虫，爬取百度搜索结果
  ☆16Updated 2 years ago
• Sakura-cheng / telegram_spider
  利用telethon获取telegram信息
  ☆28Updated 3 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated last year
• wizardforcel / pytorch-doc-zh
  PyTorch 中文文档
  ☆14Updated 6 years ago
• 309892489 / sensitive_data_discover
  针对数据库的敏感数据检测脚本：扫描库、schema级别的表或视图的数据，发现其中的敏感字段。敏感类型包括姓名、电话、身份证号、电子邮箱、地址、银行账号。
  ☆37Updated 6 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆63Updated 5 years ago
• wangluozhe / toutiao
  今日头条用户数据的文章和视频爬取
  ☆49Updated 4 years ago
• CVUsers / Gpt-2-Chinese
  Chinese text generation, now open source news and prose model and code
  ☆24Updated last year
• ljk99 / fangchan
  房产语料库
  ☆24Updated 6 years ago