Alternatives and similar repositories for Scrapy-SearchEngines:

Users that are interested in Scrapy-SearchEngines are comparing it to the libraries listed below

• yanqiangmiffy / pyspider-project
  Python爬虫项目集合
  ☆58Updated 6 years ago
• Ryuchen / DeadPool
  该项目是一个使用celery作为主体框架的爬虫应用，能够灵活的添加爬虫任务，并且同时运行多站点的爬虫工作，所有组件都能够原生支持规模并发和分布式，加上celery原生的分布式调用，实现大规模并发。
  ☆41Updated 2 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• cnyangkui / html-extractor
  基于行块分布函数的通用网页正文抽取算法优化，Python实现
  ☆60Updated 5 years ago
• luobo157 / weiyuanchuang
  伪原创相关
  ☆14Updated 5 years ago
• downdawn / eswork
  ElasticSearch+Django+Scrapy搜索引擎
  ☆27Updated 2 years ago
• smile0304 / Article_Search
  国内技术文章搜索引擎
  ☆35Updated 7 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 5 years ago
• az0ne / WEIBO_USER_DATA
  一个以前的项目 收集了20W新浪微博用户的数据 可以用于数据分析
  ☆28Updated 9 years ago
• mymusise / Baidu-Hot
  记录每天百度搜索热点
  ☆24Updated 2 years ago
• hzhu212 / wechat-mp-crawler
  微信公众号爬虫，可抓取文章与评论
  ☆46Updated 5 years ago
• ZhaoMeng8959 / Spider-GongZhongHao
  微信公众号爬虫，根据指定公众号名称，爬取该公众号所有文章。
  ☆36Updated 3 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆66Updated 6 years ago
• neverneverendup / Translator
  互联网在线翻译引擎爬虫集合，包含谷歌翻译、百度翻译、有道翻译、必应翻译等引擎。Internet online translation engine crawler collection, including Google translation, Baidu transla…
  ☆80Updated 3 years ago
• crawlaio / zsxqcrawler
  知识星球爬虫
  ☆62Updated 4 years ago
• samzhangjy / BaiduSpider
  项目已经移动至：https://github.com/BaiduSpider/BaiduSpider ！！ 一个爬取百度搜索结果的爬虫，目前支持百度网页搜索，百度图片搜索，百度知道搜索，百度视频搜索，百度资讯搜索，百度文库搜索，百度经验搜索和百度百科搜索。
  ☆33Updated 4 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated 2 years ago
• rio-2607 / baidu_spider
  一个用BeautifulSoup写的简单的爬取百度搜索结果的爬虫
  ☆20Updated 9 years ago
• terry2tan / weiboCAR
  【爬虫】基于Scrapy开发的微博（评论、转发、点赞）爬虫，可以批量抓取。
  ☆27Updated 8 years ago
• mazzzystar / BaiduCrawler
  Sample of using proxies to crawl baidu search results.
  ☆118Updated 7 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆75Updated 6 years ago
• zhangyunhao116 / Mini-Spider
  简单、实用的爬虫工具，仅需四步创建属于你的爬虫程序！
  ☆48Updated 7 years ago
• liuhuanyong / WeiboIndexSpyder
  self complemented WeiboIndexSpyder based on Selenium ，新浪微博指数(微指数)采集，包括综合指数，移动端指数，PC端指数
  ☆31Updated 6 years ago
• cyhleo / DaZongDianPing
  爬取大众点评中11205条厦门美食商铺信息，其中包含店名、人均消费、所属菜系、所属商圈、详细地址、口味评分、环境评分、服务评分信息。
  ☆19Updated 5 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆21Updated 7 years ago
• shaonianruntu / Spam-Message-Word-Frequency
  Word frequency statistics of spam messages
  ☆37Updated 3 years ago
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆39Updated 5 years ago
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 2 years ago
• Litre-WU / businessInfo-api
  企业工商信息接口(包含天眼查、企查查、爱企查、国家企业公示系统平台、快准)
  ☆97Updated 2 years ago
• zhaoboy9692 / add_corporate_information_daily_of_china
  中国大陆 31 个省份最近几日新增工商企业注册信息以及其他部分企业数据，大概100余万信息，包含企业名称、注册地址、统一社会信用代码、省份、城市、注册日期、经营范围、负责人、邮箱、注册资金、企业类型等资料。 In 31 provinces in mainland China…
  ☆175Updated 5 years ago