Alternatives and similar repositories for webEYE:

Users that are interested in webEYE are comparing it to the libraries listed below

• StrongBoy998 / CrawlArticle
  基于文字密度的新闻正文提取模块，兼容python2和python3，传入新闻网址或者网页源码即可返回标题，发布时间和正文内容。
  ☆14Updated 6 years ago
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆11Updated 4 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• stanleylsx / app_comments_spider
  爬取百度贴吧、TapTap、appstore、微博官方博主上的游戏评论(基于redis_scrapy)，过滤器采用了bloomfilter。
  ☆53Updated 6 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆71Updated 5 years ago
• henrylee123 / gzssztCrawler
  scrapy实现商事主体信息公示平台爬虫。查询工商注册信息的网站，输入关键词可以爬相关所有注册企业数据的数据。 网址：http://cri.gz.gov.cn/
  ☆25Updated 5 years ago
• url2io / url2io-python-sdk
  ⛔ [DEPRECATED] URL2io Python SDK，用于网页信息提取，如正文提取
  ☆41Updated 4 years ago
• Y-Matin / NewsSpider
  毕设：使用PYQT5 和 scrapy框架 结合readability正文提取算法，再用pyinstaller打包. 开发一个通用的爬虫系统
  ☆10Updated 4 years ago
• OSinoooO / MeituanSpider
  美团爬虫，基于scrapy_redis
  ☆21Updated 5 years ago
• Johnson0722 / News_scrapy_redis
  ☆31Updated 6 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆20Updated 7 years ago
• nickliqian / interactive_captcha
  交互式验证码（滑动、点选等）的识别方案和例子。
  ☆43Updated 6 years ago
• wuyue92tree / crwy
  一个简单的web爬虫框架，借鉴scrapy结构开发而来，并为scrapy使用者提供通用轮子^.^
  ☆13Updated 4 years ago
• zhangshier / scrapy-
  爬虫
  ☆14Updated 6 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 2 years ago
• qi20172017 / douyin_spider
  APP端爬取抖音数据
  ☆9Updated 5 years ago
• renqian520 / tb
  淘宝商品详情+评论爬虫+天猫工商执照（Scrapy、Redis）
  ☆26Updated 6 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated last year
• terry2tan / weiboCAR
  【爬虫】基于Scrapy开发的微博（评论、转发、点赞）爬虫，可以批量抓取。
  ☆27Updated 8 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆74Updated 6 years ago
• MgArcher / wenshu_jia
  基于scrapy实现裁判文书网爬虫
  ☆26Updated 4 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• jinhang / 12306_captcha
  CNN对12306、sina、baidu的验证码破解。
  ☆96Updated 8 years ago
• Germey / Weibo
  Weibo Spider
  ☆48Updated 7 years ago
• jerry3747 / douyin
  mitmproxy+appium实现抖音关键字搜索结果自动获取
  ☆17Updated 5 years ago
• JMXDSP / MMX-Spider
  抖音自动化爬取
  ☆12Updated 4 years ago