h2pl / pyspider

知乎爬虫和v2ex爬虫的实现。使用python的pyspider爬虫进行开发,主要爬取知乎的问题和评论,以及v2ex的帖子。数据转储到mysql数据库,用于zhihu项目的使用。
68Updated 6 years ago

Alternatives and similar repositories for pyspider:

Users that are interested in pyspider are comparing it to the libraries listed below