Alternatives and similar repositories for crawler

Users that are interested in crawler are comparing it to the libraries listed below

• YPSheng / python
  python-爬虫-web-数据分析
  ☆56Updated 6 years ago
• llzhi001 / Python-spider-1
  爬虫+数据分析可视化。爬取的网站有：知乎，淘宝，新浪微博，微信公众号，猫途鹰，今日头条，虎嗅网，人人都是产品经理，猫眼电影
  ☆76Updated 6 years ago
• BruceJu / LaGou-Distributed-Spider-Flask
  分布式采集拉钩网中杭州爬虫相关职位的数据并使用Flask进行数据的可视化与分析
  ☆37Updated 7 years ago
• makcyun / web_scraping_with_python
  Python 入门爬虫和数据分析实战
  ☆306Updated 5 years ago
• 15920036578 / JD_Spider
  京东爬虫（大量注释，对刚入门爬虫者极度友好）
  ☆72Updated 6 years ago
• PFFFei / rent
  基于Scrapy和Django的二手房爬虫及可视化
  ☆10Updated 2 years ago
• lihansunbai / Fang_Scrapy
  这是一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。
  ☆330Updated 9 years ago
• cheyo / LemonHouse
  基于Python + Django的深圳市新房数据分析程序 by cheyo
  ☆18Updated 10 years ago
• yanzhou / CnkiSpider
  中国知网爬虫
  ☆594Updated 4 months ago
• chenjiandongx / 51job-spider
  🔎 前程无忧 Python 招聘岗位信息爬取和分析
  ☆423Updated 7 years ago
• Andchenn / Analysis_Item
  3个小项目分别是利用 Python 实现报表自动化、某连锁超市、某银行数据分析，展示了问题分解、数据清洗、数据分析与可视化的过程。
  ☆45Updated 6 years ago
• Frank-qlu / recruit
  recruit 招聘爬虫+数据分析 1.爬虫： 采用Scrapy 分布式爬虫技术，使用mongodb作为数据存储，爬取的网站Demo为51job，数据我目前爬了有几千条 2.数据处理： 采用pandas对爬取的数据进行清洗和处理 2.数据分析： …
  ☆142Updated 3 years ago
• wangy8961 / python3-pyqt5-process-csv-data
  使用Python3 csv模块处理快收后台导出的商场优惠活动交易数据，统计各类优惠券的核销数量，以及实收款等汇总数据。测试数据 "1. 财务明细数据.csv" 已经删除了敏感信息，由于客户不想使用脚本，所以使用 PyQt5 编写了图形界面，再使用 pyinstaller 打…
  ☆25Updated 6 years ago
• 1414044032 / Sina_Spider
  新浪爬虫，基于Python+Selenium。模拟登陆后保存cookie，实现登录状态的保存。可以通过输入关键词来爬取到关键词相关的热门微博。
  ☆30Updated 6 years ago
• zhangxinxing / basic_of_datamining
  利用python中的pandas，sklearn进行数据挖掘
  ☆21Updated 9 years ago
• ShanYonggang / spider_list
  python爬虫及数据分析实战案例
  ☆43Updated 4 years ago
• RitterHou / music-163
  爬取网易云音乐所有歌曲的评论数
  ☆349Updated 8 years ago
• kba977 / Scrapy_Projects
  🕷一些Scrapy爬虫的练手项目
  ☆75Updated 6 years ago
• lawlite19 / PythonCrawler-Scrapy-Mysql-File-Template
  scrapy爬虫框架模板，将数据保存到Mysql数据库或者文件中。
  ☆215Updated 8 years ago
• CHHome / extra-income
  毕业设计 --外包项目网站 -- vue+python+flask+uwsgi+nginx
  ☆34Updated 2 years ago
• dangsh / hive
  lots of spider (很多爬虫）
  ☆117Updated 6 years ago
• shuizhubocai / crawler
  requests+lxml爬虫，简单爬虫架构
  ☆72Updated 6 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 7 years ago
• pengfexue2 / excelRelated
  读取文件夹内所有xls和xlsx格式文件，获取目标数据，生成新的xlsx文件
  ☆22Updated 6 years ago
• Qutan / Spider
  社交数据爬虫
  ☆219Updated 8 years ago
• yueningbo / 51job-spider-and-data-analysis
  python爬取前程无忧33751个python岗位数据, 并进行可视化分析
  ☆38Updated 5 years ago
• GreatV / CloudMusic-Crawler
  网易云音乐爬虫，数据可视化。
  ☆378Updated 6 years ago
• yaweihe / Django-beequick
  Django爱鲜蜂商城项目根据千峰网课教程编写，除了复现代码之外，做了一定的优化，旨在熟悉与理解Django框架。
  ☆13Updated 7 years ago
• simapple / spider
  test
  ☆163Updated 2 years ago
• pskun / finance_news_analysis
  金融新闻数据挖掘分析
  ☆343Updated 7 years ago