IshtarTang / weibo_spider
新浪微博爬虫，保存一个用户发过的所有内容，保存包括原链接、正文、评论等（微博换新UI同时也换了数据接口，该项目已无法使用，有发布另一个匹配新UI的项目需要可以用那个）
☆19Updated 3 years ago
Alternatives and similar repositories for weibo_spider:
Users that are interested in weibo_spider are comparing it to the libraries listed below
- 微博的爬虫，从个人主页开始 爬博文和评论，用的scrapy 框架☆29Updated 2 months ago
- 微博工具。提供超话签到功能、自动点赞功能。☆38Updated 6 years ago
- 爱奇艺，腾讯视频爬虫。趣头条，大鱼号，qq cookies http客户端。含腾讯视频滑块破解，视频接口逆向。a webspider for many chainese video website☆25Updated 2 years ago
- Python免费代理IP池。☆12Updated 3 years ago
- 无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。☆156Updated 3 years ago
- 根据关键词抓取微博数据，再生成词云☆220Updated 7 years ago
- 对淘宝（天猫）的评论爬取并进行简单分析☆27Updated 5 years ago
- 微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据☆283Updated 4 years ago
- 关于快手视频的django项目，之前使用爬虫，可以获取快手视频网站的视频，输入用户主页地 址，就可以获取用户的视频地址、粉丝数、点赞数等。现在这个项目准备实现：随机获取用户id并且去重，然后根据id获取主页视频信息，将获取的内容展示到网页上。后期还可以开发用户注册登录系统，可…☆20Updated 4 years ago
- 抓取up所有个人信息和所有视频信息（粉丝数，关注数，昵称，uid，性别，等级,注册时间，签名，称号，头像，代表作，视频总数，动画区、游戏区、科技区、生活区、国创区、影视区视频总数）（Up主的每个视频的全部弹幕，全部评论，标题，av号，时长，视频描述，封面，标签，硬币数，弹幕…☆27Updated 6 years ago
- 一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载☆136Updated 3 months ago
- 微博超话一键签到，蓝奏云密码：3d8a☆19Updated 3 years ago
- 各种爬虫（目前支持Instagram、Weibo、Twitter）Miscellaneous crawlers (currently including instagram, twitter, weibo etc.).☆33Updated 11 months ago
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆51Updated 5 years ago
- 最新的自动爬取微信公众号的实时更新文章、历史文章的爬虫，可以设置爬取关键词黑名单和白名单，支持对公众号的自动评论、点赞、转发。☆13Updated last year
- 一小时爬虫系列，关于<宅男福利>的爬虫，目测下载15万张图片☆33Updated 4 years ago
- 爬取微博用户关注列表，生成好友关系网，绘制社交关系图谱☆40Updated 2 years ago
- Python爬取微博，采集的数据属性如下：微博内容，是否原创，转发内容，发布时间，转发数，评论数，点赞数，设备源，微博ID。对于抓取到的页面源码分析不同属性对应的标签分别提取数据。最后将采集到的数据保存为csv格式，供数据分析使用。☆33Updated 5 years ago
- 微博超话经验全收集：评论、打榜、签到☆31Updated last year
- Bilibili排行榜-爬虫和数据分析实战☆41Updated 3 years ago
- 抖音昵称/号转为抖音uid☆12Updated 5 years ago
- 类大众点评的字体反爬☆16Updated 4 years ago
- 搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。☆19Updated 5 years ago
- 抖音,淘宝系,常见新闻爬虫☆14Updated 3 years ago
- 抖音无水印视频爬虫☆11Updated 5 years ago
- 该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地☆39Updated 5 years ago
- 中国新闻网爬虫（全站增量爬虫，可用时间至2019.7）☆17Updated 5 years ago
- 每小时抓取一次百度热搜☆12Updated this week
- 基于scrapy的中国国内各大新闻网站内容爬虫☆27Updated 3 years ago
- 微博内容及评论自动爬取☆45Updated 4 years ago