nghuyong / WeiboSpider
持续维护的新浪微博采集工具🚀🚀🚀
☆3,684Updated 3 months ago
Related projects ⓘ
Alternatives and complementary repositories for WeiboSpider
- 微博爬虫及配套工具箱，微博用户、话题、评论采集一网打尽。图片下载、情感分析，地理位置、关系网络、spammer 机器人识别等功能应有尽有。Docs：https://buyixiao.github.io/blog/weibo-super-spider.html 配套可视化网站…☆1,600Updated last year
- 获取微博搜索结果信息，搜索即可以是微博关键词搜索，也可以是微博话题搜索☆1,737Updated 5 months ago
- A distributed crawler for weibo, building with celery and requests.☆4,807Updated 4 years ago
- 新浪微博爬虫，用python爬取新浪微博数据☆8,441Updated 6 months ago
- Weibo-COV: A Large-Scale COVID-19 Social Media Dataset from Weibo☆575Updated last year
- 借助Python抓取微博数据， 并对抓取的数据进行情绪分析☆352Updated last year
- Social media (Weibo) comments analyzing toolbox in Chinese 微博评论分析工具, 实现功能: 1.微博评论数据爬取; 2.分词与关键词提取; 3.词云与词频统计; 4.情感分析; 5.主题聚类☆759Updated 5 years ago
- 新浪微博爬虫（Scrapy、Redis）☆3,268Updated 6 years ago
- 使用python抓取微博数据并对微博文本分析和可视化，LDA（树图）、关系图、词云、时间趋势（折线图）、热度地图、词典情感分析（饼图和3D柱状图）、词向量神经网络情感 分析、tfidf聚类、词向量聚类、关键词提取、文本相似度分析等☆816Updated 4 years ago
- 长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房☆367Updated 3 years ago
- 越来越多的网站具有反爬虫特性，有的用图片隐藏关键数据，有的使用反人类的验证码，建立反反爬虫的代码仓库，通过与不同特性的网站做斗争（无恶意）提高技术。（欢迎提交难以采集的网站）（因工作原因，项目暂停）☆7,285Updated 3 years ago
- 无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信 息、用户微博及其微博评论转发。☆152Updated 2 years ago
- 爬取关注列表中微博账号的微博☆179Updated 6 months ago
- 微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据☆269Updated 4 years ago
- 微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider☆125Updated last year
- 新闻网页正文通用抽取器 Beta 版.☆3,632Updated 4 months ago
- 美团APP爬虫，可获取指定城市范围内所有美食店铺信息，包含店铺名称、类别、评分、所属片区、经纬度、详细地址、优惠套餐情况、营业时间、联系电话、累计售出份数、餐厅简介、特色菜......☆345Updated 4 years ago
- 澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所得数据商用！☆351Updated 2 years ago
- 基于搜狗微信搜索的微信公众号爬虫接口☆5,924Updated last year
- python 爬虫，目前库存：网易云音乐歌曲爬取，B站视频爬取，知乎问答爬取，壁纸爬取，xvideos视频爬取，有声书爬取，微博爬虫，安居客信息爬取+数据可视化，哔哩哔哩视频封面提取器，ip代理池封装，知乎百万级用户爬虫+数据分析，github用户爬虫☆1,272Updated 6 months ago
- 爬虫实例：微博、b站、csdn、淘宝、今日头条、知乎、豆瓣、知乎APP、大众点评☆522Updated 5 years ago
- data sdk for baidu Index☆748Updated last year
- 🏀 Python3 网络爬虫实战（部分含详细教程）猫眼 腾讯视频 豆瓣 研招网 微博 笔趣阁小说 百度热点 B站 CSDN 网易云阅读 阿里文学 百度股票 今日头条 微信公众号 网易云音乐 拉勾 有道 unsplash 实习僧 汽车之家 英雄联盟盒子 大众点评 链家 LP…☆1,601Updated 3 years ago
- 百度贴吧爬虫(基于scrapy和mysql)☆404Updated 2 years ago
- 爬虫案例合集。包括但不限于《淘宝、京东、天猫、豆瓣、抖音、快手、微博、微信、阿里、头条、pdd、优酷、爱奇艺、携程、12306、58、搜狐、各种指数、维普万方、Zlibraty、Oalib、小说、招标网、采购网、小红书、大众点评、推特、脉脉、知乎》☆1,686Updated 6 months ago
- 根据关键词抓取微博数据，再生成词云☆219Updated 6 years ago
- 微信爬虫，获取文章内容、阅读量、点赞量、评论等，获取公众号所有历史文章链接。☆1,427Updated last year
- Python爬虫，返回一定格式的信息，下载，使用flask提供简易api。抖音无水印、皮皮虾、快手、网易云音乐、qq音乐、咪咕音乐、荔枝FM音频、知乎视频、最右语音、视频、微博......☆627Updated 3 years ago
- 基于微博数据的舆情分析项目，包括微博爬虫、LDA主题分析和情感分析。☆633Updated this week
- 豆瓣电影/豆瓣读书 Scarpy 爬虫☆737Updated 11 months ago