CharesFang / WeiboSpider
微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider
☆125Updated last year
Related projects ⓘ
Alternatives and complementary repositories for WeiboSpider
- 无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。☆152Updated 2 years ago
- 借助Python抓取微博数据，并对抓取的数据进行情绪分析☆352Updated last year
- 爬取关注列表中微博账号的微博☆179Updated 6 months ago
- 微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据☆269Updated 4 years ago
- 澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所得数据商用！☆351Updated 2 years ago
- 本项目是一个微博爬虫项目，旨在通过微博的mid获取到其对应的所有点赞、转发、评论与二级评论的相关数据。☆46Updated 2 years ago
- 與情分析系统，包括爬虫、数据清洗、文本摘要、主题分类、情感倾向性识别以及分析结果数据可视化☆333Updated 2 years ago
- 使用python抓取微博数据并对微博文本分析和可视化，LDA（树图）、关系图、词云、时间趋势（折线图）、热度地图、词典情感分析（饼图和3D柱状图）、词向量神经网络情感分析、tfidf聚类、词向量聚类、关键词提取、文本相似度分析等☆816Updated 4 years ago
- 长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房☆367Updated 3 years ago
- 爬虫项目：链家网（普通/scrapy）、虎扑、维基百科、百度地图api、房天下（分布式爬虫）、微信公众号（代理池爬取）☆210Updated last year
- 微博爬虫及配套工具箱，微博用户、话题、评论采集一网打尽。图片下载、情感分析，地理位置、关系网络、spammer 机器人识别等功能应有尽有。Docs：https://buyixiao.github.io/blog/weibo-super-spider.html 配套可视化网站…☆1,600Updated last year
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆28Updated last year
- 基于微博数据的舆情分析项目，包括微博爬虫、LDA主题分析和情感分析。☆633Updated this week
- Weibo-COV: A Large-Scale COVID-19 Social Media Dataset from Weibo☆575Updated last year
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆125Updated last year
- 一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载☆119Updated 4 years ago
- 该系列资源是Python疫情大数据分析，涉及网络爬虫、可视化分析、GIS地图、情感分析、舆情分析、主题挖掘、威胁情报溯源、知识图谱、预测预警及AI和NLP应用等。推荐大家结合作者CSDN博客阅读，武汉必胜、湖北必胜、中国必胜！☆394Updated 3 years ago
- 获取微博搜索结果信息，搜索即可以是微博关键词搜索，也可以是微博话题搜索☆1,737Updated 5 months ago
- 使用SO_PMI互信息算法、词向量法快速构建不同领域(手机、汽车等)的专业情感词典☆89Updated 3 years ago
- 根据关键词抓取微博数据，再生成词云☆219Updated 6 years ago
- LLM&ebedding☆126Updated 4 months ago
- 京东评论爬虫，包含对数据的采集、清洗、可视化、分析等过程，作为数据库课程设计项目☆240Updated 7 months ago
- 中文情感分析库(Chinese Sentiment))可对文本进行情绪分析、正负情感分析。Chinese sentiment analysis library, which supports counting the number of different emotiona…☆521Updated last year
- 微博话题简单分析，话题爬取、高频词获取、词云生成、情感值获取，python + selenium + jieba + snownlp + wordcloud☆30Updated 3 years ago
- 狠心开源企业级舆情新闻爬虫项目：支持任意数量爬虫一键运行、爬虫定时任务、爬虫批量删除；爬虫一键部署；爬虫监控可视化; 配置集群爬虫分配策略；👉 现成的docker一键部署文档已为大家踩坑☆546Updated 10 months ago
- Social media (Weibo) comments analyzing toolbox in Chinese 微博评论分析工具, 实现功能: 1.微博评论数据爬取; 2.分词与关键词提取; 3.词云与词频统计; 4.情感分析; 5.主题聚类☆759Updated 5 years ago
- 大众点评(商家信息、评论)爬取☆62Updated last year
- data sdk for baidu Index☆748Updated last year
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆48Updated 4 years ago
- 爬取微博关键词相关信息,有需要合作加微信: ytouching☆28Updated 3 months ago