gonaxx / weiboSpider
[2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。
☆29Updated last year
Alternatives and similar repositories for weiboSpider:
Users that are interested in weiboSpider are comparing it to the libraries listed below
- 微博的爬虫，爬个人主页，用的scrapy 框架☆23Updated 9 months ago
- 本项目是一个微博爬虫项目，旨在通过微博的mid获取到其对应的所有点赞、转发、评论与二级评论的相关数据。☆50Updated 2 years ago
- 基于爬虫批量爬取网页美团、单视频抖音评论☆30Updated last year
- 爬虫学习。实战：微博各种类型爬虫，唯品会商品，淘宝商品等☆82Updated last year
- 一个基于关键词爬虫生成词云的网络内容可视化工具，可爬取百度、谷歌、必应、知乎、微博、微信公众平台☆35Updated 5 years ago
- 无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。☆153Updated 2 years ago
- 大众点评(商家信息、评论)爬取☆62Updated last year
- 一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载☆126Updated 3 weeks ago
- B站弹幕、评论爬虫+词云生成☆49Updated 4 years ago
- 利用Python编程爬虫搜集微博平台上关于大学生网课的评论，使用SPSS、机器学习、自然语言处理等方法，对收集到的文本数据进行分词、数据清洗、词频统计和聚类分析。最后根据所得到的数据进行以及分析，发现目前在线教学 中学生体验的现状、趋 势以及一些待解决的问题。☆43Updated 3 years ago
- 美团民宿房源数据抓取以及可视化分析，使用scrapy+django，进行数据抓取以及数据管理和可视化展示的构建。☆31Updated 3 years ago
- 对淘宝（天猫）的评论爬取并进行简单分析☆27Updated 4 years ago
- 微博话题简单分析，话题爬取、高频词获取、词云生成、情感值获取，python + selenium + jieba + snownlp + wordcloud☆31Updated 4 years ago
- bilibili弹幕分析，包含爬虫、词云分析、词频分析、情感分析、构建衍生指标，可视化☆164Updated last year
- 爬取新浪微博数据并可视化分析☆36Updated 3 years ago
- 微博超级话题爬虫，微博词频统计+情感分析+简单分类，新增肺炎超话爬取数据☆274Updated 4 years ago
- 该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地☆37Updated 5 years ago
- 爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts☆125Updated last year
- 微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider☆130Updated last year
- 发送邮件，文字识别，获取天气数据，哔哩哔哩弹幕，网易云音乐评论 ，turtle画图，爬虫，贝壳二手房房源数据，二手房可视化，51JOB，猫眼Top榜，微博文章，微博评论，微博热搜榜，CBA数据，批量下载图片，可视化，冰墩墩，佩奇，插画，火柴人，兔子，樱花树，玲娜贝儿，生日蛋…☆207Updated 2 months ago
- 携程评论爬虫，使用线程池来爬取热门景区评论，简单易用。一键爬取任意省的所有热门景区。☆86Updated 4 months ago
- Python外卖数据爬取与分析 饿了么 美团☆10Updated 6 years ago
- 使用scrapy从全国六大较权威的新闻网站(澎湃新闻、新华网、新京报、凤 凰网、光明网、人民网)爬取最近15天内的新闻，利用爬取数据提取省份信息、计算新闻热点值、使用预训练模型生成新闻类别后存入Mysql数据库，网页使用HTML、CSS、JavaScript进行编写，采用开…☆24Updated 2 years ago
- 实现了简单的微博关键字爬虫+基于GPT 3.5模型的情感分析☆15Updated last year
- 携程/榛果民宿实时评论挖掘软件，包含数据的实时采集/数据清洗/结构化保存/ UGC 数据主题提取/情感分析/后结构化可视化等技术的综合性演示 Demo。基于在线民宿 UGC 数据的意见挖掘项目，包含数据挖掘和 NLP 相关的处理，负责数据采集、主题抽取、情感分析等任务。主要…☆72Updated 4 years ago
- 大模型相关实践记录☆135Updated 2 months ago
- 本软件包括对于百度外卖平台的原始评论采集、评论情感计算并分类展示、以及对于用户打分、服务评分等结构化数据进行可视化三个主要功能模块。本软件的主要技术特征在于改造和使用了网络爬虫，来为本软件提供实时数据采集的能力，并将评论情感极性分析和用户打分相结合，在首先考虑用户打分的情况…☆44Updated 4 years ago
- 小红书笔记爬虫☆139Updated 3 years ago
- 基于selenium的轻量级新浪微博爬虫，可实现：1.后台自动爬取微博搜索结果/2.按时间段爬取搜索结果/3.爬取用户基本信息☆49Updated 5 years ago
- 微博评论爬虫+评论html tag清洗+中文词云生成☆27Updated 6 years ago