Duguce / ToolKit
✨ 本仓库用于存储一些小工具。例如，知乎问答爬虫、京东评论爬虫、分句工具等
☆63Updated 11 months ago
Related projects ⓘ
Alternatives and complementary repositories for ToolKit
- 基于微博的网络舆情话题分析和用户画像系统☆355Updated last year
- 知乎爬虫，用于爬取问题和对应的回答☆23Updated last year
- 关键词爬虫，根据关键词爬取微博、bilibili、知乎、今日头条、微信公众号、抖音、快手、YouTube的图片以及视频，并记录在excel中，可用于构造深度学习的数据集☆94Updated last year
- 微博热搜爬虫，并且采集热搜新闻下评论的数据，可以弹出弹窗自动输入热搜链接进行评论采集，现在设置是一个热搜下10条新闻，每条新闻20条评论，一 个热搜总共采集10*20=200条评论☆12Updated last year
- 爬虫学习。实战：微博各种类型爬虫，唯品会商品，淘宝商品等☆79Updated 9 months ago
- 知乎爬虫☆28Updated 7 months ago
- 小红书关键词笔记搜索Python 爬虫 （csv保存）☆56Updated last year
- 微博、B站、百度、百度贴吧热搜Python爬虫获取☆10Updated last month
- 爬取小红书 评论区的用户名、小红书号、评论，并保存为excel。☆29Updated last year
- BOSS直聘爬虫和数据清洗及分析（2023.05.23时可用）☆30Updated last year
- bilibili（B站）视频评论爬虫，爬取多级评论，用户信息，评论信息等内容☆55Updated 4 months ago
- 本项目是一个微博爬虫项目，旨在通过微博的mid获取到其对应的所有点赞、转发、评论与二级评论的相关数据。☆46Updated 2 years ago
- Bilibili视频数据爬虫 精确爬取完整的b站视频数据，包括标题、up主、up主id、精确播放数、历史累计弹幕数、点赞数、投硬币枚数、收藏人数、转发人数、发布时间、视频时长、视频简介、作者简介和标签☆76Updated last year
- 小红书爬虫☆11Updated last year
- LLM&ebedding☆123Updated 4 months ago
- 基于爬虫批量爬取网页美团、单视频抖音评论☆28Updated last year
- 携程评论爬虫，使用线程池来爬取热门景区 评论，简单易用。一键爬取任意省的所有热门景区。☆78Updated last month
- 基于python开发的可以采集b站，微博，快手，小红书评论的GUI软件☆17Updated last year
- Python分词，情感分析工具 SnowNLP☆46Updated 3 years ago
- B站弹幕、评论爬虫+词云生成☆48Updated 4 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆28Updated last year
- Python 网络爬虫实例☆55Updated 2 years ago
- bilibili弹幕分析，包含爬虫、词云分析、词频分析、情感分析、构建衍生指标，可视化☆153Updated last year
- 本爬虫用于爬取知乎网站问题、回答的相关字段信息，问题的标题、内容、发布时间、话题、回答数量、评论数、点击数、关注数等字段，及对该问题回答的内容，作者、点赞数、评论数、回答时间等等字段信息。可用于对社会话题、热点进行数据分析。☆39Updated 5 years ago
- 推特爬虫☆11Updated 7 months ago
- 澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所得数据商用！☆349Updated 2 years ago
- 知网论文数据爬虫☆50Updated 9 months ago