masonsxu / Selenium_CrawlerLinks
一个使用selenium模块爬取（Twitter、New York Times）网站的可配置爬虫代码
☆26Updated last year
Alternatives and similar repositories for Selenium_Crawler
Users that are interested in Selenium_Crawler are comparing it to the libraries listed below
Sorting:
- 推特爬虫☆154Updated 4 years ago
- 各种爬虫（目前支持Instagram、Weibo、Twitter）Miscellaneous crawlers (currently including instagram, twitter, weibo etc.).☆32Updated 2 months ago
- 抓取twitter数据，可根据时间、话题、用户名等条件抓取数据，twitter爬虫☆50Updated 4 years ago
- Twitter crawler based on python☆167Updated 5 years ago
- 本程序支持关键词搜索、热榜、用户信息、回答、专栏文章、评论等信息的抓取☆27Updated 2 years ago
- 情感分析，微博情感分析，微博水军检测，水军检测，营销粉检测，僵尸粉检测，微博爬虫☆71Updated 4 years ago
- A lightweight and efficient tool for crawling Tweets 爬取推特的小工具！☆80Updated 3 years ago
- 这是一个基金评论与股票市场的情感分析项目，目的是手动爬取天天基金网基民评论与东方财富网股市行情的资讯，从基民评论、重仓股票、市场行情三个方面出发，使用情感词典与LDA模型进行分析，从而做出是否值的购买基金的决策。带有标签clean的是清洗后的爬虫数据，没有带标签的是原始数据…☆31Updated 3 months ago
- 简易、强大的推特（Twitter）采集程序,支持元搜索,用户,粉丝,关注,发文,回复,评论等采集☆48Updated 2 years ago
- 无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。☆159Updated 3 years ago
- [2023.05.09]基于selenium的新浪微博关键字搜索结果全自动爬虫，支持自定义搜素关键字、搜索起始时间、爬取起始页数（以实现中断后接上次继续爬取）。爬取内容包括微博账号、发文时间、发送平台、微博内容、转发次数、评论次数、点赞次数、原博地址。☆31Updated last year
- Weibo-COV: A Large-Scale COVID-19 Social Media Dataset from Weibo☆604Updated last month
- 携程评论爬虫，使用线程池来爬取热门景区评论，简单易用。一键爬取任意省的所有热门景区并分析评论数据，可视化展示。☆133Updated 4 months ago
- 本爬虫用于爬取知乎网站问题、回答的相关字段信息，问题的标题、内容、发布时间、话题、回答数量、评论数、点击数、关注数等字段，及对该问题回答的内容，作者、点赞数、评论数、回答时间等等字段信息。可用于对社会话题、热点进行数据分析。☆43Updated 6 years ago
- 爬取微博用户关注列表，生成好友关系网，绘制社交关系图谱☆38Updated 2 years ago
- 微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider☆136Updated 2 years ago
- 爬取大众点评，查询企业微信，和自动清理微信被删好友☆28Updated 11 months ago
- 大模型相关实践记录☆156Updated 5 months ago
- Use thread pools, coroutines, asynchronous methods to crawl data from major recruitment websites (recruitment data, non -resumes and othe…☆40Updated 3 years ago
- 澎湃新闻，新浪新闻，腾讯新闻，搜狐新闻，新闻联播，泰晤士报，纽约时报，BBCNews，旨在爬取所有新闻门户网站的新闻，禁止将所 得数据商用！☆410Updated 2 years ago
- 定时爬取百度搜索风云榜实时热点.☆35Updated this week
- 一个简单的小红书爬虫实现☆125Updated 6 years ago
- 爬取关注列表中微博账号的微博☆195Updated 3 months ago
- 新闻爬虫，爬取新浪、搜狐、新华网即时财经新闻。☆188Updated 5 years ago
- 小红书内容自动爬取，selenium+fiddler+微信小程序☆110Updated 3 years ago
- 知乎爬虫，用于爬取问题和对应的回答☆29Updated 2 years ago
- 基于爬虫批量爬取网页美团、单视频抖音评论☆30Updated 2 years ago
- 一个新闻政策类爬虫项目，实现上万网站的实时监控、爬取、过滤、存储，具有高可用性和可扩展性。☆36Updated 2 years ago
- 大众点评(商家信息、评论)爬取☆65Updated 2 years ago
- 长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房☆372Updated 4 years ago