ZSAIm / VideoCrawlerEngine
起源于旧项目爱奇艺解析器(iqiyi-parser)在开发、维护和扩展的过程中遇到的一些问题,而实现的一个基于任务流式的可视化爬虫引擎。引擎的执行单元是节点。脚本节点(script)作为根节点来完成对节点和流程的描述,经由任务节点(task)解析流程描述并生成节点的执行队列,最后交由工作者执行池处理。整个过程可视可控,所有节点处理器都以插件的形式导入,以最大程度实现易扩展性。
☆466Updated 2 years ago
Alternatives and similar repositories for VideoCrawlerEngine:
Users that are interested in VideoCrawlerEngine are comparing it to the libraries listed below
- 解析下载爱奇艺、哔哩哔哩、腾讯视频☆945Updated last year
- 解析 优酷,腾讯,哔哩哔哩,抖音,芒果TV,爱奇艺,PP视频,咪咕视频,AcFun,快手,搜狐视频,QQ音乐,网易云音乐,酷我音乐,腾讯课堂,西瓜视频等下载地址☆449Updated 2 months ago
- 腾讯视频、优酷、爱奇艺下载器,满速、无水印☆96Updated 3 years ago
- m3u8(HLS流)下载,实现了AES解密、合并、多线程、批量下载☆206Updated 2 years ago
- 😛 源视频mp4链接获取: toutiao今日头条app视频;🍉xigua西瓜视频; 🐧tencent腾讯视频; 🎼douyin抖音分享短链接解析,获取无水印播放链接;☆197Updated 3 years ago
- 解析VIP资源,解析出酷狗、QQ音乐、腾讯视频、人人视频的真实地址☆211Updated last year
- 自定义线程数下载.m3u8,支持多次重试、合 并为.mp4文件,简单易用,解决我自己的烦恼😯☆154Updated last year
- Python爬虫,返回一定格式的信息,下载,使用flask提供简易api。抖音无水印、皮皮虾、快手、网易云音乐、qq音乐、咪咕音乐、荔枝FM音频、知乎视频、最右语音、视频、微博......☆634Updated 3 years ago
- B站视频极速批量下载器|The fastest Bilibili video downloader☆700Updated last year
- Bilibili.com视频批量下载工具包☆283Updated last year
- Web video downloader for Bilibili, iQIYI, Tencent Video, MGTV and WeTV. 网站视频下载器,主要支持Bilibili、爱奇艺、腾讯视频、芒果TV、WeTV、愛奇藝台灣站。☆1,163Updated last year
- As you can see, a kuaishou crawler☆180Updated last year
- 👏Download all douyin videos of user(including favorites) , 下载指定用户的所有抖音视频以及收藏的视频(无水印)☆475Updated 2 years ago
- 网易云音乐、QQ音乐一键下载工具☆215Updated last year
- 抖音批量下载助手☆347Updated 3 years ago
- Upload video clips to a free image hosting service☆599Updated 2 years ago
- 抖音短视频解析☆242Updated 4 years ago
- 🚀 蓝奏云 CMD | 无限制上传☆516Updated last year
- 哔哩哔哩视频下载器 | Yet another video downloader for Bilibili☆496Updated this week
- BaiduPCS API & App 百度网盘客户端 和 API☆724Updated 7 months ago
- meijuba.net,Python crawler,M3U8格式视频下载,桌面应用☆61Updated 4 years ago
- Aliyundrive API & App 阿里云盘 API 和 客户端☆160Updated 7 months ago
- 100行Python代码快速获得一个代理池,两分钟获得数千个有效代理☆583Updated 2 years ago
- 喜马拉雅专辑批量下载☆287Updated last year
- douyin signature☆275Updated 10 months ago
- 最新动态在这里【我的程序员日志】☆215Updated 3 years ago
- 这是一个可以识别视频语音自动生成字幕SRT文件的开源命令行工具。☆395Updated 2 years ago
- transcode .qsv file to .flv file☆200Updated 3 years ago