lizongying / go-crawler
A web crawling framework implemented in Golang, it is simple to write and delivers powerful performance. It comes with a wide range of practical middleware and supports various parsing and storage methods. Additionally, it supports distributed deployment. 基于golang实现的爬虫框架，编写简单，性能强劲。内置了丰富的实用中间件，支持多种解析、保存方式，支持分布式部署。
☆129Updated last month
Alternatives and similar repositories for go-crawler:
Users that are interested in go-crawler are comparing it to the libraries listed below
- ⚡️ A proxy packet capture tool implemented in Go, supports multiple protocols such as Http, Https, Ws, Wss, Tcp, Socks5, and can intercep…☆261Updated last year
- 抖音SDK☆175Updated last year
- 使用 Golang+Chrome+OpenCV 破解腾讯滑块验证码☆100Updated 4 years ago
- AJ-Captcha行为验证码的Go实现包☆111Updated 11 months ago
- 可视化任务调度系统，精简到一个二进制文件 (Web visual task scheduler system , yes ! just one binary solve all the problems !)☆191Updated 11 months ago
- Gin + Casbin（RBAC）+ Vue3 + AntDesignVue + AntdvPro☆88Updated last month
- 以kratos 作为服务端接口框架，vue3作为前端框架的后台管理系统☆43Updated last year
- 巨量引擎marketing-api golang sdk☆102Updated last month
- 基于goframe v2的企业网站内容管理系统☆71Updated last week
- 基于 golang goframe + vue3 的、前后端分离的后台管理系统快捷使用模板，支持按钮级别的 RBAC。☆54Updated last year
- Go语言实现小红书开放平台sdk，使用简单，扩展灵活☆18Updated 6 months ago
- 方便用户学习和调试PowerWechat接口功能☆93Updated last month
- goctls 是 goctl 对 simple admin 的适配优化后的生成工具。 Goctls is the generating tools for simple admin.☆38Updated this week
- gathertool是golang脚本化开发库，目的是提高对应场景程序开发的效率；轻量级爬虫库，接口测试&压力测试库，DB操作库 等。☆54Updated 2 months ago
- austin项目的golang版本,一个聚合消息推送平台☆90Updated 2 years ago
- 基于小红书 Web 端进行的请求封装。☆15Updated last year
- 淘客sdk 包含 京东 、苏宁、唯品会、拼多多、淘宝、阿里生活☆61Updated 3 weeks ago
- 安卓自动化golang SDK，支持云手机，稳定高效且不强依赖ADB☆118Updated 10 months ago
- 基于Golang 的后台管理系统（基础版）☆32Updated 3 years ago
- dilu完整版本，集成所有的插件，学习或者要开发后台，选这个没错。dilu是一个golang的快速开发脚手架，基于Gin + Gorm + Vue3 + Element plus（vue-pure-admin）Saas化设计，可支持多团队（租户），基础用户管理功能，jwt鉴…☆20Updated last month
- dilu简化版本，自己开发首选，一个golang的快速开发脚手架，基于Gin + Gorm + Vue3 + Element plus（vue-pure-admin）Saas化设计，可支持多团队（租户），基础用户管理功能，jwt鉴权，代码生成器，权限管理，表单构建，因夫人工…☆67Updated 2 months ago
- 一个简洁的云存储 golang 库，兼容 amazon s3 协议，支持但不限于阿里云、腾讯云、七牛云、华为云、aws s3、minio。☆53Updated last year
- Echo & Gin & GoFiber & GoZero & Hertz & Kratos + Ant Design Pro 前后端分离的管理后台，Build Anything With Quark☆260Updated last week
- Backend core modules for Crawlab☆50Updated 10 months ago
- Go 微服务框架，Router 基于 Gin 和 gRPC Gateway，同时支持 gRPC 和 HTTP，封装各种常用组件，开箱即用，专注业务。☆131Updated 3 months ago
- 关键词/敏感词检测，支持通配符和标签分类 。( trie树 、DFA算法 )☆40Updated 3 months ago
- 基于`Golang`语言和`Gin`框架的个人微信系统，支持ChatGPT☆99Updated last year
- doak-cms 是使用 gofiber 和 Xorm 的 go 文章管理系统☆57Updated 11 months ago
- 快手磁力引擎marketing-api golang sdk☆30Updated 6 months ago
- Go语言实现的第三方登录开源库，整合QQ、微信、微博、Github等第三方平台的授权登录☆32Updated 2 years ago