golang-collection / go-crawler-distributed
分布式爬虫项目，本项目支持个性化定制页面解析器二次开发，项目整体采用微服务架构，通过消息队列实现消息的异步发送，使用到的框架包括：redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro，并通过Docker实现容器化部署，中间爬虫节点支持水平拓展。
☆49Updated 9 months ago
Alternatives and similar repositories for go-crawler-distributed:
Users that are interested in go-crawler-distributed are comparing it to the libraries listed below
- 微服务实战-类智行12306购票软件后端，分布式，支持终端多任务线上线下预定抢票(包括鉴权服务，配置中心（grpc），服务发现（consol），用户service，用户api，抢票任 务service，查询余票service，订票service等)☆28Updated 4 years ago
- golang micro service base on gin. golang 微服务集成框架☆181Updated 6 months ago
- 推荐算法、相似度算法、布隆过滤器、均值算法、一致性Hash、数据结构、leetcode练习☆39Updated 4 years ago
- go+gin+网关+go-micro+traefik+etcd+docker-compose+kubernets从0到1部署基于GO的微服务☆70Updated 4 years ago
- Distributed Job Schedule Platform With Goalng、Raft And Cron (分布式任务调度平台，核心理念：易部署、高可用、跨平台、异步并行、弹性伸缩、微服务)☆123Updated 2 years ago
- 基于kratos 的聚合消息推送平台☆86Updated last year
- 由gin + gorm + jwt + casbin组合实现的RBAC权限管理脚手架前端Vue Typescript版本, 搭建完成即可快速、高效投入业务开发☆61Updated 2 years ago
- 橘子 消息推送系统 是用golang( iris )开发的可消息配置管理、高可用的、多渠道发送的、可高并发(使用协程)发送的综合消息推送系统，集成了微信订阅消息、邮件发送、短信发送，支持批量发送，模板信息可配置，支持敏感词过滤，支持重试发送，消息自动匹配回复，支持数据入库…☆82Updated 11 months ago
- 从零开始微服务框架使用☆44Updated 6 years ago
- Movie ticket selling system based on go-zero【基于go-zero的影票售卖系统】☆36Updated 2 years ago
- Go 微服务网关配套前端代码☆108Updated last year
- Golang 分布式ID生成系统，高性能、高可用、易扩展的id生成服务☆64Updated 3 years ago
- 使用 go+docker+go-micro微服务框架开发的租房网系统，符合RESTful架构风格。☆29Updated 5 years ago
- austin项目的golang版本,一个聚合消息推送平台☆89Updated 2 years ago
- 自动化运维系统☆77Updated last year
- 一个基于gin开发的视频网站demo☆31Updated 6 years ago
- go util 是golang通用工具包,实现一站式,开箱即用☆75Updated 6 years ago
- 基于 golang 实现一个简单的小程序商城☆25Updated 2 years ago
- websocket IM [go-micro 微服务, k8s构建,rpc], 即时聊天☆44Updated 4 years ago
- 微服务实践的demo☆40Updated 5 years ago
- [https://www.sofineday.com], golang项目开发脚手架,集成最佳实践(gin+gorm+go-redis+mongo+cors+jwt+json日志库zap(支持日志收集到kafka或mongo)+消息队列kafka+微信支付宝支付gopay+…☆179Updated 2 years ago
- Ego 的客户端组件最佳实践☆101Updated last year
- 基于Golang+Kratos+MySQL+Redis+Kafka+elk+Opentracing实现的微服务项目☆48Updated 2 years ago
- Go 项目一些常用包的中文文档，包括 Gin，Dep，Cobra 等。☆48Updated 3 years ago
- Gin + Gorm 实现车辆信息联络平台☆19Updated 3 years ago
- Google资深工程师深度讲解Go语言 爬虫项目。☆62Updated 5 years ago
- 基于Beego完成的合租短租web服务☆57Updated 5 years ago
- GIN-VUE-ADMIN插件仓库所有被gin-vue-admin采纳的插件均可入进入本仓库且加入仓库开发者小组☆51Updated last year
- Golang实现秒杀功能☆62Updated 2 months ago
- go相关项目的源码分析和注释☆66Updated last year