golang-collection / go-crawler-distributedLinks
分布式爬虫项目，本项目支持个性化定制页面解析器二次开发，项目整体采用微服务架构，通过消息队列实现消息的异步发送，使用到的框架包括：redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro，并通过Docker实现容器化部署，中间爬虫节点支持水平拓展。
☆53Updated last year
Alternatives and similar repositories for go-crawler-distributed
Users that are interested in go-crawler-distributed are comparing it to the libraries listed below
Sorting:
- 推荐算法、相似度算法、布隆过滤器、均值算法、一致性Hash、数据结构、leetcode练习☆40Updated 4 years ago
- Go 实战百度云盘☆62Updated 6 years ago
- A repository for learning Golang☆40Updated 2 years ago
- websocket IM [go-micro 微服务, k8s构建,rpc], 即时聊天☆44Updated 5 years ago
- 由gin + gorm + jwt + casbin组合实现的RBAC权限管理脚手架前端Vue Typescript版本, 搭建完成即可快速、高效投入业务开发☆63Updated 3 years ago
- High Quality Api Getaway☆96Updated 2 years ago
- GIN-VUE-ADMIN插件仓库所有被gin-vue-admin采纳的插件均可入进入本仓库且加入仓库开发者小组☆51Updated 2 years ago
- go-micro v3微服务实战-租房项目☆81Updated 3 years ago
- Distributed Job Schedule Platform With Goalng、Raft And Cron (分布式任务调度平台，核心理念：易部署、高可用、跨平台、异步并行、弹性伸缩、微服务)☆125Updated 2 years ago
- 分布式爬虫，redis缓存，mysql持久化，rpc实现分布式。可用docker部署☆48Updated 7 years ago
- Google资深工程师深度讲解Go语言 爬虫项目。☆63Updated 6 years ago
- 对Gin框架封装的通用用户认证、登录、注册☆58Updated 5 years ago
- 基于Golang的海量日志收集服务logCollect☆50Updated 2 years ago
- Gin + Gorm 实现车辆信息联络平台☆19Updated 3 years ago
- golang micro service base on gin. golang 微服务集成框架☆182Updated 11 months ago
- 基于Beego完成的合租短租web服务☆57Updated 5 years ago
- 基于Go整合Gossip+WebSocket的轻量级分布式消息队列。实现功能：订阅/发布推送、点对点推送、延时消息推送、消费失败自动重试、数据持久化、WAL预写日志、主从节点部署、集群负载均衡、ACK确认机制、内置网页端控制台☆30Updated 3 years ago
- 从零开始微服务框架使用☆44Updated 6 years ago
- 使用 go+docker+go-micro微服务框架开发的租房 网系统，符合RESTful架构风格。☆29Updated 6 years ago
- Golang 分布式ID生成系统，高性能、高可用、易扩展的id生成服务☆63Updated 4 years ago
- go-kit微服务实践，http restful api、日志功能、限流、服务监控、服务发现与注册、api网关、服务链路跟踪、服务熔断、jwt身份认证☆20Updated 5 years ago
- 😎从简单的即时聊天来看架构演变by golang☆96Updated 5 years ago
- go+gin+网关+go-micro+traefik+etcd+docker-compose+kubernets从0到1部署基于GO的微服务☆73Updated 5 years ago
- Go 微服务网关配套前端代码☆110Updated last year
- [https://www.sofineday.com], golang项目开发脚手架,集成最佳实践(gin+gorm+go-redis+mongo+cors+jwt+json日志库zap(支持日志收集到kafka或mongo)+消息队列kafka+微信支付宝支付gopay+…☆180Updated 2 years ago
- 支持秒级分布式定时任务系统, A high performance distributed task scheduling system, Support multi protocol scheduling tasks☆132Updated 10 months ago
- go util 是golang通用工具包,实现一站式,开箱即用☆75Updated 6 years ago
- golang支付库开源啦，亲测有效！欢迎star!～欢迎大家一起共享！～打造顶级优质golang支付合集～☆36Updated 6 years ago
- 基于Go Micro + Casbin + Gin + Gorm + JWT 用户认证和权限微服务☆77Updated 10 months ago
- Gin+GORM + Gorm + Go-Redis + godotenv 开发Golang API快速开发脚手架☆18Updated 4 years ago