golang-collection / go-crawler-distributed
分布式爬虫项目,本项目支持个性化定制页面解析器二次开发,项目整体采用微服务架构,通过消息队列实现消息的异步发送,使用到的框架包括:redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro,并通过Docker实现容器化部署,中间爬虫节点支持水平拓展。
☆48Updated 5 months ago
Related projects: ⓘ
- 一个基于gin开发的视频网站demo☆31Updated 5 years ago
- Go 实战百度云盘☆61Updated 5 years ago
- Go语言实现的日志收集服务,由LogAgent、LogTransfer和LogManager三部分组成。☆47Updated last year
- 基于Beego完成的合租短租web服务☆57Updated 5 years ago
- 推荐算法、相似度算法、布隆过滤器、均值算法、一致性Hash、数据结构、leetcode练习☆38Updated 3 years ago
- go util 是golang通用工具包,实现一站式,开箱即用☆75Updated 5 years ago
- 基于Go整合Gossip+WebSocket的轻量级分布式消息队列。实现功能:订阅/发布推送、点对点推送、延时消息推送、消费失败自动重试、数据持久化、WAL预写日志、主从节点部署、集群负载均衡、ACK确认机制、内置网页端控制台☆27Updated 2 years ago
- Go 项目一些常用包的中文文档,包括 Gin,Dep,Cobra 等。☆48Updated 2 years ago
- Go 微服务网关配套前端代码☆107Updated 10 months ago
- 基于Go-Zero + vue-element-admin的前后端分离微服务管理系统的前端模块☆83Updated 3 years ago
- Distributed Job Schedule Platform With Goalng、Raft And Cron (分布式任务调度平台,核心理念:易部署、高可用、跨平台、异步并行、弹性伸缩、微服务)☆118Updated last year
- 自动化运维系统☆75Updated last year
- 一站式 go web 开发支持, 提供基础的 session, redis, mysql, mongo 操作, 提供通用的后端CURD基本操作, 让开发更便捷☆60Updated 9 months ago
- alibaba/IOC-golang 的电商场景 demo☆23Updated 2 years ago
- [https://www.sofineday.com], golang项目开发脚手架,集成最佳实践(gin+gorm+go-redis+mongo+cors+jwt+json日志库zap(支持日志收集到kafka或mongo)+消息队列kafka+微信支付宝支付gopay+…☆179Updated 2 years ago
- ☆55Updated this week
- 一个用Go语言写的B2C商城☆78Updated 3 years ago
- gin+gorm 面向接口(api)简易小demo,初学者也能快速上手☆34Updated last year
- go frame框架基础介绍☆121Updated 5 months ago
- 微服务框架库☆16Updated 2 years ago
- go-micro v3微服务实战-租房项目☆80Updated 2 years ago
- 基于Golang的海量日志收集服务logCollect☆48Updated last year
- 《Go 语言编程之旅:一起用 Go 做项目》 第五章:进程内缓存☆61Updated 4 years ago
- ☆50Updated this week
- Go语言开发的 gin api 服务,包含 golang gin 完整的模块代码和Gin-API系列文章。☆32Updated 4 years ago
- ☆66Updated this week
- 基于gin的go web框架。包含log、mysql、redis、httpClient、grpcClient、hystrix 等组件,swagger、pprof集成。☆85Updated 4 years ago
- Golang实现秒杀功能☆59Updated 9 months ago
- Google资深工程师深度讲解Go语言 爬虫项目。☆63Updated 5 years ago
- Go + gRPC-Gateway(V2) 构建微服务实战系列☆31Updated 3 years ago
- 从零开始微服务框架使用☆44Updated 5 years ago