golang-collection / go-crawler-distributedLinks
分布式爬虫项目,本项目支持个性化定制页面解析器二次开发,项目整体采用微服务架构,通过消息队列实现消息的异步发送,使用到的框架包括:redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro,并通过Docker实现容器化部署,中间爬虫节点支持水平拓展。
☆51Updated last year
Alternatives and similar repositories for go-crawler-distributed
Users that are interested in go-crawler-distributed are comparing it to the libraries listed below
Sorting:
- Go 实战百度云盘☆62Updated 6 years ago
- 微服务实战-类智行12306购票软件后端,分布式,支持终端多任务线上线下预定抢票(包括鉴权服务,配置中心(grpc),服务发现(consol),用户service,用户api,抢票任 务service,查询余票service,订票service等)☆27Updated 4 years ago
- 使用 go+docker+go-micro微服务框架开发的租房网系统,符合RESTful架构风格。☆29Updated 5 years ago
- 一个基于gin开发的视频网站demo☆31Updated 6 years ago
- GIN-VUE-ADMIN插件仓库所有被gin-vue-admin采纳的插件均可入进入本仓库且加入仓库开发者小组☆51Updated 2 years ago
- Google资深工程师深度讲解Go语言 爬虫项 目。☆63Updated 6 years ago
- websocket IM [go-micro 微服务, k8s构建,rpc], 即时聊天☆44Updated 4 years ago
- go 两级缓存方案,支持分布式☆17Updated 3 years ago
- go util 是golang通用工具包,实现一站式,开箱即用☆75Updated 6 years ago
- Go 微服务网关配套前端代码☆110Updated last year
- 个人原创:真爱网-golang-分布式爬虫☆21Updated 5 years ago
- 基于Beego完成的合租短租web服务☆57Updated 5 years ago
- 简易分布式云存储服务☆25Updated 5 years ago
- Gin + Gorm 实现车辆信息联络平台☆19Updated 3 years ago
- Go语言实现的一个简易秒杀系统☆24Updated 4 years ago
- 推荐算法、相似度算法、布隆过滤器、均值算法、一致性Hash、数据结构、leetcode练习☆40Updated 4 years ago
- 😎从简单的即时聊天来看架构演变by golang☆96Updated 4 years ago
- go-kit微服务实践,http restful api、日志功能、限流、服务监控、服务发现与注册、api网关、服务链路跟踪、服务熔断、jwt身份认证☆20Updated 5 years ago
- go-micro v3微服务实战-租房项目☆81Updated 3 years ago
- Movie ticket selling system based on go-zero【基于go-zero的影票售卖系统】☆37Updated 3 years ago
- 一站式 go web 开发支持, 提供基础的 session, redis, mysql, mongo 操作, 提供通用的后端CURD基本操作, 让开发更便捷☆61Updated last year
- Golang 分布式ID生成系统,高性能、高可用、易扩展的id生成服务☆63Updated 4 years ago
- Distributed Job Schedule Platform With Goalng、Raft And Cron (分布式任务调度平台,核心理念:易部署、高可用、跨平台、异步并行、弹性伸缩、微服务)☆124Updated 2 years ago
- 《Go 语言编程之旅:一起用 Go 做项目》 第五章:进程内缓存☆61Updated 4 years ago
- High Quality Api Getaway☆96Updated 2 years ago
- 基于golang和redis实现轻量级队列☆25Updated 5 years ago
- Go 项目一些常用包的中文文档,包括 Gin,Dep,Cobra 等。☆50Updated 3 years ago
- 基于Golang、Websocket、MongoDB 实现即时通讯☆37Updated 2 years ago
- 提供钱包帐户的加款、扣款、退款和服务包可用数的增加、扣减、退回☆9Updated 4 years ago
- 基于Go整合Gossip+WebSocket的轻量级分布式消息队列。实现功能:订阅/发布推送、点对点推送、延时消息推送、消费失败自动重试、数据持久化、WAL预写日志、主从节点部署、集群负载均衡、ACK确认机制、内置网页端控制台☆30Updated 3 years ago