golang-collection / go-crawler-distributedLinks
分布式爬虫项目，本项目支持个性化定制页面解析器二次开发，项目整体采用微服务架构，通过消息队列实现消息的异步发送，使用到的框架包括：redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro，并通过Docker实现容器化部署，中间爬虫节点支持水平拓展。
☆53Updated last year
Alternatives and similar repositories for go-crawler-distributed
Users that are interested in go-crawler-distributed are comparing it to the libraries listed below
Sorting:
- 推荐算法、相似度算法、布隆过滤器、均值算法、一致性Hash、数据结构、leetcode练习☆40Updated 4 years ago
- 由gin + gorm + jwt + casbin组合实现的RBAC权限管理脚手架前端Vue Typescript版本, 搭建完成即可快速、高效投入业务开发☆63Updated 3 years ago
- Google资深工程师深度讲解Go语言 爬虫项目。☆63Updated 6 years ago
- go iris casbin jwt vue实战。go+iris(web框架)+casbin(权限)+jwt+vue的web server 框架，响应式web，可前后端分离☆121Updated 5 years ago
- [https://www.sofineday.com], golang项目开发脚手架,集成最佳实践(gin+gorm+go-redis+mongo+cors+jwt+json日志库zap(支持日志收集到kafka或mongo)+消息队列kafka+微信支付宝支付gopay+…☆180Updated 3 years ago
- Go 实战百度云盘☆62Updated 6 years ago
- Go 微服务网关配套前端代码☆110Updated last year
- 分布式爬虫，redis缓存，mysql持久化，rpc实现分布式。可用docker部署☆48Updated 8 years ago
- go+gin+网关+go-micro+traefik+etcd+docker-compose+kubernets从0到1部署基于GO的微服务☆73Updated 5 years ago
- websocket IM [go-micro 微服务, k8s构建,rpc], 即时聊天☆44Updated 5 years ago
- Distributed Job Schedule Platform With Goalng、Raft And Cron (分布式任务调度平台，核心理念：易部署、高可用、跨平台、异步并行、弹性伸缩、微服务)☆127Updated 2 years ago
- golang micro service base on gin. golang 微服务集成框架☆182Updated last year
- austin项目的golang版本,一个聚合消息推送平台☆91Updated 2 years ago
- 使用 go+docker+go-micro微服务框架开发的租房网系统，符合RESTful架构风格。☆29Updated 6 years ago
- This is an e-commerce management system built with Gin + Vue + Element UI. If you're interested in this project, feel free to submit PRs,…☆145Updated 2 months ago
- 基于golang实现的一种分布式云存储服务☆107Updated 6 years ago
- go-micro v3微服务实战-租房项目☆82Updated 3 years ago
- 基于Beego完成的合租短租web服务☆56Updated 6 years ago
- 兼容DEDECMS的PineCMS管理系统，允许您对外提供.so链接库。 提供类似dedecms的标签功能， 支持可以快速将dede模板转换为pinecms模板。如果喜欢请帮忙点个关注😂。☆158Updated last week
- Go 微服务框架，Router 基于 Gin 和 gRPC Gateway，同时支持 gRPC 和 HTTP，封装各种常用组件，开箱即用，专注业务。☆134Updated 7 months ago
- 一站式 go web 开发支持, 提供基础的 session, redis, mysql, mongo 操作, 提供通用的后端CURD基本操作, 让开发更便捷☆61Updated last year
- A repository for learning Golang☆40Updated 2 years ago
- High Quality Api Getaway☆96Updated 2 years ago
- 微服务实践的demo☆40Updated 6 years ago
- go-admin外部核心代码库，为go-admin提供原生代码支持，发展go-admin自身周边生态☆128Updated 2 months ago
- 这是基于Go语言的一个秒杀系统。☆151Updated 7 years ago
- 基于kratos 的聚合消息推送平台☆90Updated 2 years ago
- Distributed scheduled task management platform Go语言实现的分布式定时任务管理平台，支持多节点部署，支持节点任务自动分配和故障转移☆100Updated 2 years ago
- go util 是golang通用工具包,实现一站式,开箱即用☆75Updated 6 years ago
- GIN-VUE-ADMIN插件仓库所有被gin-vue-admin采纳的插件均可入进入本仓库且加入仓库开发者小组☆51Updated 2 years ago