go Consul服务治理
目前市面上常见的服务治理有consul,etcd,zookeeper,euerka,我们需要根据自己的服务特点选择自己相对合适的服务治理工具。
Feature | Consul | zookeeper | etcd | euerka |
---|---|---|---|---|
服务健康检查 | 服务状态,内存,硬盘等 | (弱)长连接,keepalive | 连接心跳 | 可配支持 |
多数据中心 | 支持 | — | — | — |
kv存储服务 | 支持 | 支持 | 支持 | — |
一致性 | raft | paxos | raft | — |
cap | ca | cp | cp | ap |
使用接口(多语言能力) | 支持http和dns | 客户端 | http/grpc | http(sidecar) |
watch支持 | 全量/支持long polling | 支持 | 支持 long polling | 支持 long polling/大部分增量 |
自身监控 | metrics | — | metrics | metrics |
安全 | acl /https | acl | https支持(弱) | — |
spring cloud集成 | 已支持 | 已支持 | 已支持 | 已支持 |
调研一个工具需要看到其优点,更需要看到其缺点,当服务优点大于自身业务需求缺点,且缺点有对应的解决方案时,我们可以倾向于考虑。
euerka 据说现在已停止维护,决定不考虑使用。
zookeeper 为java开发的,需要java环境,相对比较复杂,优先级较低。
etcd 与consul为go开发,部署简单,功能相对更符合自身业务的需求。
consul监控检查更为丰富,支持多数据中心,webui查看等,配合consul-template实现nginx动态负载均衡等特点更符合自身业务需求,因为决定选用consul作为业务的服务治理工具。
使用consul,其主要有四大特性:
1. 服务发现:利用服务注册,服务发现功能来实现服务治理。
2. 健康检查:利用consul注册的检查检查函数或脚本来判断服务是否健康,若服务不存在则从注册中心移除该服务,减少故障服务请求。
3. k/v数据存储:存储kv数据,可以作为服务配置中心来使用。
4. 多数据中心:可以建立多个consul集群通过inter网络进行互联,进一步保证数据可用性。
本人也是刚开始学习consul,感觉使用consul主要也就是两大作用,服务注册发现,配置共享。
现在开始学习consul:
启动单机consul:consul agent -server -bootstrap-expect=1 -data-dir=data -node=consul -bind=x172.16.242.129-ui -client=0.0.0.0
我们可已通过consul --help 修改一些配置信息,比如集群个数,绑定地址,数据存放地址,配置文件地址,加入集群等配置
启动consul后我们可以通过web查看consul运行状况:http://172.16.242.129:8500/ui/dc1/nodes
服务启动后,现在开始测试consul的第一个功能:服务注册发现,本人使用的为go语言, 下面主要为服务注册,发现的一个demo, 需要注意的是,根据自身的实际配置去修改consul的地址信息和要注册服务的地址信息
package main import ( "github.com/gin-gonic/gin" consulapi "github.com/hashicorp/consul/api" "net/http" "fmt" "log" ) func main() { r := gin.Default() // consul健康检查回调函数 r.GET("/", func(c *gin.Context) { c.JSON(200, gin.H{ "message": "ok", }) }) // 注册服务到consul ConsulRegister() // 从consul中发现服务 ConsulFindServer() // 取消consul注册的服务 //ConsulDeRegister() http.ListenAndServe(":8081", r) } // 注册服务到consul func ConsulRegister() { // 创建连接consul服务配置 config := consulapi.DefaultConfig() config.Address = "172.16.242.129:8500" client, err := consulapi.NewClient(config) if err != nil { log.Fatal("consul client error : ", err) } // 创建注册到consul的服务到 registration := new(consulapi.AgentServiceRegistration) registration.ID = "111" registration.Name = "go-consul-test" registration.Port = 8081 registration.Tags = []string{"go-consul-test"} registration.Address = "10.13.153.128" // 增加consul健康检查回调函数 check := new(consulapi.AgentServiceCheck) check.HTTP = fmt.Sprintf("http://%s:%d", registration.Address, registration.Port) check.Timeout = "5s" check.Interval = "5s" check.DeregisterCriticalServiceAfter = "30s" // 故障检查失败30s后 consul自动将注册服务删除 registration.Check = check // 注册服务到consul err = client.Agent().ServiceRegister(registration) } // 取消consul注册的服务 func ConsulDeRegister() { // 创建连接consul服务配置 config := consulapi.DefaultConfig() config.Address = "172.16.242.129:8500" client, err := consulapi.NewClient(config) if err != nil { log.Fatal("consul client error : ", err) } client.Agent().ServiceDeregister("111") } // 从consul中发现服务 func ConsulFindServer() { // 创建连接consul服务配置 config := consulapi.DefaultConfig() config.Address = "172.16.242.129:8500" client, err := consulapi.NewClient(config) if err != nil { log.Fatal("consul client error : ", err) } // 获取所有service services, _ := client.Agent().Services() for _, value := range services{ fmt.Println(value.Address) fmt.Println(value.Port) } fmt.Println("=================================") // 获取指定service service, _, err := client.Agent().Service("111", nil) if err == nil{ fmt.Println(service.Address) fmt.Println(service.Port) } } func ConsulCheckHeath() { // 创建连接consul服务配置 config := consulapi.DefaultConfig() config.Address = "172.16.242.129:8500" client, err := consulapi.NewClient(config) if err != nil { log.Fatal("consul client error : ", err) } // 健康检查 a, b, _ := client.Agent().AgentHealthServiceByID("111") fmt.Println(a) fmt.Println(b) } func ConsulKVTest() { // 创建连接consul服务配置 config := consulapi.DefaultConfig() config.Address = "172.16.242.129:8500" client, err := consulapi.NewClient(config) if err != nil { log.Fatal("consul client error : ", err) } // KV, put值 values := "test" key := "go-consul-test/172.16.242.129:8100" client.KV().Put(&consulapi.KVPair{Key:key, Flags:0, Value: []byte(values)}, nil) // KV get值 data, _, _ := client.KV().Get(key, nil) fmt.Println(string(data.Value)) // KV list datas, _ , _:= client.KV().List("go", nil) for _ , value := range datas{ fmt.Println(value) } keys, _ , _ := client.KV().Keys("go", "", nil) fmt.Println(keys) }
我们可根据上述功能去实现一个服务注册,服务发现,配置共享的功能,我们可以围绕这些根据自身业务需求进行灵活的变动,个人想法:根据此功能专门做一个服务管理的模块,客户端注册服务到服务模块,服务管理去提供其他模块的服务发现的功能,同时跟监控结合,当服务不可用时,或服务不存在时,通过监控通知相关人员,我们也可以使用页面跟我们服务管理结合,通过前台服务录入形式进行注册服务等等。
假如公司服务使用nginx负载均衡的话,我们可与consul和consul-template结合,动态生成nginx的配置文件,然后重新reload nginx,实现nginx的动态负载均衡。
当然还有其他方式实现nginx的动态负载均衡,如使用nginx-upsync-module和consul,openResty的lua脚本实现nginx动态负载均衡。
出处:https://home.cnblogs.com/u/hcy-fly/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。