目錄
一、什么是服務注冊與發(fā)現(xiàn)????????
二、Docker-consul集群
1.Docker-consul
2.registrator
3.Consul-template
三、Docker-consul實現(xiàn)過程
四、Docker-consul集群配置
1.下載consul服務
2.web服務器啟動多例nginx容器,使用registrator自動發(fā)現(xiàn)
3.使用nginx做反向代理,使用Consul-template配置自動修改配置文件
(1)四層代理配置?
(2)七層代理配置
4.添加docker-consul節(jié)點
5.查看consul集群信息
一、什么是服務注冊與發(fā)現(xiàn)????????
????????服務注冊與發(fā)現(xiàn)是微服務架構(gòu)中不可或缺的重要組件。起初服務都是單節(jié)點的,不保障高可用性,也不考慮服務的壓力承載,服務之間調(diào)用單純的通過接口訪問。直到后來出現(xiàn)了多個節(jié)點的分布式架構(gòu),起初的解決手段是在服務前端負載均衡,這樣前端必須要知道所有后端服務的網(wǎng)絡位置,并配置在配置文件中。這里就會有幾個問題
- 如果需要調(diào)用后端服務A-N,就需要配置N個服務的網(wǎng)絡位置,配置很麻煩。
- 后端服務的網(wǎng)絡位置變化,都需要改變每個調(diào)用者的配置。
????????既然有這些問題,那么服務注冊與發(fā)現(xiàn)就是解決這些問題的。后端服務A-N可以把當前自己的網(wǎng)絡位置注冊到服務發(fā)現(xiàn)模塊,服務發(fā)現(xiàn)就以K-V的方式記錄下來,K一般是服務名,V就是IP:PORT。服務發(fā)現(xiàn)模塊定時的進行健康檢查,輪詢查看這些后端服務能不能訪問的了。前端在調(diào)用后端服務A-N的時候,就跑去服務發(fā)現(xiàn)模塊問下它們的網(wǎng)絡位置,然后再調(diào)用它們的服務。這樣的方式就可以解決上面的問題了,前端完全不需要記錄這些后端服務的網(wǎng)絡位置,前端和后端完全解耦!
二、Docker-consul集群
1.Docker-consul
????????consul是google開源的一個使用go語言開發(fā)的服務管理軟件。支持多數(shù)據(jù)中心、分布式高可用的、服務發(fā)現(xiàn)和配置共享。采用Raft算法,用來保證服務的高可用。內(nèi)置了服務注冊與發(fā)現(xiàn)框架、分布一致性協(xié)議實現(xiàn)、健康檢查、Key/Value存儲、多數(shù)據(jù)中心方案,不再需要依賴其他工具(比如ZooKeeper等)。
????????服務部署簡單,只有一個可運行的二進制的包。每個節(jié)點都需要運行agent,他有兩種運行模式server 和 client。 每個數(shù)據(jù)中心官方建議需要3或5個server節(jié)點以保證數(shù)據(jù)安全,同時保證server-leader的選舉能夠正確的進行。
????????在client模式下,所有注冊到當前節(jié)點的服務會被轉(zhuǎn)發(fā)到server節(jié)點,本身是不持久化這些信息。
????????在server模式下,功能和client模式相似,唯一不同的是,它會把所有的信息持久化到本地,這樣遇到故障,信息是可以被保留的。server-leader是所有server節(jié)點的老大,它和其它server節(jié)點不同的是,它需要負責同步注冊的信息給其它的server節(jié)點,同時也要負責各個節(jié)點的健康監(jiān)測。
consul提供的一些關鍵特性
服務注冊與發(fā)現(xiàn):consul通過DNS或者HTTP接口使服務注冊和服務發(fā)現(xiàn)變的很容易,一些外部服務,例如saas提供的也可以一樣注冊。
健康檢查:健康檢測使consul可以快速的告警在集群中的操作。和服務發(fā)現(xiàn)的集成,可以防止服務轉(zhuǎn)發(fā)到故障的服務上面。
Key/Value存儲:一個用來存儲動態(tài)配置的系統(tǒng)。提供簡單的HTTP接口,可以在任何地方操作。
多數(shù)據(jù)中心:無需復雜的配置,即可支持任意數(shù)量的區(qū)域。
????????安裝consul是用于服務注冊,也就是容器本身的一些信息注冊到consul里面,其他程序可以通過consul獲取注冊的相關服務信息,這就是服務注冊與發(fā)現(xiàn)。?
2.registrator
????????Gliderlabs/Registrator 可檢查容器運行狀態(tài)自動注冊,還可注銷 docker 容器的服務到服務配置中心。目前支持 Consul、Etcd 和 SkyDNS2。
3.Consul-template
????????Consul-Template是基于Consul的自動替換配置文件的應用。Consul-Template是一個守護進程,用于實時查詢Consul集群信息,并更新文件系統(tǒng)上任意數(shù)量的指定模板,生成配置文件。更新完成以后,可以選擇運行 shell 命令執(zhí)行更新操作,然后重新加載服務配置。
????????Consul-Template可以查詢Consul中的服務目錄、Key、Key-values 等。這種強大的抽象功能和查詢語言模板可以使 Consul-Template 特別適合動態(tài)的創(chuàng)建配置文件。例如:創(chuàng)建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。
三、Docker-consul實現(xiàn)過程
以配置nginx負載均衡為例
1.先配置consul-agent ,有兩種模式server和client:
- consul_client 收集自動發(fā)現(xiàn)的信息,將所有需要注冊的信息轉(zhuǎn)發(fā)到server節(jié)點,不持久化這些信息。
- consul_server 持久化所有信息到本地,通過server-leader將信息同步給其它的server節(jié)點,以及各個節(jié)點的健康監(jiān)測。
2.再通過registrator發(fā)現(xiàn)應用的網(wǎng)絡位置,并發(fā)送給 consul agent 的自動發(fā)現(xiàn)模塊進行注冊;?
3.consul-template再基于consul的注冊的信息自動替換服務的配置文件(需要編寫模板)。
四、Docker-consul集群配置
consul?
1.下載consul服務
#解壓軟件后移動到/usr/local/bin/下
mv consul /usr/local/bin/
#創(chuàng)建數(shù)據(jù)目錄,啟動服務
mkdir /var/lib/consul_data
consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul_data \
-bind=192.168.116.70 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &
常用啟動選項
選項 | 作用 |
---|---|
-server | 以server身份啟動。默認是client。 |
-bootstrap | 用來控制一個server是否在bootstrap模式,在一個數(shù)據(jù)中心中只能有一個server處于bootstrap模式,當一個server處于 bootstrap模式時,可以自己選舉為 server-leader。 |
-bootstrap-expect=2 | 集群要求的最少server數(shù)量,當?shù)陀谶@個數(shù)量,集群即失效。 |
-ui | 指定開啟 UI 界面,這樣可以通過 http://localhost:8500/ui 這樣的地址訪問 consul 自帶的 web UI 界面。 |
-data-dir | 指定數(shù)據(jù)存儲目錄。 |
-bind | 指定用來在集群內(nèi)部的通訊地址,集群內(nèi)的所有節(jié)點到此地址都必須是可達的,默認是0.0.0.0。 |
-client | 指定 consul 綁定在哪個 client 地址上,這個地址提供 HTTP、DNS、RPC 等服務,默認是 127.0.0.1。 |
-node | 節(jié)點在集群中的名稱,在一個集群中必須是唯一的,默認是該節(jié)點的主機名。 |
-datacenter | 指定數(shù)據(jù)中心名稱,默認是dc1。 |
啟動consul后默認會監(jiān)聽5個端口
????????8300:replication、leader farwarding的端口
????????8301:lan cossip的端口
????????8302:wan gossip的端口
????????8500:web ui界面的端口
????????8600:使用dns協(xié)議查看節(jié)點信息的端口
2.web服務器啟動多例nginx容器,使用registrator自動發(fā)現(xiàn)
啟動多例nginx容器
安裝使用registrator自動發(fā)現(xiàn)
docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
--ip=192.168.116.60 \
consul://192.168.116.70:8500
常用選項?
選項 | 作用 |
---|---|
--net=host | 把運行的docker容器設定為host網(wǎng)絡模式。 |
-v /var/run/docker.sock:/tmp/docker.sock | 把宿主機的Docker守護進程(Docker daemon)默認監(jiān)聽的Unix域套接字掛載到容器中。 |
--restart=always | 設置在容器退出時總是重啟容器。 |
--ip=宿主機ip | 剛才把network指定了host模式,所以我們指定ip為宿主機的ip。 |
consul://consul服務器ip:端口 | 如果不在consul服務器上部署的,就要指定consul服務器的IP和端口。 |
前端查看,已經(jīng)發(fā)現(xiàn)到?
3.使用nginx做反向代理,使用Consul-template配置自動修改配置文件
先下載開啟nginx服務
#配置nginx官方源,下載并開啟
vim /etc/yum.repos.d/nginx.repo
[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1
yum install nginx -y
systemctl enable --now nginx
下載consul-template?
(1)四層代理配置?
yum安裝的nginx有兩個配置文件,/etc/nginx/nginx.conf 包含了全局配置、events塊和http塊的配置,/etc/nginx/conf.d/default.conf包含了server塊的配置。
因為四層代理是在全局配置中做的,所以在nginx全局配置中引用
之后編寫template模板文件,用于生成和自動修改上一步引用的nginx配置文件
#模板文件以ctmpl結(jié)尾!
vim nginx.ctmpl
stream {
upstream nginx_backend {
#獲取consul的nginx服務范圍
{{range service "nginx"}}
server {{.Address}}:{{.Port}};
{{end}}
}
server {
listen 9090;
proxy_pass nginx_backend;
}
}
使用模板文件啟用template(前臺啟動,后臺啟動加上 &)
consul-template --consul-addr 192.168.116.70:8500 \
--template "/opt/consul/nginx.ctmpl:/etc/nginx/template/stream.conf:/usr/sbin/nginx -s reload" \
--log-level=info
再開一個終端登入查看,配置文件自動修改成功
添加頁面,訪問測試,看是否輪詢
輪詢無誤,訪問測試成功
(2)七層代理配置
編寫模板文件
vim nginx2.ctmpl
upstream nginx_backend {
#獲取consul的nginx服務范圍
{{range service "nginx"}}
server {{.Address}}:{{.Port}};
{{end}}
}
server {
listen 9090;
location / {
root /usr/share/nginx/html;
index index.html;
proxy_pass http://nginx_backend;
proxy_set_header HOST $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header Client-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
}
注:還需要把?/etc/nginx/conf.d/default.conf 中的 location / {} 配置注釋,否則會和新生成的location / {} 配置起沖突。
啟動服務并訪問測試
注:七層代理的配置在http模塊中,所以這里生成的配置文件應該在/etc/nginx/conf.d/下
4.添加docker-consul節(jié)點
與節(jié)點一樣先下載consul服務
然后啟用consul節(jié)點,并加入第一個集群
consul agent \
-server \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.116.60 \
-client=0.0.0.0 \
-node=consul-server02 \
-enable-script-checks=true \
-datacenter=dc1 \
-join 192.168.116.70 &> /var/log/consul.log &
補充選項 | 作用 |
-enable-script-checks=true | 設置檢查服務為可用 |
-join | 加入到已有的集群中 |
5.查看consul集群信息
consul members
?consul operator raft list-peers文章來源:http://www.zghlxwxcb.cn/news/detail-688318.html
文章來源地址http://www.zghlxwxcb.cn/news/detail-688318.html
到了這里,關于Docker consul容器服務自動發(fā)現(xiàn)和更新的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關文章,希望大家以后多多支持TOY模板網(wǎng)!