摘要:背景基于負載均衡的服務調用基于負載均衡的服務相互調用指的是通過基于等負載均衡軟件來構建一個負載均衡服務,所有的服務調用都通過負載均衡器從負載均衡的這種模式下其實有兩個主要的問題一是中心化,整個系統(tǒng)都基于負載均衡器,負載均衡就相當于整個業(yè)
背景 基于負載均衡的服務調用
從負載均衡的這種模式下其實有兩個主要的問題: 一是中心化,整個系統(tǒng)都基于負載均衡器,負載均衡就相當于整個業(yè)務的中心,雖然我們可以通過一些高可用手段來保證,但其實內部流量通常是巨大的,很容易出現性能瓶頸 二是增加了一次TCP交互
當然也有很多好處,比如可以做一些負載均衡、長鏈接維護、分布式跟蹤等,這不是本文重點
基于注冊中心的服務調用注冊中心中的注冊表
注冊中心事件隊列
注冊中心hashcode
代碼實現 系統(tǒng)架構
應用與節(jié)點信息
服務端注冊表 注冊表結構體
服務端注冊表結構體Registry主要包含三部分信息: lock(讀寫鎖)、apps(應用對應信息)、eventQueue(事件隊列) Lock: 注冊中心是典型的讀多寫少的應用,server端注冊表可能同時提供給N個服務進行讀取,所以這里采用讀寫鎖 apps: 保存應用對應的信息, 其實后面寫完發(fā)現,沒必要使用,只使用基礎的map就可以搞定 eventQueue: 每次注冊表變更都寫入事件到里面
// Registry 注冊表
type Registry struct {
lock sync.RWMutex
apps sync.Map
duration time.Duration
eventQueue *EventQueue
}
注冊表服務注冊
從注冊表獲取對應的應用Application
調用Application的add接口添加節(jié)點
為節(jié)點創(chuàng)建一個Lease
保存節(jié)點信息到Application.Node里
將事件寫入到eventQueue
// Registr 注冊服務
func (r *Registry) Registr(name, node string) bool {
r.lock.Lock()
defer r.lock.Unlock()
app := r.getApp(name)
if app == nil {
app = NewApplication(name)
r.apps.Store(name, app)
}
if lease, ok := app.add(node, r.duration); ok {
r.eventQueue.Push(&Event{lease: lease, action: ADD})
return true
}
return false
}
注冊表拉取
全量拉取通過all接口拉取全量的返回的是服務對應的節(jié)點切片 增量拉取通過details接口返回增量的變更事件和服務端注冊表的hashcode
// all 全量拉取
func (r *Registry) all() map[string][]string {
r.lock.RLock()
defer r.lock.RUnlock()
apps := make(map[string][]string)
r.apps.Range(func(k, v interface{}) bool {
name, app := k.(string), v.(*Application)
nodes := []string{}
for key := range app.Node {
nodes = append(nodes, key)
}
apps[name] = nodes
return true
})
return apps
}
// details 增量拉取
func (r *Registry) details() []*Event {
r.lock.RLock()
defer r.lock.RUnlock()
events := []*Event{}
for {
event := r.eventQueue.Pop()
if event == nil {
break
}
events = append(events, event)
}
return events
}
hashcode
hashcode是一個一致性的保證,eureka里面主要是通過拼接所有的服務名稱和節(jié)點的個數來生成的一個字符串,這里我們也采用這種方式,
func (r *Registry) hashCode() string {
r.lock.RLock()
defer r.lock.RUnlock()
hashCodes := []string{}
r.apps.Range(func(_, value interface{}) bool {
app := value.(*Application)
hashCodes = append(hashCodes, app.HashCode())
return true
})
sort.Sort(sort.StringSlice(hashCodes))
return strings.Join(hashCodes, "|")
}
客戶端注冊表
數據結構
客戶端本地注冊表其實就比較簡單了,只需要存儲服務和節(jié)點的對應信息即可
// LocalRegistry 本地注冊表
type LocalRegistry struct {
lock sync.RWMutex
apps map[string][]string
}
客戶端邏輯架構
啟動流程: 啟動時客戶端首先調用注冊接口進行自我注冊,然后調用poll拉取全量注冊表
func (c *Client) start() {
c.wg.Add(1)
c.registr()
c.poll()
go c.loop()
}
主循環(huán)
func (c *Client) loop() {
timer := time.NewTimer(time.Second)
for {
// 從服務的拉取增量事件,details內部會直接應用,然后返回服務端返回的注冊表的hashcode
respHashCode := c.details()
localHashCode := c.registry.hashCode()
// 如果發(fā)現本地和服務的的注冊表的hashcode不同,則全量拉取
if respHashCode != localHashCode {
fmt.Printf("client app %s node %s poll hashcode: %s
", c.App, c.Name, respHashCode)
c.poll()
}
select {
case <-timer.C:
timer.Reset(time.Second)
case <-c.done:
c.wg.Done()
return
}
}
}
驗證邏輯
func main() {
// 生成服務端
server := NewServer("aliyun", time.Second)
// 注冊兩個test服務的節(jié)點
clientOne := NewClient("test", "1.1.1.1:9090", server)
clientOne.start()
clientTwo := NewClient("test", "1.1.1.2:9090", server)
clientTwo.start()
// 注冊兩個hello服務的節(jié)點
clientThree := NewClient("hello", "1.1.1.3:9090", server)
clientThree.start()
clientFour := NewClient("hello", "1.1.1.4:9090", server)
clientFour.start()
time.Sleep(time.Second * 3)
// 驗證每個服務節(jié)點的注冊表的hashcode是否一致
println(clientOne.details())
println(clientTwo.details())
println(clientThree.details())
println(clientFour.details())
println(clientTwo.details() == clientOne.details())
println(clientThree.details() == clientFour.details())
println(clientOne.details() == clientFour.details())
clientOne.stop()
clientTwo.stop()
clientThree.stop()
clientFour.stop()
}
通過結果我們可以看出,節(jié)點增量拉取了注冊表,同時如果發(fā)現與本地的hashcode不同就進行全量拉取,并最終達成一致
lr event add 1.1.1.3:9090 hello
lr event add 1.1.1.4:9090 hello
lr event add client app hello node 1.1.1.4:9090 poll hashcode: hello_2|test_2
1.1.1.1:9090 test
lr event add 1.1.1.2:9090 test
client app test node 1.1.1.1:9090 poll hashcode: hello_2|test_2
client app test node 1.1.1.2:9090 poll hashcode: hello_2|test_2
client app hello node 1.1.1.3:9090 poll hashcode: hello_2|test_2
hello_2|test_2
hello_2|test_2
hello_2|test_2
hello_2|test_2
true
true
true
總結
微服務注冊中心注冊表的這種實現機制,到這基本上就明白了,注冊中心 通過增量、全量、hashcode三種機制來保證客戶端與注冊中心的注冊表的同步
其實一個工業(yè)級的注冊中心還是很麻煩的,比如注冊表中那個事件隊列,我現在的實現只有一個節(jié)點能獲取增量,其他的都會通過hashcode來觸發(fā)全量拉取,后續(xù)文章里面會相信介紹下,這塊緩存和定時器來實現增量數據的打包
其實在go里面大家注冊中心都是基于etcd、consul直接watch去做的,基本上可以完成eureka服務的8/9十的功能,但是當需要與公司現有的java做集成,可能就需要eureaka這種注冊中心了
未完待續(xù) 關注公共號: 布衣碼農
更多精彩內容可以查看www.sreguide.com
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉載請注明本文地址:http://systransis.cn/yun/7194.html
摘要:先來說第種類型,即遠程通信的,看的源碼,調用過程大致內容就是將通過遠程通信將信息傳遞給服務器端,服務器端接收到該信息后,找到對應的本地,然后通過反射執(zhí)行相應的方法,將方法的返回值再通過遠程通信將結果傳遞給客戶端。 showImg(https://segmentfault.com/img/remote/1460000015285374?w=640&h=363); 上圖是服務消費的主過程:...
摘要:總體介紹在互聯(lián)網金融行業(yè)一百多億其實也算不上大平臺,也就是二級陣營吧,其實每次的架構升級都是隨著業(yè)務重大推進而伴隨的,在前一代系統(tǒng)架構上遇到的問題,業(yè)務開發(fā)過程中積累一些優(yōu)秀的開發(fā)案例,在下一代系統(tǒng)開發(fā)中就會大力推進架構升級。 回想起從公司成立敲出的第一行代碼算起到現在也快三年了,平臺的技術架構,技術體系也算是經歷了四次比較重大的升級轉化(目前第四代架構體系正在進行中),臨近年底也想抽...
摘要:總體介紹在互聯(lián)網金融行業(yè)一百多億其實也算不上大平臺,也就是二級陣營吧,其實每次的架構升級都是隨著業(yè)務重大推進而伴隨的,在前一代系統(tǒng)架構上遇到的問題,業(yè)務開發(fā)過程中積累一些優(yōu)秀的開發(fā)案例,在下一代系統(tǒng)開發(fā)中就會大力推進架構升級。 回想起從公司成立敲出的第一行代碼算起到現在也快三年了,平臺的技術架構,技術體系也算是經歷了四次比較重大的升級轉化(目前第四代架構體系正在進行中),臨近年底也想抽...
摘要:為了解決這一系列問題,微博從年開發(fā)了語言的框架,并基于此完成了服務化改造。這些經歷之下微博也積累了一套服務治理型的服務化體系。的版,所要解決的是微博平臺內部服務之間的調用,因此協(xié)議時,其實并沒有考慮到跨語言的問題,用的是對比較友好的。 showImg(https://segmentfault.com/img/remote/1460000012601596?w=1080&h=606); ...
閱讀 573·2021-08-31 09:45
閱讀 1688·2021-08-11 11:19
閱讀 918·2019-08-30 15:55
閱讀 854·2019-08-30 10:52
閱讀 2895·2019-08-29 13:11
閱讀 2959·2019-08-23 17:08
閱讀 2867·2019-08-23 15:11
閱讀 3104·2019-08-23 14:33