摘要：在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺(tái)建立在上。這項(xiàng)技術(shù)來(lái)自的事實(shí)讓團(tuán)隊(duì)相信它可以跟上網(wǎng)易的規(guī)模。網(wǎng)易團(tuán)隊(duì)報(bào)告說(shuō)，使研發(fā)效率提高了以上。無(wú)論是否使用網(wǎng)易產(chǎn)品，該團(tuán)隊(duì)都鼓勵(lì)其他公司嘗試。

網(wǎng)易如何利用Kubernetes支持全球互聯(lián)網(wǎng)業(yè)務(wù)

公司：網(wǎng)易
地點(diǎn)：中國(guó)杭州
行業(yè)：互聯(lián)網(wǎng)技術(shù)

它的游戲業(yè)務(wù)是世界上最大的游戲業(yè)務(wù)之一，但這并不是網(wǎng)易為中國(guó)消費(fèi)者提供的唯一服務(wù)。該公司還經(jīng)營(yíng)電子商務(wù)、廣告、音樂(lè)流媒體、在線教育和電子郵件平臺(tái)；最后一個(gè)通過(guò)163.com等網(wǎng)站為近十億用戶(hù)提供免費(fèi)電子郵件服務(wù)。2015年，為所有這些系統(tǒng)提供基礎(chǔ)設(shè)施的網(wǎng)易云團(tuán)隊(duì)，意識(shí)到他們的研發(fā)流程正在減緩開(kāi)發(fā)者的速度。“我們的用戶(hù)需要自己準(zhǔn)備所有基礎(chǔ)設(shè)施。”網(wǎng)易云和容器服務(wù)架構(gòu)師Feng Changjian說(shuō)?！拔覀兛释ㄟ^(guò)無(wú)服務(wù)器的容器服務(wù)，自動(dòng)為我們的用戶(hù)提供基礎(chǔ)設(shè)施和工具?！?/p> 解決方法

在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺(tái)建立在Kubernetes上。這項(xiàng)技術(shù)來(lái)自Google的事實(shí)讓團(tuán)隊(duì)相信它可以跟上網(wǎng)易的規(guī)模?！敖?jīng)過(guò)2到3個(gè)月的評(píng)估，我們相信它可以滿(mǎn)足我們的需求。”Changjian說(shuō)。該團(tuán)隊(duì)在2015年開(kāi)始使用Kubernetes，甚至在1.0之前。今天，網(wǎng)易內(nèi)部云平臺(tái)還利用了CNCF項(xiàng)目Prometheus、Envoy、Harbor、gRPC和Helm，在生產(chǎn)集群中運(yùn)行10,000個(gè)節(jié)點(diǎn)，并且可以在一個(gè)集群中支持多達(dá)30,000個(gè)節(jié)點(diǎn)。基于其內(nèi)部平臺(tái)的經(jīng)驗(yàn)，該公司向外部客戶(hù)推出了基于Kubernetes的云和面向微服務(wù)的PaaS產(chǎn)品，網(wǎng)易輕舟微服務(wù)。

網(wǎng)易團(tuán)隊(duì)報(bào)告說(shuō)，Kubernetes使研發(fā)效率提高了100％以上。部署效率提高了280％。“在過(guò)去，如果我們想進(jìn)行升級(jí)，我們需要與其他團(tuán)隊(duì)合作，甚至在其他部門(mén)工作?！盋hangjian說(shuō)。“我們需要特殊的工作人員來(lái)準(zhǔn)備一切，所以花了大約半個(gè)小時(shí)?，F(xiàn)在我們可以在5分鐘內(nèi)完成?！毙缕脚_(tái)還允許使用GPU和CPU資源進(jìn)行混合部署。“之前，如果我們將所有資源都用于GPU，我們就不會(huì)為CPU提供備用資源。但是現(xiàn)在我們通過(guò)混合部署得到了改進(jìn)?！彼f(shuō)。這些改進(jìn)也提高了資源的利用率。

“該系統(tǒng)可以在一個(gè)集群中支持30,000個(gè)節(jié)點(diǎn)。在生產(chǎn)中，我們?cè)趩蝹€(gè)集群中獲得了10,000個(gè)節(jié)點(diǎn)的數(shù)據(jù)。整個(gè)內(nèi)部系統(tǒng)正在使用該系統(tǒng)進(jìn)行開(kāi)發(fā)、測(cè)試和生產(chǎn)。” - Zeng Yuxing，網(wǎng)易架構(gòu)師

它的游戲業(yè)務(wù)是全球第五大，但這并非網(wǎng)易為消費(fèi)者提供的唯一服務(wù)。

該公司還在中國(guó)經(jīng)營(yíng)電子商務(wù)、廣告、音樂(lè)流媒體、在線教育和電子郵件平臺(tái)；其中最后一個(gè)通過(guò)163.com和126.com等熱門(mén)網(wǎng)站為近十億用戶(hù)提供免費(fèi)電子郵件服務(wù)。憑借這種規(guī)模，網(wǎng)易云團(tuán)隊(duì)為所有這些系統(tǒng)提供基礎(chǔ)設(shè)施，在2015年發(fā)現(xiàn)他們的研發(fā)流程難以使開(kāi)發(fā)者滿(mǎn)足需求?！拔覀兊挠脩?hù)需要自己準(zhǔn)備所有基礎(chǔ)設(shè)施?！本W(wǎng)易云和容器服務(wù)架構(gòu)師Feng Changjian說(shuō)?！拔覀兛释ㄟ^(guò)無(wú)服務(wù)器的容器服務(wù)，自動(dòng)為我們的用戶(hù)提供基礎(chǔ)設(shè)施和工具。”

在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺(tái)建立在Kubernetes上。這項(xiàng)技術(shù)來(lái)自Google的事實(shí)讓團(tuán)隊(duì)相信它可以跟上網(wǎng)易的規(guī)模?！敖?jīng)過(guò)2到3個(gè)月的評(píng)估，我們相信它可以滿(mǎn)足我們的需求。”Changjian說(shuō)。

“我們利用Kubernetes的可編程性，以便我們可以構(gòu)建一個(gè)平臺(tái)來(lái)滿(mǎn)足內(nèi)部客戶(hù)的升級(jí)和部署需求?！?- Feng Changjian，網(wǎng)易云和容器服務(wù)架構(gòu)師

該團(tuán)隊(duì)在2015年開(kāi)始采用Kubernetes，甚至在1.0之前，因?yàn)樗鄬?duì)容易使用，并且讓公司啟用了DevOps。“我們放棄了Kubernetes的一些概念；我們只想使用標(biāo)準(zhǔn)化框架。”Changjian說(shuō)?！拔覀兝肒ubernetes的可編程性，以便我們可以構(gòu)建一個(gè)平臺(tái)來(lái)滿(mǎn)足內(nèi)部客戶(hù)的升級(jí)和部署需求。”

該團(tuán)隊(duì)首先專(zhuān)注于構(gòu)建容器平臺(tái)，以更好地管理資源，然后通過(guò)添加監(jiān)控等內(nèi)部系統(tǒng)，將注意力轉(zhuǎn)向改進(jìn)其對(duì)微服務(wù)的支持。這意味著整合CNCF項(xiàng)目Prometheus、Envoy、Harbor、gRPC和Helm?！拔覀兣μ峁┖?jiǎn)化和標(biāo)準(zhǔn)化的流程，因此我們的用戶(hù)和客戶(hù)可以利用我們的最佳實(shí)踐?！盋hangjian說(shuō)。

團(tuán)隊(duì)正在繼續(xù)改進(jìn)。例如，企業(yè)的電子商務(wù)部分需要利用混合部署，這在過(guò)去需要使用兩個(gè)獨(dú)立的平臺(tái)：基礎(chǔ)架構(gòu)即服務(wù)平臺(tái)和Kubernetes平臺(tái)。最近，網(wǎng)易創(chuàng)建了一個(gè)跨平臺(tái)的應(yīng)用程序，可以同時(shí)使用單命令部署。

“只要公司擁有一支成熟的團(tuán)隊(duì)和足夠的開(kāi)發(fā)者，我認(rèn)為Kubernetes是一種非常好的技術(shù)，可以幫助他們?！?- Li Lanqing，網(wǎng)易Kubernetes開(kāi)發(fā)者

今天，網(wǎng)易內(nèi)部云平臺(tái)“可以在一個(gè)集群中支持30,000個(gè)節(jié)點(diǎn)?！奔軜?gòu)師Zeng Yuxing說(shuō)?！霸谏a(chǎn)中，我們?cè)趩蝹€(gè)集群中獲得了10,000個(gè)節(jié)點(diǎn)的數(shù)據(jù)。整個(gè)內(nèi)部系統(tǒng)正在使用該系統(tǒng)進(jìn)行開(kāi)發(fā)、測(cè)試和生產(chǎn)?！?/p>

網(wǎng)易團(tuán)隊(duì)報(bào)告說(shuō)，Kubernetes使研發(fā)效率提高了100％以上。部署效率提高了280％。“在過(guò)去，如果我們想進(jìn)行升級(jí)，我們需要與其他團(tuán)隊(duì)合作，甚至在其他部門(mén)工作。”Changjian說(shuō)?！拔覀冃枰厥獾墓ぷ魅藛T來(lái)準(zhǔn)備一切，所以花了大約半個(gè)小時(shí)。現(xiàn)在我們可以在5分鐘內(nèi)完成。”新平臺(tái)還允許使用GPU和CPU資源進(jìn)行混合部署?！爸埃绻覀儗⑺匈Y源都用于GPU，我們就不會(huì)為CPU提供備用資源。但是現(xiàn)在我們通過(guò)混合部署得到了改進(jìn)。”他說(shuō)。這些改進(jìn)也提高了資源的利用率。

“通過(guò)與這個(gè)社區(qū)合作，我們可以從中獲得一些經(jīng)驗(yàn)，我們也可以從中受益。我們可以看到社區(qū)面臨的問(wèn)題和挑戰(zhàn)，并參與其中?！?- Li Lanqing，網(wǎng)易Kubernetes開(kāi)發(fā)者

基于使用其內(nèi)部平臺(tái)的結(jié)果和經(jīng)驗(yàn)，該公司向外部客戶(hù)推出基于Kubernetes的云和面向微服務(wù)的PaaS產(chǎn)品，網(wǎng)易輕舟微服務(wù)?！拔覀兊南敕ㄊ?，我們可以找到我們的游戲和電子商務(wù)以及云音樂(lè)供應(yīng)商遇到的問(wèn)題，因此我們可以整合他們的經(jīng)驗(yàn)，并提供一個(gè)平臺(tái)來(lái)滿(mǎn)足用戶(hù)的需求?！盋hangjian說(shuō)。

無(wú)論是否使用網(wǎng)易產(chǎn)品，該團(tuán)隊(duì)都鼓勵(lì)其他公司嘗試Kubernetes?！爸灰緭碛幸恢С墒斓膱F(tuán)隊(duì)和足夠的開(kāi)發(fā)者，我認(rèn)為Kubernetes是一種非常好的技術(shù)，可以幫助他們。”Kubernetes開(kāi)發(fā)者Li Lanqing說(shuō)。

作為最終用戶(hù)和供應(yīng)商，網(wǎng)易已經(jīng)更多地參與社區(qū)，向其他公司學(xué)習(xí)并分享他們所做的事情。該團(tuán)隊(duì)一直在為Harbor和Envoy項(xiàng)目做出貢獻(xiàn)，并在網(wǎng)易規(guī)模測(cè)試技術(shù)時(shí)提供反饋?！拔覀兪且粋€(gè)專(zhuān)注于解決微服務(wù)架構(gòu)挑戰(zhàn)的團(tuán)隊(duì)?！盋hangjian說(shuō)?！巴ㄟ^(guò)與這個(gè)社區(qū)合作，我們可以從中獲得一些經(jīng)驗(yàn)，我們也可以從中受益。我們可以看到社區(qū)面臨的問(wèn)題和挑戰(zhàn)，并參與其中?！?/p>

KubeCon + CloudNativeCon + Open Source Summit大會(huì)日期：

會(huì)議日程通告日期：2019 年 4 月 10 日

會(huì)議活動(dòng)舉辦日期：2019 年 6 月 24 至 26 日

KubeCon + CloudNativeCon + Open Source Summit贊助方案
KubeCon + CloudNativeCon + Open Source Summit多元化獎(jiǎng)學(xué)金現(xiàn)正接受申請(qǐng)
KubeCon + CloudNativeCon和Open Source Summit即將首次合體落地中國(guó)
KubeCon + CloudNativeCon + Open Source Summit購(gòu)票窗口，立即購(gòu)票！
CNCF邀請(qǐng)你加入最終用戶(hù)社區(qū)