成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

移動云平臺的基礎(chǔ)架構(gòu)之旅-云應(yīng)用篇

greatwhole / 1380人閱讀

摘要:背景當(dāng)下后都能在手機(jī)鍵盤上敲字如飛,后的都可以坦然的搖微信,移動互聯(lián)網(wǎng)可謂炙手可熱。傳統(tǒng)移動開發(fā)技術(shù)方案難題終端移動平臺太多微信而且不同平臺還有版本差異,對于開發(fā)調(diào)試簡直是一場噩夢,要想實(shí)現(xiàn)統(tǒng)一覆蓋沒有雄厚的資本支持是非常困難的。

背景

當(dāng)下10后都能在手機(jī)鍵盤上敲字如飛,60后的都可以坦然的搖微信,移動互聯(lián)網(wǎng)可謂炙手可熱。隨著智能手機(jī)的快速發(fā)展,移動APP作為登入移動互聯(lián)網(wǎng)最便捷的方式,扼守著移動互聯(lián)網(wǎng)的入口?,F(xiàn)在這類軟件被越來越多的人所青睞,在沒有大量資金的情況下,手機(jī)APP是中小企業(yè)發(fā)展方向的一個很好選擇。對于個人和企業(yè)移動APP 已經(jīng)是創(chuàng)業(yè)和發(fā)展的必備工具。移動互聯(lián)網(wǎng)APP開發(fā),對于企業(yè)來說面臨著項(xiàng)目周期,資源投入,推廣等諸多問題,而對于個人更是望而卻步。

傳統(tǒng)移動開發(fā)技術(shù)方案:

難題

終端移動平臺太多:Android,IOS,Windows Phone,微信 …. 而且不同平臺還有版本差異,對于開發(fā)調(diào)試簡直是一場噩夢,要想實(shí)現(xiàn)統(tǒng)一覆蓋沒有雄厚的資本支持是非常困難的。

開發(fā)成本:招人難,找到合適的更難,成本高,移動開發(fā)門檻障礙

撿了芝麻丟了西瓜:企業(yè)把精力投入到自己不擅長的領(lǐng)域大多時候并不是一件好事情,對于個人來說更是如此。

全站解決方案:一個優(yōu)秀的APP除了核心業(yè)務(wù)同時也需要其他優(yōu)秀的組件,如:推送,用戶行為分析,市場活動,數(shù)據(jù)統(tǒng)計等等。

運(yùn)維困難:要保證APP的穩(wěn)定可靠運(yùn)行,運(yùn)維是必不可少的一部分,這些工作需要專業(yè)的運(yùn)維團(tuán)隊來做。這樣也加重了企業(yè)的負(fù)擔(dān)。

現(xiàn)在是一個屌絲逆襲的時代,為了幫助企業(yè)和個人無門檻擁有屬于自己的APP,MaxWon 應(yīng)運(yùn)而生。

MaxWon 是基于MaxLeap SaaS 云服務(wù),集成不同行業(yè)模塊,集 APP 生成,運(yùn)營,分析,自動化運(yùn)維與一體的服務(wù),用戶只需要關(guān)心自己的業(yè)務(wù),完全擺脫上面的各種難題。

用戶組合自己想要的模塊,點(diǎn)擊生成APP,就可以生成自己想要的不同平臺的APP,包括Android,IOS,微官網(wǎng),PC官網(wǎng)。

需要解決的的問題

差異化服務(wù)。由于是面向多租戶的服務(wù),不同的APP產(chǎn)生的流量可能差異很大,系統(tǒng)要能做到服務(wù)隔離和水平擴(kuò)展。

數(shù)據(jù)隔離與擴(kuò)展。為了保證數(shù)據(jù)安全,每一個APP 都會有一個獨(dú)立的DB,數(shù)據(jù)只能被自己的APP訪問,防止數(shù)據(jù)hack,保證數(shù)據(jù)安全。對于大數(shù)據(jù)量的APP,DB 能夠支持無限擴(kuò)展。

快速部署與自動化運(yùn)維。

服務(wù)的監(jiān)控。由于服務(wù)遍布在集群的不同機(jī)器上,需要能夠監(jiān)控所有租戶服務(wù)的健康狀態(tài),保證服務(wù)的高可用行,并且能夠水平擴(kuò)展。

支持服務(wù)和數(shù)據(jù)的遷移

能獨(dú)立運(yùn)行的1.0

由于MaxWon 需要支持不同行業(yè),業(yè)務(wù)就會比復(fù)雜,比較多。項(xiàng)目業(yè)務(wù)層是按模塊來劃分,通過不同模塊的組合來不同滿足行業(yè)的需求。

第一版架構(gòu)遵循兩個原則:第一, 以業(yè)務(wù)實(shí)現(xiàn)為目標(biāo),盡快做出產(chǎn)品原型。由于MaxLeap已經(jīng)有很多基礎(chǔ)的中間件可以直接拿來使用,如:推送,F(xiàn)AQ&Issue,支付,IM&社交等。現(xiàn)在只需要把精力放在MaxWon 自己的業(yè)務(wù)中去。第二,快速響應(yīng)產(chǎn)品的需求,產(chǎn)品指導(dǎo)研發(fā),很多場景、很多的玩法必須幫助產(chǎn)品實(shí)現(xiàn),而且速度要非???,要快速迭代。

主要技術(shù)棧
描述 名稱
平臺 JDK 1.8
Web框架 vertx-jersey(異步)
ORM JOOQ
RDS Mysql
NoSql Mongo

對于大部分人來說 Vert.x可能會有點(diǎn)陌生,它是基于Netty實(shí)現(xiàn)的異步架構(gòu),和node.js 極其相似。由于之前做MaxLeap服務(wù),一直在用Vert.x做為基礎(chǔ)架構(gòu),整個團(tuán)隊對Vert.x 也很熟悉,該踩得坑也都踩過了,通過Verx-Rpc 可以直接訪問的MaxLeap 的微服務(wù)。在使用Vert.x 時最大的感受就是不能寫同步代碼,否則就會阻塞,導(dǎo)致導(dǎo)致服務(wù)不可用,所以我們的服務(wù)全是基于異步的方式來寫的。由于它是一個輕量級高性能JVM應(yīng)用平臺,支持多語言開發(fā),它的簡單actor-like 機(jī)制能幫助脫離直接基于多線程編程,天生支持分布式,以后對于服務(wù)擴(kuò)展也是水到渠成的事情。

對于ORM 并沒有使用主流的 Hibernate或者IBATIS,而是使用小眾的JOOQ。JOOQ 相對于其他ORM算是很輕量,提供了強(qiáng)大的DSL 來訪問數(shù)據(jù)庫,靈活,上手很容易,代碼非常接近sql。

JOOQ runtime schema mapping 對于多租戶應(yīng)用程序有很好的支持,可以很容易的實(shí)現(xiàn)為每個租戶分配獨(dú)立的DB。

還有一個重要的原因就是 JOOQ 已經(jīng)和Java8 的Stream API 完全融合,cool!!。函數(shù)式編程表達(dá)性強(qiáng),并且非常通用。它是數(shù)據(jù)及數(shù)據(jù)流處理的核心。Java開發(fā)人員現(xiàn)在也都知道函數(shù)式編程,而且大家又都用過SQL。想象一下,你用SQL來聲明表來源,把數(shù)據(jù)轉(zhuǎn)化成新的元組流,然后要么將它們作為派生表提供給其它更高級的SQL語句來使用,要么將它們交給你的應(yīng)用程序來處理。

下面就是一段典型的Java代碼

DSLContext create = DSL.using(connection, dialect);
create.select(AUTHOR.FIRST_NAME, AUTHOR.LAST_NAME, count())
      .from(AUTHOR)
      .join(BOOK).on(BOOK.AUTHOR_ID.equal(AUTHOR.ID))
      .where(BOOK.LANGUAGE.equal("DE"))
      .and(BOOK.PUBLISHED.greaterThan("20017-01-01"))      
      .limit(2)
      .offset(1)     
      .fetch(record -> transfer(record))
      .stream()
      .filter(ele -> null != ele)
      .collect(Collectors.toList());

有了JOOQ,Java 8以及Streams API,你可以寫出強(qiáng)大的數(shù)據(jù)轉(zhuǎn)化的API,而且簡單易懂。

架構(gòu)特點(diǎn)

將架構(gòu)特點(diǎn)劃分為優(yōu)點(diǎn)和缺點(diǎn)進(jìn)行描述。那么優(yōu)點(diǎn)是:

簡單,易于實(shí)現(xiàn),不需要額外的基礎(chǔ)支撐

利于業(yè)務(wù)的功能快速實(shí)現(xiàn)

服務(wù)都是以Docker Container 啟動,可以實(shí)現(xiàn)快速發(fā)布與部署

?

缺點(diǎn):

不同租戶的應(yīng)用無法隔離,所有的APP 都使用相同的Container,這樣會帶來APP之間相互影響,導(dǎo)致服務(wù)不穩(wěn)定的風(fēng)險。

缺少服務(wù)健康檢查。

運(yùn)維成本過大。

1.0的架構(gòu)就是一個簡單的Web系統(tǒng)。負(fù)載均衡使用Nignx,并沒有細(xì)化到租戶級別。業(yè)務(wù)系統(tǒng)通過代碼模塊的形式組織各種業(yè)務(wù)就是一個簡單的Web系統(tǒng),后面直接掛了數(shù)據(jù)庫,比如商品、訂單、會員、客服,等等??梢钥吹?,我們這個基礎(chǔ)的架構(gòu),對外就是HTTP。當(dāng)時兩個人的小團(tuán)隊開發(fā)各種業(yè)務(wù),我們考慮只能用最簡單、最粗暴的方式實(shí)現(xiàn),能快速地實(shí)現(xiàn)業(yè)務(wù)。當(dāng)時的流量不是第一重要的問題,也不是最主要的矛盾。

對于這個階段,總結(jié)了三點(diǎn)。第一,技術(shù)來源于業(yè)務(wù)同時提升業(yè)務(wù)發(fā)展,業(yè)務(wù)發(fā)展又反過來推動技術(shù)的前進(jìn),他們是一個相互影響相互促進(jìn)的關(guān)系。和業(yè)務(wù)共同發(fā)展的技術(shù)才是有生命力的。第二,成熟簡單的技術(shù)就是最合適的,這個理念一直貫穿始終。不要把事情復(fù)雜的形態(tài)呈現(xiàn)給大家,腦子要保持簡單,不要想那么復(fù)雜的事兒。第三,要把能遇到的場景盡量到考慮到,以后架構(gòu)升級不至于很被動。大家看到初始的架構(gòu)等于沒有架構(gòu),但是這種形式在這時是最符合業(yè)務(wù)需求的一個,能快速迭代,能非常方便上線。

面向多租戶的2.0

在MaxWon1.0時代的時候,我們的關(guān)注點(diǎn)更偏向業(yè)務(wù)的實(shí)現(xiàn),隨著用戶增長,性能和穩(wěn)定性問題逐漸浮上水面,作為一個多租戶的應(yīng)用系統(tǒng),系統(tǒng)不穩(wěn)定,是非常致命的,2.0解決這些問題也迫在眉睫。

要解決的問題

首先要解決的就是服務(wù)分離。其中有兩種方案 :

每一個租戶APP都有屬于自己的 服務(wù) Container,這樣就解決了租戶之間的相互影響。但是 大部分 APP 訪問點(diǎn)可能很小,甚至是僵尸應(yīng)用。雖然Docker 容器使用的資源很小,但是大量的不活躍應(yīng)用還是會浪費(fèi)掉太多的系統(tǒng)資源,資源利用率低。

按租戶的真實(shí)的訪問量劃分為不同的組,普通規(guī)模應(yīng)用或者是僵尸應(yīng)用都公用同一組Container,中等規(guī)模應(yīng)用 某幾個使用一組Container,對于大量數(shù)據(jù)流量的應(yīng)用 獨(dú)占 同一組Container,這樣的話資源利用率就會很高。缺點(diǎn)就是 普通規(guī)模和中等規(guī)模應(yīng)用 服務(wù)之間還是會有影響,由于這兩種規(guī)模的數(shù)據(jù)訪問的會少很多,出現(xiàn)慢查詢而導(dǎo)致拖慢整個系統(tǒng)的可能性會很小。

對比上面的兩個方案優(yōu)缺點(diǎn),基于現(xiàn)實(shí)的考慮最終選擇了第二種方案。這就需要能夠隨時監(jiān)控APP的數(shù)據(jù)訪問量,當(dāng)某個APP訪問量快速上升時能夠隨時獨(dú)立出服務(wù)來,這樣就可以最大限度的防止租戶之前相互影響而產(chǎn)生的服務(wù)抖動。

對于服務(wù)監(jiān)控,則采用心跳檢測的方式,每個服務(wù)Container對外暴露一組健康檢查的接口,監(jiān)控系統(tǒng)會定時的巡視所有服務(wù)的健康狀態(tài),如果由于某種原因被Kill掉,則重啟對應(yīng)Container的并產(chǎn)生告警。

對于數(shù)據(jù)存儲分離 也采用了同樣的思路。對于Mongo ,Pandora本身就支持按不同App 數(shù)據(jù)分治。對于Mysql代理則采用 MaxLeap 研發(fā)的 Circe組件,可以實(shí)現(xiàn)不同App數(shù)據(jù)的隔離。使用AWS ELB 解決了Circe的負(fù)載均衡與高可用。

2.0的采用了服務(wù)和數(shù)據(jù)分離的思想,現(xiàn)在回顧也并不復(fù)雜,對于碼農(nóng)來說這種思想已經(jīng)是非常熟悉的了。如果你的產(chǎn)品功能不多,迭代不是很快,可以放慢一下腳步,停下來一段時間來集中一次重構(gòu)。但對于MaxWon來說這一版本的迭代就像是鳥槍換炮,滿足了大部分的應(yīng)用場景。對于業(yè)務(wù)快速迭代,上線時間緊迫的系統(tǒng)來說,這次重構(gòu)也是一個不小的挑戰(zhàn)。

優(yōu)勢

繼承了原有1.0的特點(diǎn),保留了其優(yōu)勢

解決了數(shù)據(jù)和服務(wù)隔離與擴(kuò)容的問題

實(shí)現(xiàn)不同租戶的差異化服務(wù)

添加了服務(wù)監(jiān)控與檢查

Docker 構(gòu)建和發(fā)布

使用docker 構(gòu)建可以完美的解決環(huán)境沖突的問題,也可以方便快速部署和擴(kuò)容。

FROM 10.10.10.160:8010/maxleap/vertx:3.2.1
MAINTAINER ben.ma 
#----------------------------Copy 項(xiàng)目目錄到容器里------------------------------------------
RUN 
mkdir -p /opt/maxwon
#覆蓋vert.x 相關(guān)配置
ADD lib/ $VERTX_HOME/lib/
ADD log4j2.xml $VERTX_HOME/conf/
ADD zookeeper.properties $VERTX_HOME/conf/
ADD config.json /opt/maxwon/
WORKDIR /opt/maxwon
ENTRYPOINT ["vertx", "run", "java-hk2:as.leap.ama.module.jersey.JerseyVerticle", "--conf", "config.json"]

通過spotify docker-maven-plugin 插件,根據(jù)事先定義在項(xiàng)目中的DockerFile可以輕松的把項(xiàng)目打包成可執(zhí)行的docker Image并push到生產(chǎn)環(huán)境中。

$ mvn clean deploy -DpushImage -Pcn 
好用的中間件

Hydra: 海德拉 古希臘神話人物,是一種傳說中有九個頭的大蛇,為冥王看守門戶。在這里Hydra 作為 MaxWon的API網(wǎng)關(guān),管理來自不同端的請求,根據(jù)請求的來源轉(zhuǎn)發(fā)到相應(yīng)的的MaxWon的服務(wù)容器組中。同時它也會管理和監(jiān)控容器狀態(tài)以及對服務(wù)的動態(tài)擴(kuò)容。

Circe:希臘神話里一個能制造幻覺的女巫,這里用來隱喻能夠制造Mysql服務(wù)的代理的項(xiàng)目.通過它可以實(shí)現(xiàn)不同租戶的數(shù)據(jù)隔離,過濾非法,有毒的sql語句,保證數(shù)據(jù)隱私和安全。

Pandora:訪問MongoDB的基礎(chǔ)組件,也是MaxLeap 核心組件之一,提供了同步和異步的兩種接口。Pandora最為核心的功能是實(shí)現(xiàn)了資源限制和數(shù)據(jù)庫訪問的路由策略,這對數(shù)據(jù)庫進(jìn)行平滑的動態(tài)擴(kuò)展及遷移提供了可靠的支持。感興趣的可以參考同事寫的MONGO 集群設(shè)計

總結(jié)

脫離業(yè)務(wù)談架構(gòu)都是扯淡,利用技術(shù)手段提升工作效率是好事,別陷進(jìn)去,產(chǎn)品最終拿出來說話的還是有沒有解決用戶的問題,而不是解決你自己的問題。對于MaxWon 這種快速迭代的系統(tǒng),系統(tǒng)也會考慮更多的業(yè)務(wù)場景,體積也越來越龐大,遇到棘手的問題也會越來越多,做好優(yōu)化的準(zhǔn)備。

系統(tǒng)要盡量保持簡單,技術(shù)架構(gòu)的選型建議是尋找當(dāng)前最短路徑,然后進(jìn)行不斷優(yōu)化迭代,想一口吃個大胖子不太可能。

代碼不要寫死。

本文作者來自 MaxLeap 團(tuán)隊_數(shù)據(jù)服務(wù)組 成員:馬傳林
馬傳林,從事開發(fā)工作已經(jīng)有5年。當(dāng)前在MaxLeap數(shù)據(jù)服務(wù)組擔(dān)任開發(fā)工程師,主要負(fù)責(zé)MaxWon服務(wù)器開發(fā)。
本文鏈接:https://blog.maxleap.cn/archives/734

歡迎關(guān)注微信訂閱號:從移動到云端
歡迎加入我們的MaxLeap活動QQ群:555973817,我們將不定期做技術(shù)分享活動。

文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址:http://systransis.cn/yun/65919.html

相關(guān)文章

  • 移動平臺基礎(chǔ)架構(gòu)之旅(二)- 代碼

    摘要:作為一款優(yōu)秀的平臺系統(tǒng),其云代碼的功能如何,是如何實(shí)現(xiàn)的,又有哪些加分項(xiàng),接下來將為大家一一揭曉。當(dāng)然為了開發(fā)者更快的開始,同時提供了和項(xiàng)目來讓開發(fā)者更快接觸云代碼。 云代碼的由來 隨著MBaaS的發(fā)展,取代移動企業(yè)應(yīng)用程序平臺的趨勢也越來越明顯。MBaaS系統(tǒng)為了讓企業(yè)能方便快捷的開發(fā)自己移動應(yīng)用程序,提供了諸多移動客戶端支持,有最通用的REST API,也有方便移動開發(fā)者的軟件開發(fā)...

    Carson 評論0 收藏0
  • 應(yīng)用平臺 - 服務(wù)架構(gòu)演進(jìn)過程

    摘要:應(yīng)用的研發(fā)上線運(yùn)維運(yùn)營形成閉環(huán),順利完成從對內(nèi)服務(wù)到公共平臺的升級。從功能角度,只能支持靜態(tài)方式設(shè)置反向代理,然后,而平臺有服務(wù)對應(yīng)的后端服務(wù)和端口是有動態(tài)調(diào)整需求。架構(gòu)上是基礎(chǔ)組件需要進(jìn)行升級,數(shù)據(jù)訪問層日志監(jiān)控系統(tǒng)等。 介紹 ? ? ? ?MaxLeap早期是一家研發(fā)、運(yùn)營移動應(yīng)用和手機(jī)游戲公司,發(fā)展過程中積累了很多通用組件。這些組件很大程度幫公司在移動研發(fā)過程中節(jié)省了時間和成本,...

    LiangJ 評論0 收藏0
  • 搭建高效架構(gòu)七個步驟

    摘要:創(chuàng)建一個強(qiáng)大可靠的云架構(gòu)對于和企業(yè)的長期成功來說是至關(guān)重要的。高效的云架構(gòu)不是憑空出現(xiàn)的。改變你的云存儲方案宣稱,專注于一種存儲類型不是一個好的選擇。此外,為不同的數(shù)據(jù)集利用不同的云存儲選項(xiàng)也可以帶來性能,成本和功能上的優(yōu)勢。創(chuàng)建一個強(qiáng)大可靠的云架構(gòu)對于IT和企業(yè)的長期成功來說是至關(guān)重要的。遺憾的是,許多云架構(gòu)都是在近幾年的時間內(nèi)隨意構(gòu)建的,無法滿足技術(shù)和業(yè)務(wù)快速發(fā)展所帶來的需求增長。如果您...

    joyvw 評論0 收藏0
  • 企業(yè)混合之旅

    摘要:企業(yè)甚至可以通過等公司的解決方案獲得特定的云計算合作伙伴。企業(yè)不必將所有內(nèi)容遷移到云中。許多組織計劃開始其云計算之旅。企業(yè)有機(jī)會使用真正復(fù)雜的設(shè)計,這些設(shè)計需要與內(nèi)部部署資源建立連接,同時仍然可以擴(kuò)展到云中。如今,數(shù)據(jù)中心還沒有消亡。但是,數(shù)據(jù)中心的發(fā)展確實(shí)發(fā)生了變化。Bill Kleyman是一名IT行業(yè)專家,在其職業(yè)生涯中,一直密切關(guān)注云計算和數(shù)據(jù)中心市場的發(fā)展,并與一些大型全球組織合作...

    CoorChice 評論0 收藏0
  • 淺談企業(yè)混合之旅

    摘要:是一名行業(yè)專家,在其職業(yè)生涯中,一直密切關(guān)注云計算和數(shù)據(jù)中心市場的發(fā)展,并與一些大型全球組織合作開展項(xiàng)目。企業(yè)甚至可以通過等公司的解決方案獲得特定的云計算合作伙伴。企業(yè)不必將所有內(nèi)容遷移到云中。許多組織計劃開始其云計算之旅。如今,數(shù)據(jù)中心還沒有消亡。但是,數(shù)據(jù)中心的發(fā)展確實(shí)發(fā)生了變化。Bill Kleyman是一名IT行業(yè)專家,在其職業(yè)生涯中,一直密切關(guān)注云計算和數(shù)據(jù)中心市場的發(fā)展,并與一些...

    Joonas 評論0 收藏0

發(fā)表評論

0條評論

閱讀需要支付1元查看
<