摘要:在全面兼容Apache Kafka生態(tài)的基礎(chǔ)上,消息隊列Kafka徹底解決Apache
Kafka穩(wěn)定性不足的長期痛點,并且支持消息無縫遷移到云上。
近日,阿里云宣布正式推出消息隊列Kafka,全面融合開源生態(tài)。在全面兼容Apache Kafka生態(tài)的基礎(chǔ)上,消息隊列Kafka還具備了超易用,超高可用可靠性,擴縮容不操心,全方位安全診斷,數(shù)據(jù)安全有保障的特點。可用行達99.9%,數(shù)據(jù)可靠行99.999999%,徹底解決Apache Kafka穩(wěn)定性不足的長期痛點,并且支持消息無縫遷移到云上。
? 全面兼容Apache Kafka生態(tài)
Apache Kafka是一個高吞吐的分布式,具備冗余備份的持久性化消息產(chǎn)品。正因為Apache Kafka為了分布式大數(shù)據(jù)而生,Apache Kafka 具有豐富的應(yīng)用生態(tài),主要包括以下三個方面:
廣泛應(yīng)用于大數(shù)據(jù)領(lǐng)域,如網(wǎng)站行為分析、日志聚合、Apps監(jiān)控、流式數(shù)據(jù)處理、在線和離線分析等;
讓數(shù)據(jù)集成變得簡單:您能將 Kafka 中的消息導(dǎo)入到 ODPS、HBase、HBASE 等離線數(shù)據(jù)倉庫;
可廣泛的與流計算引擎集成,包括阿里云平臺的 StreamCompute、E-MapReduce 和開源產(chǎn)品 Spark、Storm 等;
消息隊列 Kafka 全面兼容Apache Kafka生態(tài)的基礎(chǔ)上,還具備了超易用,超高可用可靠性,擴縮容不操心,全方位安全診斷,數(shù)據(jù)安全有保障的特點。
? 無縫遷移,自建無縫遷移到云上商業(yè)版
從自建 Kafka 到消息隊列 Kafka,支持開源產(chǎn)品的無縫遷移,提供無門檻接入方式。那么消息隊列 Kafka是如何做到讓用戶無縫遷移的呢?消息隊列 Kafka 100% 兼容開源社區(qū)Apache Kafka(0.10.0.0 及以上版本),直接使用Kafka開源客戶端便可與阿里云上消息隊列Kafka進行通訊;對于原本使用開源 Apache Kafka的用戶無需任何改造,即可遷移上云,享受到阿里云提供的消息隊列 Kafka 服務(wù);同時消息隊列 Kafka 支持開源社區(qū)、阿里云平臺產(chǎn)品的打通,與Kafka全生態(tài)能快速對接。
? 全托管服務(wù),專業(yè)團隊運維,客戶0運維成本
Kafka團隊提供專業(yè)的托管服務(wù),用戶無需關(guān)心各種運維細(xì)節(jié)。Kafka團隊會從巡檢 + 監(jiān)控 + 告警三方面去保駕護航:
提供HouseKeeping(健康巡檢組件):自動在Kafka
核心鏈路的運行時巡檢,每分鐘會對集群做一次全面掃描診斷,并能針對不健康的狀態(tài)進行告警,同時,每日出具整體巡檢報告,方便運維人員每天觀察
Kafka 系統(tǒng)的健康狀態(tài);
業(yè)務(wù)監(jiān)控與告警:每個 Consumer Group 都可以根據(jù)消息的堆積量情況進行監(jiān)控與告警設(shè)置,幫助用戶及時發(fā)現(xiàn)問題;
Open APIKafka 提供給用戶的一整套完備的管控類 Open API,用于實現(xiàn)一系列資源管理和運維功能。
? 穩(wěn)定安全,可用行達99.9%,數(shù)據(jù)可靠行99.999999%
優(yōu)化開源Apache Kafka長期的痛點。支持海量消息堆積,在海量消息堆積的情況下,始終保持 Kafka 集群的消息收、發(fā)的高吞吐能力服務(wù)可用性達 99.9%;消息會持久化落盤到消息隊列,在磁盤容量足夠的情況下,未到期數(shù)據(jù)保障存儲,數(shù)據(jù)可靠性達到 99.999999%。
支持阿里云 VPC 訪問;支持權(quán)限控制,以消息主題(Topic)、訂閱組(Consumer Group)的粒度對用戶訪問權(quán)限進行控制,對每一條消息(Message)的收、發(fā)都進行嚴(yán)格的訪問控制,確保消息的安全性;訪問安全,在非VPC環(huán)境下使用,基于阿里云賬號體系,并利用 SSL 對通道進行加密傳輸,確保數(shù)據(jù)傳輸過程中不被竊取或篡改,保證客戶數(shù)據(jù)的安全。
歷經(jīng)近10年的技術(shù)沉淀,阿里巴巴將企業(yè)互聯(lián)網(wǎng)化的精華沉淀在Aliware上,后者支撐了99%以上的大規(guī)模應(yīng)用,目前阿里云推出了企業(yè)級分布式應(yīng)用服務(wù)EDAS、性能測試PTS、消息隊列MQ等近10款A(yù)liware產(chǎn)品,為政府央企、智能制造、新零售等眾多領(lǐng)域領(lǐng)先企業(yè)提供了領(lǐng)先的PaaS云產(chǎn)品,消息隊列Kafka的推出將為更多長期使用Apache Kafka的開發(fā)者帶來更多便利。
本文作者:中間件小哥
閱讀原文
本文為云棲社區(qū)原創(chuàng)內(nèi)容,未經(jīng)允許不得轉(zhuǎn)載。
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://systransis.cn/yun/11405.html
.markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-size:15px;overflow-x:hidden;color:#333}.markdown-body h1,.markdown-body h2,.markdown-body h3,.markdown-body h4,.markdown-body...
摘要:華為云華為云在云原生這場游戲中,最具競爭力的玩家之一。年,金山云在云原生領(lǐng)域推出了三款重磅產(chǎn)品星曜裸金屬服務(wù)器云服務(wù)器和云盤。在線上智博會上,浪潮云發(fā)布了經(jīng)過全新迭代升級的浪潮云,進一步提升平臺云原生服務(wù)能力。面對數(shù)字時代復(fù)雜系統(tǒng)的不確定性,傳統(tǒng)的 IT 應(yīng)用架構(gòu)研發(fā)交付周期長、維護成本高、創(chuàng)新升級難,煙囪式架構(gòu),開放性差、組件復(fù)用度低,這些都成為了企業(yè)業(yè)務(wù)快速增長的瓶頸。而云原生以其敏捷、...
摘要:基于流處理機制實現(xiàn)批流融合相對基于批處理機制實現(xiàn)批流融合的思想更自然,更合理,也更有優(yōu)勢,因此阿里巴巴在基于支持大量核心實時計算場景的同時,也在不斷改進的架構(gòu),使其朝著真正批流融合的統(tǒng)一計算引擎方向前進。 阿里妹導(dǎo)讀:2018年12月下旬,由阿里巴巴集團主辦的Flink Forward China在北京國家會議中心舉行。Flink Forward是由Apache軟件基金會授權(quán)的全球范圍...
摘要:月日消息,近日,中國信息通信研究院大數(shù)據(jù)產(chǎn)品能力評測數(shù)據(jù)庫方向的測評結(jié)果陸續(xù)出爐。月日消息,國家工業(yè)信息安全發(fā)展研究中心發(fā)布電信行業(yè)數(shù)據(jù)庫產(chǎn)品第一期測評結(jié)果,前三名分別是阿里云數(shù)據(jù)庫柏睿數(shù)據(jù)企業(yè)級交易型數(shù)據(jù)庫信創(chuàng)版云和恩墨企業(yè)級數(shù)據(jù)庫。 .markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-si...
摘要:從長遠(yuǎn)來看,阿里決定用做一個統(tǒng)一的通用的大數(shù)據(jù)引擎作為未來的選型。在阿里的現(xiàn)狀基于在阿里巴巴搭建的平臺于年正式上線,并從阿里巴巴的搜索和推薦這兩大場景開始實現(xiàn)。目前阿里巴巴所有的業(yè)務(wù),包括阿里巴巴所有子公司都采用了基于搭建的實時計算平臺。 本文主要整理自阿里巴巴計算平臺事業(yè)部資深技術(shù)專家莫問在云棲大會的演講。 合抱之木,生于毫末 隨著人工智能時代的降臨,數(shù)據(jù)量的爆發(fā),在典型的大數(shù)據(jù)的業(yè)...
閱讀 2820·2021-11-24 09:39
閱讀 3391·2021-11-19 09:40
閱讀 2262·2021-11-17 09:33
閱讀 3752·2021-10-08 10:04
閱讀 3041·2021-09-26 09:55
閱讀 1668·2021-09-22 15:26
閱讀 930·2021-09-10 10:51
閱讀 3130·2019-08-30 15:44