hadoop集群運維精品文章

• 

  魅族大數(shù)據(jù)運維平臺實踐

  ...群。當時只有三個節(jié)點，因為我們起步比較晚，沒有趕上Hadoop1.0，直接是用YARN來跑的大數(shù)據(jù)集群，而且默認就上了HA功能； 2014年9月節(jié)點增加到20個，數(shù)據(jù)日增30GB； 2015年6月上線Spark和Hbase，同時節(jié)點達到100個，數(shù)據(jù)日增10T； 2016...

  appetizerio 2019-05-28 17:04 評論0 收藏0
• 

  譯 | 像使用一臺主機一樣管理集群

  ... 當單機的 CPU 性能和硬盤容量逐漸碰到了天花板，通過 Hadoop 這樣的集群化技術(shù)來突破單機性能瓶頸就越來越流行。當然在 Hadoop 出現(xiàn)之前，集群方案早就應(yīng)用于高性能的生產(chǎn)系統(tǒng)，例如 Weblogic 或者集群化的 WEB 服務(wù)器（復(fù)雜均...

  Jingbin_ 2019-06-28 15:03 評論0 收藏0
• 

  大會實錄|清華徐葳：人工智能讓數(shù)據(jù)中心更好運維

  ...luxio緩存非常有用，它還為Ceph和NFS適配了一個接口，還有Hadoop集群，HDFS里面也有幾百塊盤，將這三種東西適配城了兩個借口，適合放在Docker里面，也適合放在Hadoop里面，且它加了些緩存，這樣用機器人內(nèi)存吸收了很多流量，上...

  bergwhite 2019-06-26 18:18 評論0 收藏0
• 

  智能運維 | 如何做好持續(xù)集成——Jenkins on Mesos 實踐

  ...務(wù)器或虛擬服務(wù)器組成，用于運行應(yīng)用程序的任務(wù)，比如Hadoop和MPI作業(yè)。第二級調(diào)度由被稱作Framework的組件組成。Framework包括調(diào)度器（Scheduler）和執(zhí)行器（Executor）進程，其中每個節(jié)點上都會運行執(zhí)行器。Mesos能和不同類型...

  lsxiao 2019-06-28 15:15 評論0 收藏0