摘要:一旦建立了虛擬化層,并通過元數(shù)據(jù)進行數(shù)據(jù)管理,就可以執(zhí)行以前無法完成的各種事情。一旦將元數(shù)據(jù)和數(shù)據(jù)的管理分開,所有消失了。當您虛擬化數(shù)據(jù)時,所有這些事情都是可能的,因為與孤立的存儲基礎架構相比,元數(shù)據(jù)的使用更加靈活。
如果您已經(jīng)在使用Kubernetes了,則可能有一個簡單的原因:它使您的生活更輕松。畢竟,這是基于容器編排的整個前提。它讓基礎設施變得可支配,在需要時將其旋轉,完成后將其丟棄,因此您不必考慮太多。至少,這就是應該起作用的方式。
如你所知,如果你已經(jīng)建立起一個依賴于持久性數(shù)據(jù)的工作,你會馬上遇到一個大問題——存儲。
盡管Kubernetes完全抽象了計算和網(wǎng)絡基礎架構,但是當您的應用程序是有狀態(tài)的并且數(shù)據(jù)是持久的時,它需要合適的方式進行存儲。您仍必須了解底層存儲基礎架構的全部知識,才能找到所需數(shù)據(jù)的方式。
不僅是數(shù)據(jù)的位置,還有其他類型的存儲基礎結構附帶的所有其他細粒度的考慮因素(性能,保護,彈性,數(shù)據(jù)治理和成本),大多數(shù)數(shù)據(jù)科學家都不想考慮。
為什么在云原生世界中,我們已經(jīng)自動化了對這么多底層硬件復雜性的管理,所以存儲仍然如此痛苦?原因是兩個詞:數(shù)據(jù)孤島。
只要我們繼續(xù)通過其賴以生存的不同基礎架構來管理數(shù)據(jù),而不是只關注數(shù)據(jù)本身,我們將不可避免地最終要花費大量的存儲孤島。幸運的是,這不是一個棘手的問題。通過將我們對數(shù)據(jù)管理的思考方式從以基礎架構為中心的方法轉變?yōu)橐詳?shù)據(jù)為中心的方法,我們可以使用Kubernetes首先給我們提供承諾:制作存儲SEP(Someone Else‘s Problem)。
當您需要的數(shù)據(jù)散布在不同的存儲孤島上時,每個存儲孤島都有自己的獨特屬性(“或”或“云”,“本地”,“對象”,“高性能”等),根本無法抽象出基礎架構注意事項。仍然有人必須回答所有有關性能,成本和數(shù)據(jù)治理的問題,才能建立您的管道。(如果該人是您要尋求幫助的IT管理員,您可以打賭他們每次在您的名字上出現(xiàn)您的名字時都會畏縮。因為他們知道他們將花費大量時間在神秘的基礎結構接口上來破壞您的數(shù)據(jù)跨所有不同的副本和數(shù)據(jù)存儲,而且他們根本無法在午餐前完成任務。
擺脫這種頭痛的唯一方法-真正實現(xiàn)Kubernetes應該為您提供的速度和簡便性的唯一方法-是虛擬化數(shù)據(jù)。基本上,您需要在數(shù)據(jù)和所有各種存儲基礎架構之間建立一個智能抽象層。該抽象層應該使您可以在任何地方查看和訪問數(shù)據(jù),而不必擔心給定的基礎架構是否具有適合您正在執(zhí)行的操作的成本,位置或治理,也不必不斷創(chuàng)建新副本。
做到這一點并不像聽起來那么困難。關鍵:元數(shù)據(jù)。當您可以將所有數(shù)據(jù)需求,上下文或沿襲注意事項編碼為隨處可見數(shù)據(jù)的元數(shù)據(jù)時,那么在任何給定時刻駐留在哪個基礎結構數(shù)據(jù)上就不再重要。現(xiàn)在,當您建立數(shù)據(jù)管道時,您可以完全使用元數(shù)據(jù)。而且您的虛擬化層可以使用AI / ML為您自動處理所有基礎數(shù)據(jù)管理和基礎結構注意事項。
一旦建立了虛擬化層,并通過元數(shù)據(jù)進行數(shù)據(jù)管理,就可以執(zhí)行以前無法完成的各種事情。
1. 消除數(shù)據(jù)孤島:現(xiàn)在,您需要的數(shù)據(jù)位于哪個基礎架構上或該基礎架構位于什么位置都無所謂。對于您的應用程序,所有那些以前孤立的存儲資源(本地,云,混合,歸檔)看起來就像一個通用的全局名稱空間。
2. 以編程方式訪問存儲資源:由于您在處理元數(shù)據(jù)(而不是一堆不同的底層硬件基礎結構),因此您現(xiàn)在可以設置管道并通過聲明性語句訪問數(shù)據(jù):我需要具有這種性能的數(shù)據(jù),僅此而已真的很在乎。然后,智能虛擬化層就可以實現(xiàn)并實現(xiàn),而您的應用程序(或您負擔過重的IT管理員)則無需確切說明操作方法。
3. 使數(shù)據(jù)管理實現(xiàn)自助服務:數(shù)據(jù)科學家無需擔心比較不同存儲類型的成本,啟用數(shù)據(jù)保護或確保每次建立管道時都滿足安全性和合規(guī)性要求。(因此,您的IT和安全團隊可能也不希望數(shù)據(jù)科學家做出這些選擇-除非他們希望所有內容都在最昂貴的存儲上運行且沒有適當?shù)淖駨男浴?一旦將元數(shù)據(jù)和數(shù)據(jù)的管理分開,所有消失了。存儲管理員可以通過配置一次基本策略來設置防護欄。然后,用戶可以從此開始自助滿足其大多數(shù)數(shù)據(jù)管理需求,而無需打開票證,并且不會在每次建立管道時手動進行這些調用時出現(xiàn)錯誤。
4. 不斷豐富您的數(shù)據(jù):當系統(tǒng)支持可自定義的,可擴展的元數(shù)據(jù)時,您現(xiàn)在可以進行各種有趣的事情。例如,您可以構建遞歸流程,在其中通過系統(tǒng)運行數(shù)據(jù),獲取一些結果,將這些結果添加回元數(shù)據(jù),然后再次運行作業(yè)。您可以開始對數(shù)據(jù)周圍的數(shù)據(jù)建立深入的上下文理解。處理和使用的數(shù)據(jù)越多,將來用于其他作業(yè)的數(shù)據(jù)就越豐富。而且,對于要使用它的任何其他應用程序或數(shù)據(jù)科學家來說,現(xiàn)在,智能總是隨處可見。它并不局限于一個副本,而是藏在某個地方的一個存儲孤島上。
當您虛擬化數(shù)據(jù)時,所有這些事情都是可能的,因為與孤立的存儲基礎架構相比,元數(shù)據(jù)的使用更加靈活。設置和編排數(shù)據(jù)管道所伴隨的存儲注意事項現(xiàn)在可以為您解決。您的存儲資源將變?yōu)榭删幊痰?,自助服務的并且自動合?guī),通常不需要手動干預。
突然之間,您實際上生活在這樣一個現(xiàn)實,即Kubernetes和軟件定義的存儲始終應該交付。無論基礎架構如何,存儲都是軟件定義的,可編程的并且在混合云環(huán)境中保持一致。您的數(shù)據(jù)更豐富,更靈活。您的IT團隊不再將ID卡上的爆炸照片留在墻上扔鏢。最重要的是,您實際上在處理數(shù)據(jù)上花費了更多時間,而不用擔心數(shù)據(jù)的存放位置。
作者:佚名? 來源:IT168網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-62778877-8261;郵箱:[email protected]。本站原創(chuàng)內容未經(jīng)允許不得轉載,或轉載時需注明出處::西部數(shù)碼資訊門戶 ? 根治Kubernetes“存儲頭痛癥”的方法
文章版權歸作者所有,未經(jīng)允許請勿轉載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉載請注明本文地址:http://systransis.cn/yun/124831.html
摘要:執(zhí)行函數(shù)調用規(guī)范中的第一步是一個明顯的賦值語句,我們查看規(guī)范,賦值語句會發(fā)生什么可以看出簡單賦值語句返回的是對等于號右邊進行之后的結果,上一節(jié)講了,執(zhí)行過就會返回的類型,此處會返回也就是一個類型。 前言 this是JavaScript中的著名月經(jīng)題,每隔一段時間就有人翻出了拿各種奇怪的問題出來討論,每次都會引發(fā)一堆口水之爭。從搜索引擎搜了一下現(xiàn)在的比較熱門的關于this的用法,如:Ja...
摘要:從最大的同性社交平臺獲取數(shù)據(jù)好了,言歸正傳,回到題目。烏云密布的爬蟲百度網(wǎng)盤這件事,是我不想看到的,這類安全問題的一個共同特點用戶自身確實存在問題。 本文作者:夏之冰雪,i春秋簽約作家 《我在百度網(wǎng)盤上看到上萬條車主個人信息,企業(yè)、政府高官信息、各種數(shù)據(jù)庫和無窮無盡的盜版》,一時間,這篇文章就火了,火爆程度另百度猝不及防。 其實呢,這事真不能全怪百度,畢竟用戶分享出去了。之所以引起這么...
當時項目為了解決這個問題自閉了一個下午.....上網(wǎng)找了很多的文章看,幾乎都沒有根治方法,但是最后還是被我搞定了[]~( ̄▽ ̄)~* 問題描述: Vue的開發(fā)者都知道axios,很多都用axios來進行數(shù)據(jù)交互,axios的默認請求頭是Content-Type: application/json使用這個請求頭會出現(xiàn)向服務器請求兩次的情況為什么呢? 原因是:瀏覽器會首先使用 OPTIONS 方法發(fā)...
摘要:本文,棧長將帶你了解什么是空指針,還有如何有效的避免空指針。如何避免空指針下面說幾個空指針的幾個最常見的案例及解決之道。字符串比較,常量放前面這個時候可能為造成空指針異常,應該把常量放前面,就能避免空指針異常。 空指針是我們 Java 開發(fā)人員經(jīng)常遇到的一個基本異常,這是一個極其普遍但似乎又無法根治的問題。 本文,棧長將帶你了解什么是空指針,還有如何有效的避免空指針。 什么是空指針? ...
閱讀 2319·2021-11-24 10:18
閱讀 2761·2021-11-19 09:59
閱讀 1738·2019-08-30 15:53
閱讀 1219·2019-08-30 15:53
閱讀 1094·2019-08-30 14:19
閱讀 2509·2019-08-30 13:14
閱讀 3045·2019-08-30 13:00
閱讀 1994·2019-08-30 11:11