運(yùn)維案例SEARCH AGGREGATION
回答:首先明確下定義：計(jì)算時(shí)間是指計(jì)算機(jī)實(shí)際執(zhí)行的時(shí)間，不是人等待的時(shí)間，因?yàn)榈却龝r(shí)間依賴(lài)于有多少資源可以調(diào)度。首先我們不考慮資源問(wèn)題，討論時(shí)間的預(yù)估。執(zhí)行時(shí)間依賴(lài)于執(zhí)行引擎是 Spark 還是 MapReduce。Spark 任務(wù)Spark 任務(wù)的總執(zhí)行時(shí)間可以看 Spark UI，以下圖為例Spark 任務(wù)是分多個(gè) Physical Stage 執(zhí)行的，每個(gè)stage下有很多個(gè)task，task 的...
silenceboy
|
1142人閱讀
回答:隨著云計(jì)算的興起，運(yùn)維工程師一職也逐漸火爆起，但我在這跟想轉(zhuǎn)linux運(yùn)維的朋友來(lái)說(shuō)下真心話(huà)，希望對(duì)我的帖子能夠手下留情。LZ有將近8年的工作經(jīng)驗(yàn)，到今天已經(jīng)經(jīng)歷了4年互聯(lián)網(wǎng)公司，2家上市在中國(guó)國(guó)內(nèi)排名前10的手游公司，今天是我提出辭職的一天，我放棄了在公司內(nèi)部正在轉(zhuǎn)高級(jí)I的流程機(jī)會(huì)，意味著我放棄了月薪固定14K，彈打卡（全天不要求考勤），每個(gè)月1000多塊的車(chē)補(bǔ)（高級(jí)1以上），連續(xù)2年的年終獎(jiǎng)績(jī)...
DevTalking
|
1734人閱讀
回答:對(duì)于你這個(gè)問(wèn)題，可以很明顯的知道主要問(wèn)的是服務(wù)器領(lǐng)域，否則，如果是桌面運(yùn)維的話(huà)，肯定是Windows的多，這是不言而喻，毋庸置疑的。盡管如此，但我還是要糾正一下你這個(gè)觀點(diǎn)，你這個(gè)說(shuō)法是錯(cuò)誤的，即便在服務(wù)器領(lǐng)域，也并不是沒(méi)有Windows運(yùn)維工程師，只是相對(duì)Linux運(yùn)維工程師要少些，那么導(dǎo)致這一結(jié)果的原因是什么呢？且聽(tīng)我說(shuō)道說(shuō)道。歷史原因如今的互聯(lián)網(wǎng)能夠有著如此長(zhǎng)足的發(fā)展，離不開(kāi)萬(wàn)維網(wǎng)的發(fā)明，因?yàn)?..
Dionysus_go
|
740人閱讀
回答:我最近安裝了一款小巧開(kāi)源免費(fèi)的堡壘機(jī)Teleport，簡(jiǎn)單小巧，可以滿(mǎn)足審計(jì)和遠(yuǎn)程運(yùn)維的剛需，教程如下開(kāi)源免費(fèi)堡壘機(jī)Teleport，輕量級(jí)審計(jì)遠(yuǎn)程運(yùn)維神器可添加Windows和Linux主機(jī) SSH和RDP遠(yuǎn)程運(yùn)維添加完主機(jī)后，點(diǎn)擊遠(yuǎn)程按鍵即可進(jìn)行遠(yuǎn)程，Windows主機(jī)可選擇分辨率，Linux主機(jī)可使用sftp審計(jì)功能，操作回放在審計(jì)-會(huì)話(huà)記錄中，可以回放遠(yuǎn)程操作過(guò)程回放可加速，可跳過(guò)無(wú)操作的...
wqj97
|
1657人閱讀
回答:你好，我本人就是從事 Linux 運(yùn)維工作的，目前已經(jīng)有8年工作經(jīng)驗(yàn)，我分享一下我的看法和經(jīng)驗(yàn)，希望能幫助到你。問(wèn)題中說(shuō)的加班率高并不準(zhǔn)確，我所在的單位很少加班。還是要看行業(yè)，在IDC和 游戲領(lǐng)域的公司可能會(huì)加班多一些。Linux 運(yùn)維的發(fā)展前景我說(shuō)句實(shí)話(huà)，現(xiàn)在從事 Linux 運(yùn)維行業(yè) 的前景 只能說(shuō)還好，但已經(jīng)大不如前了，別被某些培訓(xùn)機(jī)構(gòu)忽悠了，當(dāng)然培訓(xùn)機(jī)構(gòu)也有比較好的，并不是所有的都坑。我僅...
dkzwm
|
713人閱讀
...于公有云自主可控?公有云架構(gòu)私有化部署?輕量化/輕運(yùn)維/易用性好?政府行業(yè)可復(fù)制案例輕量化 IaaS 虛擬化平臺(tái)?輕量化、產(chǎn)品成熟度高?業(yè)內(nèi)好評(píng)度高?功能豐富、交付部署快?中小企業(yè)案例多全套虛擬產(chǎn)品及云平臺(tái)產(chǎn)品...
...事業(yè)部高級(jí)總監(jiān)、首席研究員 專(zhuān)場(chǎng)五——質(zhì)量管理/智能運(yùn)維/DevOps 如何從單純運(yùn)維向技術(shù)運(yùn)營(yíng)的方向發(fā)展？ 如何前置測(cè)試和引入最新測(cè)試?yán)砟钆c工具？ 如何與周邊團(tuán)隊(duì)形成指導(dǎo)和協(xié)作的狀態(tài)？ 如何能夠通過(guò)產(chǎn)品、系統(tǒng)使用和...
...多，組件之間相互關(guān)聯(lián)，提供的應(yīng)用也很多。 1.2 大數(shù)據(jù)運(yùn)維的挑戰(zhàn) 運(yùn)維這樣一個(gè)大規(guī)模的平臺(tái)要面對(duì)哪些挑戰(zhàn)呢？ 首先來(lái)看大數(shù)據(jù)運(yùn)維的特點(diǎn)。 l?集群規(guī)模、數(shù)據(jù)量大，且爆發(fā)式增長(zhǎng)。大數(shù)據(jù)從字面上理解就是大，數(shù)據(jù)...
虎牙直播運(yùn)維負(fù)責(zé)人張觀石 張觀石，擁有10余年網(wǎng)站開(kāi)發(fā)、架構(gòu)、運(yùn)維經(jīng)驗(yàn)；目前關(guān)注互聯(lián)網(wǎng)服務(wù)可靠性系統(tǒng)工程、運(yùn)維平臺(tái)的規(guī)劃建設(shè)、網(wǎng)站高可用架構(gòu)等方面；在音視頻傳輸質(zhì)量評(píng)估、微服務(wù)運(yùn)維方面積累了豐富的經(jīng)驗(yàn)...
...式成功舉辦！ 本屆大會(huì)分為產(chǎn)品、團(tuán)隊(duì)、架構(gòu)、測(cè)試、運(yùn)維及人工智能6個(gè)專(zhuān)場(chǎng)，在2018年軟件研發(fā)行業(yè)的大背景下，人工智能、區(qū)塊鏈、大前端等話(huà)題成為大會(huì)的新亮點(diǎn)。TOP100組委會(huì)歷時(shí)125天，3000小時(shí)，180000分鐘，邀請(qǐng)到了20+...
...系統(tǒng)盤(pán)變成readonly。本文簡(jiǎn)單分析該問(wèn)題出現(xiàn)原因，并為運(yùn)維人員提供常見(jiàn)處理方法及建議。 故障分析 查看云主機(jī)dmesg信息發(fā)現(xiàn)，系統(tǒng)運(yùn)行過(guò)程中python進(jìn)程發(fā)生segfault，隨后vda（云主機(jī)配置virtio-blk，故盤(pán)符顯示為vda）系統(tǒng)盤(pán)I/O er...
...特別慢，工作人員也不知道為什么。由于他們剛上了業(yè)務(wù)運(yùn)維，支持這套系統(tǒng)的云智慧后臺(tái)管理人員通過(guò)數(shù)據(jù)一層層梳理，最后確定到某個(gè)區(qū)域的某個(gè)數(shù)據(jù)中心的某一塊硬盤(pán)緩存溢滿(mǎn)，導(dǎo)致交易變慢。找到并解決問(wèn)題之后，該咖...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
一、活動(dòng)亮點(diǎn)：全球31個(gè)節(jié)點(diǎn)覆蓋 + 線路升級(jí)，跨境業(yè)務(wù)福音！爆款云主機(jī)0.5折起：香港、海外多節(jié)點(diǎn)...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
沈建明
