阿里云數(shù)據(jù)庫查詢優(yōu)化SEARCH AGGREGATION
回答:我的天啦，一個(gè)表九千萬也是了不得了！我上家公司明確規(guī)定，一張表不能超過5000萬，因?yàn)椴樵冃蕰?huì)有更大的降低！無論如何，看下如何優(yōu)化數(shù)據(jù)查詢吧?、伲瑔螏靻伪?1，加索引，一個(gè)好的索引能用空間換取查詢時(shí)間的大為降低！2，使用存儲(chǔ)過程:減少sql編譯的時(shí)間！3，優(yōu)化sql:包括聯(lián)合查詢的指向，where，order語句使用索引字段，減少使用多表聯(lián)合查詢，不要使用select *等等！4，參數(shù)配置:擴(kuò)大...
olle
|
3372人閱讀
回答:使用合理的分頁方式以提高分頁的效率正如樓主所說，分頁查詢?cè)谖覀兊膶?shí)際應(yīng)用中非常普遍，也是最容易出問題的查詢場(chǎng)景。比如對(duì)于下面簡(jiǎn)單的語句，一般想到的辦法是在name，age，register_time字段上創(chuàng)建復(fù)合索引。這樣條件排序都能有效的利用到索引，性能迅速提升。如上例子，當(dāng) LIMIT 子句變成 LIMIT 100000, 50 時(shí)，此時(shí)我們會(huì)發(fā)現(xiàn)，只取50條語句為何會(huì)變慢?原因很簡(jiǎn)單，MyS...
王晗
|
1794人閱讀
回答:樓主的這個(gè)問題并不是非常清晰，但大體意思是說Mysql優(yōu)化，實(shí)際上不同的業(yè)務(wù)場(chǎng)景可能會(huì)有不同的優(yōu)化方案，比如有些場(chǎng)景可以配置查詢緩存，有些則不可以。1、對(duì)于查詢SQL語句的優(yōu)化，一般來說先想到是加索引2、使用explain查看SQL語句的執(zhí)行計(jì)劃，看看時(shí)間主要花費(fèi)在什么地方3、根據(jù)業(yè)務(wù)場(chǎng)景，調(diào)整表結(jié)構(gòu)，優(yōu)化子查詢的效率4、根據(jù)業(yè)務(wù)場(chǎng)景，對(duì)表進(jìn)行適當(dāng)?shù)牟鸱?，將這個(gè)查詢需要的字段單獨(dú)拆分到一個(gè)表中。更...
ISherry
|
992人閱讀
回答:不知道開發(fā)的同學(xué)有沒有遇到過類似這樣的需求：相同類型的數(shù)據(jù)在多個(gè)系統(tǒng)中，如果要得到全部的信息，就要連續(xù)調(diào)多個(gè)系統(tǒng)的接口；業(yè)務(wù)復(fù)雜，一個(gè)需求需要關(guān)聯(lián)幾張表甚至幾十張表才能得到想要的結(jié)果；系統(tǒng)做了分庫分表，但是需要統(tǒng)計(jì)所有的數(shù)據(jù)。那么此類需求要如何滿足呢？我們選擇了通過 ETL 提前進(jìn)行數(shù)據(jù)整合的方案。什么是 ETL說到ETL，很多開發(fā)伙伴可能會(huì)有些陌生，更多的時(shí)候 ETL 是用在大數(shù)據(jù)、數(shù)據(jù)分析的相...
MarvinZhang
|
2218人閱讀
回答:很多國產(chǎn)數(shù)據(jù)庫乘風(fēng)破浪我們正處在一個(gè)數(shù)據(jù)庫技術(shù)大爆炸的時(shí)代。這幾年，NoSQL數(shù)據(jù)庫、NewSQL數(shù)據(jù)庫、時(shí)序數(shù)據(jù)庫、圖數(shù)據(jù)庫、分布式數(shù)據(jù)庫、超融合數(shù)據(jù)庫等專業(yè)數(shù)據(jù)庫技術(shù)發(fā)展勢(shì)頭很猛，國產(chǎn)數(shù)據(jù)庫的表現(xiàn)也相當(dāng)亮眼。過去十年，是互聯(lián)網(wǎng)發(fā)展的黃金十年。與此對(duì)應(yīng)的是業(yè)務(wù)系統(tǒng)訪問并發(fā)呈指數(shù)級(jí)上升，海量數(shù)據(jù)計(jì)算和分析需求越來越普遍，傳統(tǒng)單機(jī)系統(tǒng)在業(yè)務(wù)支撐、成本、開放性等方面均面臨巨大挑戰(zhàn)，數(shù)據(jù)庫垂直擴(kuò)展模式難...
RebeccaZhong
|
849人閱讀
...度系統(tǒng)，阿里云做了五個(gè)方面的優(yōu)化。 第一個(gè)是精準(zhǔn)的IP數(shù)據(jù)庫會(huì)持續(xù)更新基于第三方IP庫數(shù)據(jù)、whois平臺(tái)和淘寶手機(jī)用戶在訪問數(shù)據(jù)時(shí)的一些經(jīng)緯度信息，會(huì)對(duì)IP庫進(jìn)行主動(dòng)探測(cè)，基于這些維度的數(shù)據(jù)，進(jìn)行計(jì)算和生成。IP庫數(shù)...
...中，這部分?jǐn)?shù)據(jù)用于離線計(jì)算，離線計(jì)算結(jié)果存入關(guān)系型數(shù)據(jù)庫。Streaming實(shí)時(shí)計(jì)算模塊，主要包括兩方面功能：一是從DataHub讀取實(shí)時(shí)數(shù)據(jù)解析、清洗后存儲(chǔ)到HiTSDB中；一是通過實(shí)時(shí)數(shù)據(jù)計(jì)算企業(yè)設(shè)備的運(yùn)行狀態(tài)，相關(guān)計(jì)算結(jié)果...
...業(yè)務(wù)在不同的物理點(diǎn)上做，比如web服務(wù)器、應(yīng)用服務(wù)器、數(shù)據(jù)庫服務(wù)器，這三個(gè)節(jié)點(diǎn)分開部署在不同的機(jī)器上，共同完成一個(gè)業(yè)務(wù)；分布式的特點(diǎn)是，每個(gè)節(jié)點(diǎn)都不能掛，否則這個(gè)業(yè)務(wù)就不能完成了；當(dāng)然，我們可以給分布式中...
...行了容器化改造，實(shí)現(xiàn)了Explorer本身以及其所依賴的MySQL數(shù)據(jù)庫作為Kubernetes的service和deployment內(nèi)置于解決方案中（默認(rèn)啟用，可設(shè)置禁用），隨著區(qū)塊鏈網(wǎng)絡(luò)的創(chuàng)建實(shí)現(xiàn)自動(dòng)配置、部署、啟動(dòng)和通過負(fù)載均衡（SLB)對(duì)外提供Web圖形...
2月27日，阿里云數(shù)據(jù)管理DMS發(fā)布年度巨獻(xiàn)——數(shù)據(jù)庫實(shí)驗(yàn)室，用戶可在該實(shí)驗(yàn)室環(huán)境下免費(fèi)體驗(yàn)數(shù)據(jù)庫引擎、以及DMS各項(xiàng)產(chǎn)品功能。數(shù)據(jù)庫實(shí)驗(yàn)室是DMS所提供的體驗(yàn)空間，免費(fèi)贈(zèng)送數(shù)據(jù)庫引擎資源。 用戶只需要登錄阿里云賬號(hào)...
...決方案，具備萬臺(tái)服務(wù)器擴(kuò)展能力和跨地域容災(zāi)能力，是阿里巴巴內(nèi)部核心大數(shù)據(jù)平臺(tái)，支撐每日百萬級(jí)作業(yè)規(guī)模。MaxCompute向用戶提供了完善的數(shù)據(jù)導(dǎo)入方案以及多種經(jīng)典的分布式計(jì)算模型，能夠更快速的解決用戶海量數(shù)據(jù)計(jì)...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
LiveVideoStack
