數(shù)據(jù)庫服務(wù)和技術(shù)架構(gòu)演進(jìn)

1、從開發(fā)者需求看數(shù)據(jù)庫的發(fā)展數(shù)據(jù)庫服務(wù)和技術(shù)架構(gòu)演進(jìn)目錄01開發(fā)者看到的數(shù)據(jù)庫02開發(fā)者與數(shù)據(jù)庫的日常03例行痛點(diǎn)和一些新的模式04未來的數(shù)據(jù)庫開發(fā)者看到的數(shù)據(jù)庫關(guān)系型 數(shù)據(jù)庫MySQL PGSQL Server分析型數(shù)據(jù)庫ClickHouseothers時序數(shù)據(jù)庫 圖數(shù)據(jù)庫緩存 數(shù)據(jù)庫Redis Memcached開發(fā)者與數(shù)據(jù)庫的日常設(shè)計(jì)表結(jié)構(gòu)找DBA審核SQL語句申請資源寫SQL語句復(fù)現(xiàn)詭異問題申請擴(kuò)縮容例行痛點(diǎn)一: 測試順利，上線就跪場 景測試環(huán)境數(shù)據(jù)庫壓力正常沒有慢查詢生產(chǎn)環(huán)境數(shù)據(jù)庫實(shí)例CPU打爆全是慢查詢VS新模式: 測試報(bào)告+數(shù)據(jù)庫診斷報(bào)告新模式新裝備全量 審計(jì)日志DBBrain數(shù)據(jù)

2、庫診斷報(bào)告：潛在風(fēng)險上線前規(guī)避業(yè)務(wù)全量回歸測試數(shù)據(jù)庫全量審計(jì)日志例行痛點(diǎn)二: “等擴(kuò)容完，高峰期都過了”場 景需要增加 讀能力業(yè)務(wù)突發(fā) 流量實(shí)例數(shù)據(jù)幾百G 小時級擴(kuò)容新模式：秒級擴(kuò)容新裝備計(jì)算存儲分離數(shù)據(jù)庫新模式無數(shù)據(jù)拷貝過程進(jìn)程拉起即服務(wù)秒級擴(kuò)容Storage Nodesegmentsement_wal_cacheBlobFSspdk fileNVMeStorage Nodesegmentsement_wal_cacheBlobFSspdk fileNVMeStorage Nodesegmentsement_wal_cacheBlobFSspdk fileNVMeStorage Nodese

3、gmentsement_wal_cacheBlobFSspdk fileNVMeTCPAgentAgentCompute NodeCompute NodeCompute NodeCompute Node例行痛點(diǎn)三: “緩存太貴，加數(shù)據(jù)庫，邏輯復(fù)雜”場 景相比硬盤 內(nèi)存太貴業(yè)務(wù) 雙寫更新邏輯雙寫 設(shè)計(jì)一致性方案新模式：KV存儲服務(wù)Tendis Shard 0Tendis Shard 4Tendis Shard 1Tendis Shard 5Tendis Shard 2Tendis Shard nRedis Shard 0Redis Shard 1Redis Shard nProxyProxyProxyLBAPPAPPAPP新裝備Tendis: Redis的磁盤存儲