TiDB學習筆記(二十一)TiKV關鍵性能參數與配置

2022年10月01日22:48:15 科技 1283

Transaction模塊(事務模塊)

shceduler pool:協調事務並發寫入衝突


Raft模塊:將寫請求轉換成raft日誌,寫入本地並複製到其他節點

raftstore thread:


RocksDB模塊:將raft日誌應用到rocksdb,進行數據持久化

apply thread:

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


二、寫入流程

1、scheduler-worker-pool-size

scheduler 線程個數,主要負責寫入之前的事務一致性檢查工作。如果 CPU 核心數量大於等於 16,默認為 8;否則默認為 4。


2、store-max-batch-size

一輪處理的最大請求個數。

3、store-pool-size

表示處理 Raft 的線程池線程的數量,即 Raftstore 線程池的大小。

4、raft-max-inflight-msgs

待確認日誌個數的數量,如果超過這個數量將會減緩發送日誌的個數。


5、apply-pool-size

處理數據落盤的線程池中線程的數量。

6、apply-max-batch-size

一輪處理數據落盤的最大請求個數。

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


三、讀取流程

readpool.unified.max-thread-count

統一處理讀請求的線程池最多的線程數量,即 UnifyReadPool 線程池的大小。


storage.block-cache.capacity

共享 block cache 的大小


split.qps-threshold

對 Region 執行 load-base-split 的閾值。如果連續一段時間內,某個 Region 的讀請求的 QPS 超過 qps-threshold,則切分該 Region


split.byte-threshold

對 Region 執行 load-base-split 的閾值。如果連續一段時間內,某個 Region 的讀請求的流量超過 byte-threshold,則切分該 Region


點查:

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


非點查:

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


四、Write Stall現象

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞

TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞


五、慢查詢

小表熱點

索引熱點

CPU資源不足

Unified read瓶頸

Storage read pool瓶頸

執行計劃不合理(全表掃描)


TiDB學習筆記(二十一)TiKV關鍵性能參數與配置 - 天天要聞

科技分類資訊推薦

長安與東風重組新進展:朱華榮稱不會改變長安既定戰略 - 天天要聞

長安與東風重組新進展:朱華榮稱不會改變長安既定戰略

2月9日,長安汽車和東風集團股份(00489.HK)同步發佈了控股股東「正在與其他國資央企集團籌劃重組事項」的信息。長安汽車的控股股東是兵裝集團,而東風集團股份的控股股東是東風公司。隨即,長安汽車和東風集團這兩家汽車央企將合併重組,成為業內關注的焦點。
公安部出手了!年齡限制放寬10年、送考下鄉,2025年考駕照不難了 - 天天要聞

公安部出手了!年齡限制放寬10年、送考下鄉,2025年考駕照不難了

電動車加強管理以後,要求機動車類型的車輛需要持證上路,但是老年人考駕照卻受阻,一方面有年齡的限制,另一方面偏遠山區考駕照不方便,所以在2025年公安部出手了,年齡限制放寬10年,同時推出送考下鄉服務,還進一步的降低考駕照的費用,2025年起考摩托車駕照不難了。
從「星靈安全守護體系」到昊鉑HL,看懂廣汽科技日 - 天天要聞

從「星靈安全守護體系」到昊鉑HL,看懂廣汽科技日

發佈會以技術切入,並全程圍繞安全展開。廣汽集團董事長、總經理馮興亞率先登場,宣布2025年四季度將正式上市支持L3級智能駕駛的車型,他同時強調面向自動駕駛時代對智能駕駛技術、整車安全架構以及突發風險處理能力的要求更高。如何才能滿足更高的要求?馮興亞提到了「廣汽
關稅大棒下,最受傷的車企出現了 - 天天要聞

關稅大棒下,最受傷的車企出現了

特朗普的關稅大棒剛揮出,尚未嚇退「外敵」,卻先刺痛了自己。近日,擁有瑪莎拉蒂、Jeep等14個品牌的全球第四大車企斯泰蘭蒂斯突然宣布裁撤900名美國工人,關閉加拿大和墨西哥兩家工廠,北美生產線陷入癱瘓。幾乎同一時間,積架路虎宣布暫停對美出口一個月,奧迪更是直接