mysql資料庫三個關鍵性能指標--TPS\QPS\IOPS

2019年10月14日11:00:14 科技 1377

概述

今天主要介紹MySQL資料庫,或者說所有資料庫的三個關鍵性能指標:

  • qps 每秒處理的查詢數
  • tps 每秒處理的事務數
  • IOPS 每秒磁碟進行的I/O操作次數

mysql資料庫三個關鍵性能指標--TPS\QPS\IOPS - 天天要聞


一、TPS(適用innodb)

1、概念

Transactions Per Second(每秒傳輸的事物處理個數),即伺服器每秒處理的事務數。

TPS包括一條消息入和一條消息出,加上一次用戶資料庫訪問。(業務TPS = CAPS × 每個呼叫平均TPS)

TPS是軟體測試結果的測量單位。一個事務是指一個客戶機向伺服器發送請求然後伺服器做出反應的過程。客戶機在發送請求時開始計時,收到伺服器響應後結束計時,以此來計算使用的時間和完成的事務個數。

一般的,評價系統性能均以每秒鐘完成的技術交易的數量來衡量。系統整體處理能力取決於處理能力最低模塊的TPS值。

2、TPS計算

2.1、方法一

Com_commit = SHOW GLOBAL STATUS LIKE 'Com_commit';
Com_rollback = SHOW GLOBAL STATUS LIKE 'Com_rollback';
Uptime = SHOW GLOBAL STATUS LIKE 'Uptime';
TPS=(Com_commit + Com_rollback)/Uptime

2.2、方法二

use information_schema;
select VARIABLE_VALUE into @num_com from GLOBAL_STATUS where VARIABLE_NAME ='COM_COMMIT';
select VARIABLE_VALUE into @num_roll from GLOBAL_STATUS where VARIABLE_NAME ='COM_ROLLBACK';
select VARIABLE_VALUE into @uptime from GLOBAL_STATUS where VARIABLE_NAME ='UPTIME';
select (@num_com+@num_roll)/@uptime;

二、QPS(同時適用與InnoDB和MyISAM 引擎 )

1、概念

每秒查詢率QPS是對一個特定的查詢伺服器在規定時間內所處理流量多少的衡量標準,在網際網路上,作為域名系統伺服器的機器的性能經常用每秒查詢率來衡量。

對應fetches/sec,即每秒的響應請求數,也即是最大吞吐能力。

2、QPS計算

2.1、方法一

Questions = SHOW GLOBAL STATUS LIKE 'Questions';
Uptime = SHOW GLOBAL STATUS LIKE 'Uptime';
QPS=Questions/Uptime

2.2、方法二

use information_schema;
select VARIABLE_VALUE into @num_queries from GLOBAL_STATUS where VARIABLE_NAME ='QUESTIONS';
select VARIABLE_VALUE into @uptime from GLOBAL_STATUS where VARIABLE_NAME ='UPTIME';
select @num_queries/@uptime;

三、IOPS

1、概念

IOPS (Input/Output Per Second)即每秒的輸入輸出量(或讀寫次數),是衡量磁碟性能的主要指標之一。IOPS是指單位時間內系統能處理的I/O請求數量,一般以每秒處理的I/O請求數量為單位,I/O請求通常為讀或寫數據操作請求。隨機讀寫頻繁的應用,如OLTP(Online Transaction Processing),IOPS是關鍵衡量指標。另一個重要指標是數據吞吐量(Throughput),指單位時間內可以成功傳輸的數據數量。對於大量順序讀寫的應用,如VOD(Video On Demand),則更關注吞吐量指標。

傳統磁碟本質上一種機械裝置,如FC,SAS,SATA磁碟,轉速通常為5400/7200/10K/15K rpm不等。影響磁碟的關鍵因素是磁碟服務時間,即磁碟完成一個I/O請求所花費的時間,它由尋道時間、旋轉延遲和數據傳輸時間三部分構成。

尋道時間Tseek是指將讀寫磁頭移動至正確的磁軌上所需要的時間。尋道時間越短,I/O操作越快,目前磁碟的平均尋道時間一般在3-15ms。

旋轉延遲Trotation是指碟片旋轉將請求數據所在扇區移至讀寫磁頭下方所需要的時間。旋轉延遲取決於磁碟轉速,通常使用磁碟旋轉一周所需時間的1/2表示。比如,7200 rpm的磁碟平均旋轉延遲大約為60*1000/7200/2 = 4.17ms,而轉速為15000 rpm的磁碟其平均旋轉延遲約為2ms。

數據傳輸時間Ttransfer是指完成傳輸所請求的數據所需要的時間,它取決於數據傳輸率,其值等於數據大小除以數據傳輸率。目前IDE/ATA能達到133MB/s,SATA II可達到300MB/s的介面數據傳輸率,數據傳輸時間通常遠小於前兩部分時間。

IOPS可細分為如下幾個指標:

Toatal IOPS,混合讀寫和順序隨機I/O負載情況下的磁碟IOPS,這個與實際I/O情況最為相符,大多數應用關注此指標。

  • Random Read IOPS,100%隨機讀負載情況下的IOPS。
  • Random Write IOPS,100%隨機寫負載情況下的IOPS。
  • Sequential Read IOPS,100%順序負載讀情況下的IOPS。
  • Sequential Write IOPS,100%順序寫負載情況下的IOPS。

IOPS的測試benchmark工具主要有Iometer, IoZone, FIO等,可以綜合用於測試磁碟在不同情形下的IOPS。對於應用系統,需要首先確定數據的負載特徵,然後選擇合理的IOPS指標進行測量和對比分析,據此選擇合適的存儲介質和軟體系統。

2、IOPS計算

理論上可以計算出磁碟的最大IOPS,即IOPS = 1000 ms/ (Tseek + Troatation),忽略數據傳輸時間。假設磁碟平均物理尋道時間為3ms, 磁碟轉速為7200,10K,15K rpm,則磁碟IOPS理論最大值分別為,

IOPS = 1000 / (3 + 60000/7200/2) = 140

IOPS = 1000 / (3 + 60000/10000/2) = 167

IOPS = 1000 / (3 + 60000/15000/2) = 200

3、案例

需求:20TB存儲空間同時滿足4500 IOPS+RAID 5,我應該如何計算?RAID 5或者RAID 1/0的時候分別需要多少塊硬碟?

首先需要知道I/O中讀操作(Read)與寫操作(Write)所佔的百分比。然後通過下列公式,將主機的IOPS需求轉換成硬碟實際IOPS負載:

mysql資料庫三個關鍵性能指標--TPS\QPS\IOPS - 天天要聞

假定4500 IOPS中讀/寫比是2:1,則不同RAID類型Drive IOPS要求分別如下:

RAID 1/0: (2/3)*4500 + 2*(1/3)*4500 = 6000 IOPS
RAID 5: (2/3)*4500 + 4*(1/3)*4500 = 9000 IOPS
RAID 6: (2/3)*4500 + 6*(1/3)*4500 = 12000 IOPS

再參照下表中不同類型硬碟單塊IOPS參數,得出需要多少塊硬碟:

mysql資料庫三個關鍵性能指標--TPS\QPS\IOPS - 天天要聞

假定選用FC 15K RPM硬碟,則:

RAID 1/0: 6000/180 = 34 塊
RAID 5: 9000/180 = 50 塊
RAID 6: 12000/180 = 67 塊

註:實際情況下還需考慮Vault Drivers (共5塊)以及Hot Spares (建議每30塊硬碟一個)。

最後,如果選用600GB FC硬碟來實現20TB可用空間,則RAID 1/0需要78塊,RAID 5需要42塊。


覺得有用的朋友多幫忙轉發哦!後面會分享更多devops和DBA方面的內容,感興趣的朋友可以關注下~

mysql資料庫三個關鍵性能指標--TPS\QPS\IOPS - 天天要聞

科技分類資訊推薦

感謝南航機長不殺之恩 - 天天要聞

感謝南航機長不殺之恩

作者:朱文強 7月1日上午,南航吉林分公司機長李煜眾從南航長春基地縱身躍下,結束了自己年僅31歲的生命。 墜樓前,李煜眾持刀扎傷兩位上級,此事被當地公安列為刑事案件偵辦,據官方通....
雷軍都勸你看看小鵬和理想!小米YU7爆賣24萬台,卻一車難提 - 天天要聞

雷軍都勸你看看小鵬和理想!小米YU7爆賣24萬台,卻一車難提

雷軍大概沒想到,有一天自己也得站在直播間里,給友商拉業務。不是因為慈悲,而是因為——實在產不出來了。一句「急著用車的朋友,可以看看小鵬和理想」,聽著像佛系推薦,實則是一個被24萬個訂單砸懵的CEO,在高壓鍋里憋出的無奈求生欲。而更好笑的是,
失去靈魂!現在的微波爐怎麼不會轉圈了? - 天天要聞

失去靈魂!現在的微波爐怎麼不會轉圈了?

傳統印象中,微波爐是與「旋轉」緊密聯繫的電器。擰下旋鈕,玻璃轉盤帶動食物在溫暖的黃光中旋轉——然後,伴隨著「叮」的一聲,熱氣騰騰的飯菜就可以上桌了。甚至連微波加熱都叫「轉一下」,旋轉可以說是微波爐的靈魂 | BuzzFeed/giphy然而
山西省2025年全民數字素養與技能提升月現場活動成功舉辦 - 天天要聞

山西省2025年全民數字素養與技能提升月現場活動成功舉辦

山西省2025年全民數字素養與技能提升月現場活動。記者 錢龍 攝7月4日下午,山西省2025年全民數字素養與技能提升月現場活動在太原舉辦。活動中,中央網信辦信息化發展局二級巡視員喬燕婷,省委宣傳部副部長、省委網信辦(省網信辦)主任劉鵬,省人社廳副廳長吳海亮先後致辭,省委網信辦、省發改委、省數據局聯合發布山西省人...
中國手機市場新格局:華為奪魁,小米放緩,蘋果重返前三 - 天天要聞

中國手機市場新格局:華為奪魁,小米放緩,蘋果重返前三

在國補政策的推動下,多家手機品牌煥發了新的生機。今年二季度,在國補和渠道降價疊加618購物節的推動下,蘋果重返中國市場前三。「蘋果在5月調整iPhone價格的時機非常合適,且反響良好,恰好趕在618促銷前一周啟動。」Counterpoint研究副總監Ethan Qi評論道。不同於往年的發展,今年全球手機市場在多種不確定性因素的影響...