PostgreSQL11preview-pgbench變數、函式擴充套件-暨pgbench自定義benchmark講解

背景

pgbench是PostgreSQL軟體包中的一款benchmark軟體，純C編碼，效率高，壓測方便。

內建TPC-B benchmark測試，同時支援自定義benchmark。

詳細文件見

https://www.postgresql.org/docs/10/static/pgbench.html

pgbench 自定義benchmark指令碼支援的語法

變數賦值的語法

壓測需要生成輸入變數，才能使得壓測覆蓋更廣的資料範圍。

1、pgbench 命令列輸入變數

-D varname=value    
--define=varname=value    
    
Define a variable for use by a custom script (see below). Multiple -D options are allowed.

2、benchmark指令碼內變數，表示式的值賦予給變數

set varname express

3、pgbench 自帶的兩個變數（一個是指client id, 每個連線一個，另一個是scale factor，即pgbench -s 輸入的值。）

表示式語法

1、資料型別

INT，浮點型別

2、支援的操作符

unary operators (+, -)     
    
binary operators (+, -, *, /, %)     
    
括號

3、函式呼叫

睡眠語法

模擬真實環境，APP處理消耗時間，再次發起請求的間隔。

sleep number [ us | ms | s ]

shell呼叫語法1

呼叫shell並將標準輸出賦予變數，用於在測試過程中呼叫SHELL命令。

setshell varname command [ argument ... ]    
    
setshell variable_to_be_assigned command literal_argument :variable ::literal_starting_with_colon

shell呼叫語法2

呼叫shell並拋棄結果，用於在測試過程中呼叫SHELL命令。

shell command [ argument ... ]    
    
shell command literal_argument :variable ::literal_starting_with_colon

生成隨機值的幾個函式

1、隨機分佈隨機數

在取值區間內，所有值的概率一致。

set varname random(min, max)    
    
set id random(1,100000)

2、高斯分佈隨機數

set varname random_gaussian(lb, ub, parameter)

在取值區間內，

約67%的值分佈在以min,max數學期望為中心的 “1.0 / 引數” 這個區間。

約95%的值分佈在以min,max數學期望為中心的 “2.0 / 引數” 這個區間。

引數越大，鈡的曲線越陡峭

引數越小，鈡的曲線越平緩

3、指數分佈隨機數

set varname random_exponential(lb, ub, parameter)

在取值區間內，”1%” 的高頻詞，在最靠近min的區間，出現 “引數%” 次。

引數越大，越趨向生成更小的值（越靠近min，出現概率越高）。

引數越小，越趨向隨機分佈。

4、也可以使用shell呼叫生成隨機數。

1 -----------------------    
setshell varname command [ argument ... ]    
    
Sets variable varname to the result of the shell command command with the given argument(s).     
The command must return an integer value through its standard output.    
    
command and each argument can be either a text constant or a :variablename reference to a variable.     
If you want to use an argument starting with a colon, write an additional colon at the beginning of argument.    
    
Example:    
    
setshell variable_to_be_assigned command literal_argument :variable ::literal_starting_with_colon    
    
2 -----------------------    
shell command [ argument ... ]    
    
Same as setshell, but the result of the command is discarded.    
    
Example:    
    
shell command literal_argument :variable ::literal_starting_with_colon

pgbench 例子

tpc-b benchmark 例子

1、初始化測試資料（如已有，可忽略）

-s 100 單位為10萬行，100表示1000萬行資料。    
    
pgbench -i -s 100

2、壓測

32個連線，測試120秒。    
    
pgbench -M prepared -n -r -P 1 -c 32 -j 32 -T 120

自定義 benchmark 例子

1、建立測試指令碼

vi test.sql    
    
set aid random(1, 100000 * :scale)    
set bid random(1, 1 * :scale)    
set tid random(1, 10 * :scale)    
set delta random(-5000, 5000)    
BEGIN;    
UPDATE pgbench_accounts SET abalance = abalance + :delta WHERE aid = :aid;    
SELECT abalance FROM pgbench_accounts WHERE aid = :aid;    
UPDATE pgbench_tellers SET tbalance = tbalance + :delta WHERE tid = :tid;    
UPDATE pgbench_branches SET bbalance = bbalance + :delta WHERE bid = :bid;    
INSERT INTO pgbench_history (tid, bid, aid, delta, mtime) VALUES (:tid, :bid, :aid, :delta, CURRENT_TIMESTAMP);    
END;

2、壓測

32個連線，測試120秒。    
    
pgbench -M prepared -n -r -f ./test.sql -P 1 -c 32 -j 32 -T 120

PostgreSQL 11 preview

增加 pow 函式

https://commitfest.postgresql.org/15/1357/

增加操作符

https://commitfest.postgresql.org/15/985/

Here is a simple patch which adds a bunch of operators :    
    
bitwise: & | ^ ~,     
comparisons: =/== <>/!= < <= > >=,     
logical: and/&& or/|| xor/^^ not/!    
functions (exp ln if)     
    
to pgbench. I`ve tried to be pg`s SQL compatible     
where appropriate.