oltpbenchmark
oltpbenchmark是一套Java寫的資料庫效能測試程式。
環境
這篇所提到的設定主要是在Ubuntu 18.04下的Kubernetes（Docker）內的情境。
安裝
先安裝並且設定需要的軟件：
sudo apt install -y ant default-jdk openjdk-8-jdk git locales tzdata
update-alternatives --config java
# Use Java 8
取得並且編譯：
cd ~
git clone https://github.com/oltpbenchmark/oltpbench.git
cd ~/oltpbench
ant clean
ant
設定
cd ~/oltpbench
cp config/tpcc_config_postgres.xml config/tpcc.xml
vim config/tpcc.xml
# Change "DBUrl", "username", and "password".
測試
先建立表格並且產生測試資料：
cd ~/oltpbench
./oltpbenchmark -b tpcc -c config/tpcc.xml --create=true
./oltpbenchmark -b tpcc -c config/tpcc.xml --load=true
實際測試：
# Test it:
cd ~/oltpbench
./oltpbenchmark -b tpcc -c config/tpcc.xml --execute=true
# Filter rate data only:
cd ~/oltpbench
./oltpbenchmark -b tpcc -c config/tpcc.xml --execute=true | grep 'Rate limited'
# Do benchmark 100 times:
cd ~/oltpbench
for i in {1..100}; do
./oltpbenchmark -b tpcc -c config/tpcc.xml --execute=true 2>&1 | grep 'Rate limited'
done
# Get average result:
cd ~/oltpbench
(for i in {1..100}; do
./oltpbenchmark -b tpcc -c config/tpcc.xml --execute=true 2>&1 | grep 'Rate limited'
done) | awk '{sum += $(NF - 1); print $(NF - 1)} END {print sum / NR}'
其他
如果以PostgreSQL的界面測試CockroachDB時，會因為CockroachDB不支援CONSTRAINT指到沒有index的欄位，會需要修改PostgreSQL產生表格時的設定，並且重新編譯：
cd ~/oltpbench
vim src/com/oltpbenchmark/benchmarks/tpcc/ddls/tpcc-postgres-ddl.sql
# Remove all "ALTER TABLE ... ADD CONSTRAINT ..." entries near the end of the file.
# Then rebuild oltpbenchmark:
cd ~/oltpbench
ant clean
ant
另外CockroachDB只支援SERIALIZE模式，所以tpcc.xml內也修改成TRANSACTION_SERIALIZABLE。