Benchmarksql基于PostgreSQL安装与使用

2018-10-24 本文已影响0人 clorislam_cmm

1、下载并解压benchmarksql

BenchMarkSQL下载链接：http://sourceforge.net/projects/benchmarksql/

下载后放置到安装机器上直接upzip安装包

2、安装ant


[root@localhost data]# yum install ant

[root@localhost data]# ant

3、下载最新java版本对应的postgresql jdbc jar

把要测试的数据库的JDBC DRIVER放到./ benchmarksql-5.0/lib目录下

wget https://jdbc.postgresql.org/download/postgresql-9.4.1207.jre7.jar

mv postgresql-9.4.1207.jre7.jar benchmarksql-5.0/lib/

4、下载安装 JDK7

JDK下载链接：[https://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261.html]

rpm -ivh jdk-7u80-linux-x64.rpm

5、配置JAVA环境变量

export JAVA_HOME=/usr/java/jdk1.7.0_80  ##jdk安装路径

export PATH=$JAVA_HOME/bin:$PATH

6、配置benchmarksql，使用新的postgresql java驱动

在run/目录下的 runBenchmark.sh 、 runLoader.sh 、 runSQL.sh三个文件中加入要测试的数据库的JDBC DRIVER的位置；

$ vi runBenchmark.sh 

java -cp .:../lib/postgresql-9.4.1207.jre7.jar:../lib/log4j-1.2.17.jar:../lib/apache-log4j-extras-1.1.jar:../dist/BenchmarkSQL-4.1.jar -Dprop=$1 jTPCC 

$ vi runLoader.sh 

java -cp .:../lib/postgresql-9.4.1207.jre7.jar:../dist/BenchmarkSQL-5.0.jar -Dprop=$1 LoadData $2 $3 $4 $5 

$ vi runSQL.sh 

myCP="../lib/postgresql-9.4.1207.jre7.jar" 

myCP="$myCP:../dist/BenchmarkSQL-4.1.jar" 

myOPTS="-Dprop=$1" 

myOPTS="$myOPTS -DcommandFile=$2" 

java -cp .:$myCP $myOPTS ExecJDBC

7、修改props.pg配置文件

props.pg配置文件在benchmarksql-5.0/run/下，改配置文件主要用于配置测试数据库连接以及测试数据加载量，以及其他测试参数，详情看以下备注

db=postgres
driver=org.postgresql.Driver
conn=jdbc:postgresql://192.168.1.3:5432/test
user=test
password=test

warehouses=32
loadWorkers=8

terminals=1
//To run specified transactions per terminal- runMins must equal zero
runTxnsPerTerminal=0
//To run for specified minutes- runTxnsPerTerminal must equal zero
runMins=3
//Number of total transactions per minute
limitTxnsPerMin=0

//Set to true to run in 4.x compatible mode. Set to false to use the
//entire configured database evenly.
terminalWarehouseFixed=true

//The following five values must add up to 100
//The default percentages of 45, 43, 4, 4 & 4 match the TPC-C spec
newOrderWeight=45
paymentWeight=43
orderStatusWeight=4
deliveryWeight=4
stockLevelWeight=4

// Directory name to create for collecting detailed result data.
// Comment this out to suppress.
resultDirectory=my_result_%tY-%tm-%td_%tH%tM%tS
osCollectorScript=./misc/os_collector_linux.py
osCollectorInterval=1
//osCollectorSSHAddr=user@dbhost
osCollectorDevices=net_eth0 blk_sda

conn=jdbc:postgresql://localhost:5432/benchmarksql

conn参数用于指定连接串，可以修改ip，端口与dbname

loadworkers

该参数用于指定测试数据加载时的并行度

warehouses

warehouses 参数用于指定仓库个数，用于控制测试数据量，默认为1，导入9张表的数据大小大概70多M，当numWarehouse为10时，数据大小可以近似当作1GB数据
每个仓库负责十个区域的供货，每个区域 3000 个客户服务，每个仓库维护 100000 种商品的库存纪录，每个仓库至多有10个终端

terminals

terminals参数用于指定模拟终端数

runTxnsPerTerminal

runTxnsPerTerminal参数用于指定每个终端提交事务数，这个参数与runMins只能选择设置其中一个，另一个必须设置为0
runTxnsPerTerminal=100
runMins=0

runMins

runMins参数用于指定运行时间，单位是分钟，这个参数与runTxnsPerTerminal只能选择设置其中一个，另一个必须设置为0
runTxnsPerTerminal=0
runMins=12

limitTxnsPerMin=100000

limitTxnsPerMin参数用于指定每分钟提交事务数限制，设置太小，压力会不够，如果测试结果不能接近该值就代表压力足够

terminalWarehouseFixed=true

terminalWarehouseFixed参数用于指定终端和仓库的绑定模式，设置为true时可以运行4.x兼容模式，意思为每个终端都有一个固定的仓库。设置为false时可以均匀的使用数据库整体配置。TPCC规定每个终端都必须有一个绑定的仓库，所以一般使用默认值true

8、创建测试表，以及测试数据预加载

在benchmarksql-5.0/run/下执行脚本 ./runDatabaseBuild.sh props.pg

执行该脚本会创建TPC-C标准模型中的9张表并按照props.pg设置的仓库数(warehouses)进行数据测试数据写入、主外键以及索引创建。

9、执行测试

在benchmarksql-5.0/run/下执行脚本 ./runBenchmark.sh props.pg

10、测试结果

Running Average tpmTOTAL：每分钟平均执行事务数（所有事务）
Memory Usage：客户端内存使用情况
Measured tpmC (NewOrders) ：每分钟执行的事务数（只统计NewOrders事务）
Transaction Count：执行的交易总数量

Term-00, Running Average tpmTOTAL: 292.39    Current tpmTOTAL: 22860    Memory Usage: 19MB / 61MB          
17:15:14,684 [Thread-2] INFO   jTPCC : Term-00, 
17:15:14,684 [Thread-2] INFO   jTPCC : Term-00, 
17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Measured tpmC (NewOrders) = 133.7
17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Measured tpmTOTAL = 292.31
17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Session Start     = 2018-10-24 17:03:14
17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Session End       = 2018-10-24 17:15:14
17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Transaction Count = 3508

11、测试后清除数据

在benchmarksql-5.0/run/下执行脚本./runDatabaseDestroy.sh props.pg
执行该脚本会将TPC-C测试相关表删除，测试下一个场景可以从第8个步骤重新执行。