Benchmark SQL配置及使用

概述

BenchmarkSQL是对OLTP数据库主流测试标准TPC-C的开源JAVA实现，用于对数据库事务处理能力的评估测试，代码托管在如下地址，当前版本为5.0。

An easy to use JDBC benchmark that closely resembles the TPC-C standard for OLTP. RDBMS's presently supported include PostgreSQL, EnterpriseDB and Oracle.

使用

BenchmarkSQL测试环境搭建按照以下步骤：

安装配置JDK
安装配置ant
配置使用BenchmarkSQL

安装配置JDK

官方网站下载JDK：https://www.oracle.com/technetwork/java/javase/downloads/index.html
配置JDK环境

解压到JDK到指定路径（此处路径为笔者习惯的安装目录）

tar -xvf jdk-8u231-linux-x64.tar.gz -C /usr/local

配置环境变量
配置环境变量可以通过修改/etc/profile或创建文件/etc/profile.d/java.sh实现，profile文件内实际上会调用profile.d目录下的脚本，所以两种修改方式皆可，添加内容如下：

export JAVA_HOME=/usr/local/jdk1.8.0_231
export CLASSPATH=$JAVA_HOME/lib/
export PATH=$PATH:$JAVA_HOME/bin

配置成功测试

source /etc/profile     //使新配置生效
java -version            //可以成功查询到JDK版本，则配置成功

安装ant

Ant工具通过构建文档（build.xml）实现对JAVA工程端构建，如下为官方准确描述：

Apache Ant is a Java library and command-line tool whose mission is to drive processes described in build files as targets and extension points dependent upon each other. The main known usage of Ant is the build of Java applications. Ant supplies a number of built-in tasks allowing to compile, assemble, test and run Java applications. Ant can also be used effectively to build non Java applications, for instance C or C++ applications. More generally, Ant can be used to pilot any type of process which can be described in terms of targets and tasks.

官方网站下载Ant工程： http://ant.apache.org/
配置安装

解压Ant到指定路径

tar -xvf apache-ant-1.10.7-bin.tar.gz -C /usr/local

配置环境变量
与JDK配置方式相同，添加内容如下：

export ANT_HOME=/usr/local/apache-ant-1.10.7
export PATH=$PATH:$ANT_HOME/bin

配置测试

source /etc/profile     //使新配置生效
ant -version            //可以成功查询到ant版本，则配置成功

配置使用BenchmarkSQL

下载官方工程（当前最新版本为5.0）：https://sourceforge.net/projects/benchmarksql/
使用Ant进行工程编译

unzip benchmarksql-5.0.zip  //解压安装包 
cd benchmarksql-5.0/        //进入工程根目录
ant     //ant工具通过根目录下端build.xml文件对源码进行编译并打包到/dist目录下

配置BenchmarkSQL（工程根目录下的HOW-TO-RUN.txt详细介绍了使用方法，建议参考）

配置props文件
进入run目录，会看到多个不同后缀名的props文件，这些文件用来针对不同的数据库进行测试参数配置（由于我们使用postgresql，因此针对props.pg文件进行配置），在执行时，BenchmarkSQL从该文件中提取参数进行数据库链接，测试指标提取等。在配置文件中主要需要修改的包括conn,user, password(这三项用于连接指定的数据库，因此需要提前在postgresql中创建好对应的DB以及用户)；后面的项目则是对压力测试的具体指标进行配置，大家可根据实际需要修改，具体含义网上很多介绍，这里就不再赘述。

db=postgres
driver=org.postgresql.Driver
conn=jdbc:postgresql://localhost:5432/tpcc
user=
password=

warehouses=1
loadWorkers=4

terminals=1
//To run specified transactions per terminal- runMins must equal zero
runTxnsPerTerminal=10
//To run for specified minutes- runTxnsPerTerminal must equal zero
runMins=0
//Number of total transactions per minute
limitTxnsPerMin=300

//Set to true to run in 4.x compatible mode. Set to false to use the
//entire configured database evenly.
terminalWarehouseFixed=true

//The following five values must add up to 100
//The default percentages of 45, 43, 4, 4 & 4 match the TPC-C spec
newOrderWeight=45
paymentWeight=43
orderStatusWeight=4
deliveryWeight=4
stockLevelWeight=4
……

运行测试

./runDatabaseBuild.sh props.pg    //进行测试数据库创建，数据导入
./runBenchmark.sh props.pg         //执行配置好的测试

测试结束后，会自动生成my_result_XXX开头的文件夹.当需要更改配置重新测试时，只需修改props.pg文件，运行./runDatabaseDestroy.sh props.pg，然后重复上面步骤即可。

PS:在使用配置好的用户进行数据库登陆时，如果报错如下，可通过修改文件/etc/postgresql/9.4/main/pg_hba.conf中对local的认证方法（peer改为md5），然后重启postgresql服务即可解决

psql: 致命错误: 对用户"XXX"的对等认证失败

# TYPE  DATABASE        USER            ADDRESS                 METHOD

# "local" is for Unix domain socket connections only
local   all             all                                     md5 //peer 改为 md5
# IPv4 local connections:
host    all             all             127.0.0.1/32            md5
# IPv6 local connections:
host    all             all             ::1/128                 md5