美文网首页
Benchmarksql基于PostgreSQL安装与使用

Benchmarksql基于PostgreSQL安装与使用

作者: clorislam_cmm | 来源:发表于2018-10-24 12:14 被阅读0次

    1、下载并解压benchmarksql

    BenchMarkSQL下载链接:http://sourceforge.net/projects/benchmarksql/

    下载后放置到安装机器上直接upzip安装包

    2、安装ant

    
    [root@localhost data]# yum install ant
    
    [root@localhost data]# ant
    
    

    3、下载最新java版本对应的postgresql jdbc jar

    把要测试的数据库的JDBC DRIVER放到./ benchmarksql-5.0/lib目录下

    wget https://jdbc.postgresql.org/download/postgresql-9.4.1207.jre7.jar
    
    mv postgresql-9.4.1207.jre7.jar benchmarksql-5.0/lib/ 
    
    

    4、下载安装 JDK7

    JDK下载链接:[https://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261.html]

    rpm -ivh jdk-7u80-linux-x64.rpm
    

    5、配置JAVA环境变量

    export JAVA_HOME=/usr/java/jdk1.7.0_80  ##jdk安装路径
    
    export PATH=$JAVA_HOME/bin:$PATH
    

    6、配置benchmarksql,使用新的postgresql java驱动

    在run/目录下的 runBenchmark.sh 、 runLoader.sh 、 runSQL.sh三个文件中加入要测试的数据库的JDBC DRIVER的位置;

    $ vi runBenchmark.sh 
    
    java -cp .:../lib/postgresql-9.4.1207.jre7.jar:../lib/log4j-1.2.17.jar:../lib/apache-log4j-extras-1.1.jar:../dist/BenchmarkSQL-4.1.jar -Dprop=$1 jTPCC 
    
    $ vi runLoader.sh 
    
    java -cp .:../lib/postgresql-9.4.1207.jre7.jar:../dist/BenchmarkSQL-5.0.jar -Dprop=$1 LoadData $2 $3 $4 $5 
    
    $ vi runSQL.sh 
    
    myCP="../lib/postgresql-9.4.1207.jre7.jar" 
    
    myCP="$myCP:../dist/BenchmarkSQL-4.1.jar" 
    
    myOPTS="-Dprop=$1" 
    
    myOPTS="$myOPTS -DcommandFile=$2" 
    
    java -cp .:$myCP $myOPTS ExecJDBC 
    

    7、修改props.pg配置文件

    props.pg配置文件在benchmarksql-5.0/run/下,改配置文件主要用于配置测试数据库连接以及测试数据加载量,以及其他测试参数,详情看以下备注

    db=postgres
    driver=org.postgresql.Driver
    conn=jdbc:postgresql://192.168.1.3:5432/test
    user=test
    password=test
    
    warehouses=32
    loadWorkers=8
    
    terminals=1
    //To run specified transactions per terminal- runMins must equal zero
    runTxnsPerTerminal=0
    //To run for specified minutes- runTxnsPerTerminal must equal zero
    runMins=3
    //Number of total transactions per minute
    limitTxnsPerMin=0
    
    //Set to true to run in 4.x compatible mode. Set to false to use the
    //entire configured database evenly.
    terminalWarehouseFixed=true
    
    //The following five values must add up to 100
    //The default percentages of 45, 43, 4, 4 & 4 match the TPC-C spec
    newOrderWeight=45
    paymentWeight=43
    orderStatusWeight=4
    deliveryWeight=4
    stockLevelWeight=4
    
    // Directory name to create for collecting detailed result data.
    // Comment this out to suppress.
    resultDirectory=my_result_%tY-%tm-%td_%tH%tM%tS
    osCollectorScript=./misc/os_collector_linux.py
    osCollectorInterval=1
    //osCollectorSSHAddr=user@dbhost
    osCollectorDevices=net_eth0 blk_sda
    

    conn=jdbc:postgresql://localhost:5432/benchmarksql

    conn参数用于指定连接串,可以修改ip,端口与dbname
    

    loadworkers

    该参数用于指定测试数据加载时的并行度
    

    warehouses

    warehouses 参数用于指定仓库个数,用于控制测试数据量,默认为1,导入9张表的数据大小大概70多M,当numWarehouse为10时,数据大小可以近似当作1GB数据
    每个仓库负责十个区域的供货,每个区域 3000 个客户服务,每个仓库维护 100000 种商品的库存纪录,每个仓库至多有10个终端
    
    

    terminals

    terminals参数用于指定模拟终端数
    

    runTxnsPerTerminal

    runTxnsPerTerminal参数用于指定每个终端提交事务数,这个参数与runMins只能选择设置其中一个,另一个必须设置为0
    runTxnsPerTerminal=100
    runMins=0
    

    runMins

    runMins参数用于指定运行时间,单位是分钟,这个参数与runTxnsPerTerminal只能选择设置其中一个,另一个必须设置为0
    runTxnsPerTerminal=0
    runMins=12
    

    limitTxnsPerMin=100000

    limitTxnsPerMin参数用于指定每分钟提交事务数限制,设置太小,压力会不够,如果测试结果不能接近该值就代表压力足够
    

    terminalWarehouseFixed=true

    terminalWarehouseFixed参数用于指定终端和仓库的绑定模式,设置为true时可以运行4.x兼容模式,意思为每个终端都有一个固定的仓库。设置为false时可以均匀的使用数据库整体配置。TPCC规定每个终端都必须有一个绑定的仓库,所以一般使用默认值true
    

    8、创建测试表,以及测试数据预加载

    在benchmarksql-5.0/run/下执行脚本 ./runDatabaseBuild.sh props.pg

    执行该脚本会创建TPC-C标准模型中的9张表并按照props.pg设置的仓库数(warehouses)进行数据测试数据写入、主外键以及索引创建。

    9、执行测试

    在benchmarksql-5.0/run/下执行脚本 ./runBenchmark.sh props.pg

    10、测试结果

    Running Average tpmTOTAL:每分钟平均执行事务数(所有事务)
    Memory Usage:客户端内存使用情况
    Measured tpmC (NewOrders) :每分钟执行的事务数(只统计NewOrders事务)
    Transaction Count:执行的交易总数量

    Term-00, Running Average tpmTOTAL: 292.39    Current tpmTOTAL: 22860    Memory Usage: 19MB / 61MB          
    17:15:14,684 [Thread-2] INFO   jTPCC : Term-00, 
    17:15:14,684 [Thread-2] INFO   jTPCC : Term-00, 
    17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Measured tpmC (NewOrders) = 133.7
    17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Measured tpmTOTAL = 292.31
    17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Session Start     = 2018-10-24 17:03:14
    17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Session End       = 2018-10-24 17:15:14
    17:15:14,685 [Thread-2] INFO   jTPCC : Term-00, Transaction Count = 3508
    

    11、测试后清除数据

    在benchmarksql-5.0/run/下执行脚本./runDatabaseDestroy.sh props.pg
    执行该脚本会将TPC-C测试相关表删除,测试下一个场景可以从第8个步骤重新执行。


    相关文章

      网友评论

          本文标题:Benchmarksql基于PostgreSQL安装与使用

          本文链接:https://www.haomeiwen.com/subject/sabttqtx.html