TPCC-MySQL数据采集脚本

一、编写目的

该脚本主要用于采集TPCC-MySQL进行测试时，采集必要的数据信息，包括tpc值、io、mem、cpu，以及mysql内部的数据等信息。主要用于之后的测试分析来用。

二、脚本功能说明

1、主要函数功能

get_key_value()：用于解析--args=XXX形式的XXX值。

usage()：用于输出帮助信息。

parse_options()：用于解析输入参数的有效性，并对输入的参数，调用get_key_value获取响应的值。

2、主流程分析

初始化基本参数；

调用parse_options对输入的所有参数进行解析，得到参数的值；

iostat查看io使用状况；

vmstat查看虚拟内存使用状况，可以从中看到是否有swap出现；

mysqladmin查看mysql内部各个参数的值；

scripts/innodb_stat.sh是TPCC-MySQL提供的一个脚本，用于采集innodb的状态；

mysqladmin variables 输出当前mysql的配置参数；

sysctl 用于输出系统的一些内核参数

 

三、脚本内容

       具体脚本如下所示：

#! /bin/sh

get_key_value()
{
    echo "$1" | sed 's/^--[a-zA-Z_-]*=//'
}

usage()
{
cat <<EOF
Usage: $0 [-h] [configure-options]
  -?, --help Show this help message.
  --mysqldir=<VALUE> Set the mysql directory
  --host=<VALUE> Set the host name.
  --port=<> Set the port number.
  --database=<VALUE> Set the database to test.
  --user=<VALUE> Set the user name.
  --password=<VALUE> Set the password.
  --wh=<> Set the warehouse number.
  --conns=<> Set the connection number.
  --wtime=<> Set the warm time (s)
  --rtime=<> Set the running time (s)
  --interval=<> Set the report interval time (S)
  --output=<VALUE> Set the report output directory
Note: this script is intended for internal use by developers.
EOF
}

parse_options()
{
  while test $# -gt 0
  do
    case "$1" in
    --host=*)
      HOST=`get_key_value "$1"`;;
    --mysqldir=*)
      MYSQLDIR=`get_key_value "$1"`;;
    --port=*)
      PORT=`get_key_value "$1"`;;
    --database=*)
      DATABASE=`get_key_value "$1"`;;
    --user=*)
      USER=`get_key_value "$1"`;;
    --password=*)
      PASSWORD=`get_key_value "$1"`;;
    --wh=*)
      WAREHOUSE=`get_key_value "$1"`;;
    --conn=*)
      CONNECTIONS=`get_key_value "$1"`;;
    --wtime=*)
      WARMTIME=`get_key_value "$1"`;;
    --rtime=*)
      UNTIME=`get_key_value "$1"`;;
    --interval=*)
      INTERVAL=`get_key_value "$1"`;;
    --output=*)
      OUTPUT=`get_key_value "$1"`;;
    -? | --help)
      usage
      exit 0;;
    *)
      echo "Unknown option '$1'"
      exit 1;;
    esac
    shift
  done
}

#############################################
MYSQLDIR=/opt/percona_mysql5.5.21
HOST=localhost
PORT=3306
DATABASE=""
USER=root
PASSWORD=""
WAREHOUSE=0
CONNECTIONS=16
WARMTIME=1800
RUNTIME=3600
INTERVAL=10
OUTPUT=/tmp/


parse_options "$@"

iostat -mxt $INTERVAL $(($RUNTIME/$INTERVAL+1)) >> $OUTPUT/iostat_$HOST_$PORT_$DATABASE_$WAREHOUSE_$CONNECTIONS_$WAITTIME_$RUNTIME.txt &

vmstat $INTERVAL $(($RUNTIME/$INTERVAL+1)) >> $OUTPUT/vmstat_$HOST_$PORT_$DATABASE_$WAREHOUSE_$CONNECTIONS_$WAITTIME_$RUNTIME.txt &

$MYSQLDIR/bin/mysqladmin ext -i$INTERVAL >> $OUTPUT/mysqladminext_$HOST_$PORT_$DATABASE_$WAREHOUSE_$CONNECTIONS_$WAITTIME_$RUNTIME.txt &

./scripts/innodb_stat.sh $RUNTIME >> $OUTPUT/innodb_$HOST_$PORT_$DATABASE_$WAREHOUSE_$CONNECTIONS_$WAITTIME.txt &

mysqladmin variables >> $OUTPUT/mysql_variables.res
sysctl -a >> $OUTPUT/sysctl.res

if [ "$DATABASE" = "" ]
then
  echo "Database must be a valid value"
  exit
fi
if test $WAREHOUSE = 0
then
  echo "Warehouse number must greater than 0"
fi

./tpcc_start -h $HOST -d $DATABASE -u $USER -w $WAREHOUSE -c $CONNECTIONS -r $WARMTIME -l $RUNTIME -i $INTERVAL >> $OUTPUT/tpcc_$HOST_$PORT_$DATABASE_$WAREHOUSE_$CONNECTIONS_$WAITTIME_$RUNTIME.txt &