通常在对MySQL进行优化的时候,不要一上来就去优化MySQL的语句。MySQL的优化是一个系统话的过程,我们要自上而下来对MySQL进行优化。MySQL优化的第一步是观察服务器状态,找出出问题的地方在哪里,然后才能有的放矢。
我们可以使用show status和show processlist命令来观察MySQL的服务器状态。
show status返回了服务器很多状态指标,但是通常我们只需要关注一下几项:Queries,Threads_connected,Threads_running。这三项分别代表数据库的查询数量,已经连接的线程数和正在执行的线程数。注意这些指标项都是一个累计的值,所以如果我们要计算出这些统计项的差值才能观察出服务器的状态。为了计算出这些统计项的差值,我们可以有两种方案。为了能够使用linux的awk工具来实现数据统计,我们使用mysqladmin ext来代替MySQL命令行下面的show status命令。
第一种:
我们首先新建一个start.sh脚本文件,脚本内容为
#!/bin/bash
while true
do
mysqladmin -uroot ext|awk '/Queries/{q=$4}/Threads_connected/{c=$4}/Threads_running/{r=$4}END{printf("%d %d %d\n",q,c,r)}' >> status.txt
sleep 1
done
这个脚本的意思其实很简单,每隔一秒查询出MySQL的查询数目,线程连接数目,线程运行数目,并将结果追加到status.txt文件中。我们可以将这个脚本执行24个小时或者一定的时间,然后对status的内容进行分析。(关于awk,可以参考http://man.linuxde.net/awk,这里不再赘述)。
然后使用awk统计出status文件中的上下两行的差值,使用下面的shell命令:
awk 'BEGIN{print Queries,Threads_connected,Threads_running}NR==1{last=$1;next;}{q=$1-last;last=$1}{print q,$2,$3}' status.txt
该命令行可以统计出MySQL服务器的状态差值,同样使用了linux的awk工具。
然后我们可以将统计出的数据导入成为excel表格,生成图表,就可以清楚的看出来服务器的状态走势。
第二种
我们可以直接使用mysqladmin ext的参数来统计出来MySQL的服务器状态。通过-r和-i参数我们可以达到同样的效果。-r可以看到各个指标的差值,-i可以设定刷新频率。
mysqladmin -uroot -r -i -pxxx ext
结合awk我们就可以统计出来MySQL服务器的状态。
mysqladmin -uroot -p123456 -r -i 1 extended-status |awk -F"|" '{if($2 ~ /Variable_name/){print "<---------"strftime("%HH:%mm:%ss")"---------->"}if($2 ~ /Queries|Threads_connected|Threads_running/){print $2,$3}}' >>status.txt
通过观察服务器的连接状态和查询数量,我们可以绘制出服务器的状态折线图。通常如果状态折线图中总是周期性的出现查询高峰,可能就是缓存的失效时间固定在某个时间点。针对这样的情况,我们可以增加缓存时间,每天夜里刷新缓存。通常情况下夜间的访问量不会太大,在夜间缓存失效不会造成查询洪峰。等到白天查询变多的时候,其实我们已经建立起了一部分索引。避免出现查询高峰。
或者我们可以把缓存时间设为一个区间值,让缓存逐渐失效,而不是在某一个点一起失效。这样也能有效的防止查询高峰。