部分内容转自：如何优化服务器的性能 - 南风轩 - 博客园

网络内核参数：blog.csdn.net/ysdaniel/article/details/7307091

陈皓性能调优攻略：coolshell.cn/articles/7490.html

1、系统资源

CPU 内存 磁盘IO 网络IO

2、性能调优

性能调优一般从以下几个方面入手。

（1）先看load（w,top,uptime），如果load高，说明系统某些资源出现了瓶颈，可以通过dstat和vmstat查看cpu，memory，IO哪些出现瓶颈，然后再具体看原因。

（2）有可能load不高，但就是响应时间比较长，这种情况可能是由于阻塞造成的，常见的比如工作线程都在等待某个事件发生，导致不能及时处理请求。

（3）还有一种情况是没有利用多核并发，比如某个耗时的任务只有一个线程处理，导致这个线程处理不过来造成流程上的阻塞，这种可以通过mpstat查看是不是集中在某一个或某几个核上。

（4）还有一种原因是内核代码导致的，比如不支持多队列的网卡上没有打开RFS，导致内核处理网络的逻辑没有负载在多个核上，这时候需要调整内核参数。

CPU

1）使用多线程 或多进程编程，充分利用多核CPU。老的线程库效率太低，需要升级用NPTL 。

2）进（线）程数不要远超cpu数，减少进程无味的切换。

3）慎重选择阻塞性IO，阻塞会导致进程切换，浪费CPU资源。

4）事件发生的时间无法估计或比较长，则不应该使用轮询的方式，尽量用异步方式等待事件就绪。

5）谨慎用锁，尽量把数据分配到各个线程，减少共享资源，减少竞争，lockfree。

6）类中有联系的数据尽量放在相邻的位置，可以放到一个cacheline里。

7）慎用字符串操作，比如sprintf，snprintf，因为%d %s等等都需要CPU资源去做词法分析，数量多的话，也是不菲的开销减少系统调用，例如time，主要消耗在用户态和内核态之间的切换。

8）优化算法，减少遍历操作。

9）优化架构，把系统管道调整到统一的半径，解决瓶颈。

10）使用一些静态池技术，比如内存池，线程池，连接池等，用空间换时间。

一个好的架构，服务器的CPU总消耗总是平均的分布在各个cpu上，CPU的消耗在70%左右。

内存

程序需要多少内存需要在设计的时候估计清楚，如果占用的内存接近物理内存，将会使用交换分区，影响性能。

网络IO

1）使用epoll代替select

2）使用非阻塞的模式来开发

3）减少消息交互次数

4）数据流使用长链接

5）优化应用层协议

6)   使用DPDK

磁盘IO

1）内存中缓存写入磁盘的数据，批量写磁盘，减少写入次数

2）利用顺序写，减少寻道次数

3）内存缓存热点数据，缓解磁盘读压力

4）对磁盘IO密集型的服务使用SSD盘

3、常用命令

1）dstat （综合）

dstat 是一个可以取代vmstat，iostat，netstat和ifstat这些命令的多功能产品。dstat克服了这些命令的局限并增加了一些另外的功能，增加了监控项，也变得更灵活了。dstat可以很方便监控系统运行状况并用于基准测试和排除故障。

2）vmstat （综合）

vmstat是一个很全面的性能分析工具，可以观察到系统的进程状态、内存使用、虚拟内存使用、磁盘的IO、中断、上下文切换、CPU使用等。

Procs：

r:运行的和等待(CPU时间片)运行的进程数，这个值也可以判断是否需要增加CPU(长期大于1)

b:处于不可中断状态的进程数，常见的情况是由IO引起的

Memory： 类似free命令

Swap：

si: 交换内存使用，由磁盘调入内存

so: 交换内存使用，由内存调入磁盘

内存够用的时候，这2个值都是0，如果这2个值长期大于0时，系统性能会受到影响。磁盘IO和CPU资源都会被消耗。

IO：

bi: 从块设备读入的数据总量(读磁盘) (KB/s)，

bo: 写入到块设备的数据总理(写磁盘) (KB/s)

随机磁盘读写的时候，这2个 值越大，能看到CPU在IO等待的值也会越大

System：

in: 每秒产生的中断次数

cs: 每秒产生的上下文切换次数

上面这2个值越大，会看到由内核消耗的CPU时间会越多

CPU：

us: 用户进程消耗的CPU时间百分比

us 的值比较高时，说明用户进程消耗的CPU时间多

sy: 内核进程消耗的CPU时间百分比

sy 的值高时，说明系统内核消耗的CPU资源多，这并不是良性的表现，我们应该检查原因。

wa: IO等待消耗的CPU时间百分比

wa 的值高时，说明IO等待比较严重，这可能是由于磁盘大量作随机访问造成，也有可能是磁盘的带宽出现瓶颈(块操作)。

id: CPU处在空闲状态时间百分比

3) top （CPU&内存）

可以查看系统中运行的进程的状况，CPU使用状况，系统负载，内存使用等。它是检查系统进程运行状况最方便的工具了，它默认显示部分活动的进程，并且按照进程使用CPU的多少排序。它可以显示全部CPU的使用状况，也可以显示每个进程都运行在那个CPU上面。

主要可以用top来看哪些进程或者那类进程占用CPU和内存资源最多，以此迅速定位存在性能问题的进程，以及运行异常的进程。

load average: 0.06, 0.60, 0.48 - 系统负载，即任务队列的平均长度。 三个数值分别为  1分钟、5分钟、15分钟前到现在的平均值。这个值最好小于0.7，一般大于0.7说明需要调优。

%CPU这个字段在多线程多核的环境中会超过100。

4）mpstat （CPU）

它能实时监测多处理器上每个CPU的使用情况。

5）perf （CPU）

perf top命令可以查看哪些内核调用或用户调用的性能。另外perf stat通过概括精简的方式提供被调试程序运行的整体情况和汇总数据。

6）strace （CPU）

可以用来查看一个进程在执行过程中的系统调用和所接收的信号。

7）gprof （CPU）

程序中每个函数的CPU使用时间。

每个函数的调用次数。并提供简单调用关系图。

使用步骤：

用gcc或g++编译程序时，使用-pg参数

执行编译得到的运行程序，会产生一个gmon.out文件

使用gprof命令。查看结果信息。（gprof -b proc_name gmon.out | less）

8）lsof （文件）

它能列出当前系统打开的文件描述符，可以看到哪些进程打开了哪些文件。文件描述符有两个层次的概念：用户级限制和系统限制，用户级限制可以通过ulimit

-n查看，系统级限制可以通过sysctl

-a命令查看，其中fs.file-max是整个系统共能打开的文件描述符，epoll.max_user_watches是一个用户能往epoll内核事件表中注册的事件总量，往epoll内核事件表中注册一个事件，在32位系统上大概消耗90字节的内核空间，在64位系统上则消耗160字节的内核空间。

9）free （内存）

free命令显示系统内存的使用状况（物理内存和交换内存）通过这个命令我们可以看到系统进程实际使用的物理内存，buffer和cache使用的物理内存。

第二行的used/free是OS角度，包括buffer和cache使用的内存。

第三行的used/free是用户角度，不包括buffer和cache使用的内存。

10）netstat （网络）

可以打印本地网卡接口上的全部连接，路由表信息，网卡接口信息等，一般用netstat -apn

11）ifstat （网络）

它是一个网络流量监测工具，可以输出各个网卡的in/out流量信息。

12) tcpdump （网络网络）

linux下的抓包工具。可以把抓下来的信息重定向到文件里。使用wireshark打开。

13）iostat （磁盘）

它主要用于监控系统设备的IO负载情况。

14）nc （调试工具）

主要用来快速构建网络连接。可以让它以服务器方式运行，监听某个端口并接收客户连接，可以用于调测客户端程序。也可以使之以客户端方式运行，向服务器发起连接并收发数据，可以用于调试服务器程序。

4、开发运维

代码中跟服务器资源相关的参数，包括连接数（内存 64G 200万），线程数（虚拟cpu数），qps（cpu busy），各种缓存（buffer）首先要做到可以静态配置，再高一点要求要做到动态配置，最终要做到代码可以根据服务器资源使用情况智能调整，同时还要有有效的服务降级策略，保证服务可用。