linux 服务器性能分析
- 网络连接数
cat /proc/net/sockstat
或者ss 进行统计(比较慢) 系统dmesg提示 socket out of memory
- 首先查看系统socket使用了多少,参考1.
查看系统给tcp分配的内存大小限制
cat /proc/sys/net/ipv4/tcp_rmem #tcp read buffer bytes4096 87380 629145
第一项是buffer最小4096字节,第二项是默认值87380字节,第三项是read buffer 最大限制629145 字节cat /proc/sys/net/ipv4/tcp_wmem #tcp write buffer bytes
write buffer与read buffer类似
cat /proc/sys/net/ipv4/tcp_mem #tcp memory pages21498 28665 42996
第一个值是内存使用的下限;第二个值是内存压力模式开始对缓冲区使用应用压力的上限;第三个值是内存使用的上限。在这个层次上可以将报文丢弃,从而减少对内存的使用socket out of memory。可以结合sockstat里的统计数据分析tcp使用内存是否超过了限制,注意这里单位是页,查看页大小getconf PAGESIZE
另外可以查看tcp读写发送窗口默认值:
/proc/sys/net/core/rmem_default
/proc/sys/net/core/rmem_max
/proc/sys/net/core/wmem_default
/proc/sys/net/core/wmem_max
另外socket out of memory 也有可能是孤儿socket过多导致的。
内核配置最大的孤儿socket数:
cat /proc/sys/net/ipv4/max_orphans
4096- 查看孤儿socket
cat /proc/net/sockstatsockets: used 403
TCP: inuse 4 orphan 0 tw 0 alloc 10 mem 1
UDP: inuse 12 mem 7
UDPLITE: inuse 0
RAW: infuse 0
FRAG: inuse 0 memory 0
注意这里的orphan 往往会被内核x2 或者x4,所以有时候看到这里的orphan数比较小,但是却有out of socket memory的提示,有可能就是这个放大倍数导致的。
关于孤儿socket 可以参考:孤儿socket
- 一个tcp socket占用多大内存
首先socket包括本地ip、端口,对端ip、端口;发送、接收缓冲区等(跟配置有关)。
如果按照上面最小的读写缓冲区来算那么一个socket大概占用8K的内存。
如果单从一个socket占用的内存来看,一个8GB的内存,一般情况下可以承受100万得sock长连接,前提是系统文件句柄要调大
tcp内存最大也要进行调整。 - tcp内核参数调优
tcp参数调优 查看系统总共使用了多少文件描述符
cat /proc/sys/fs/file-nr4096 0 9000
第一项就是当前系统已经打开的文件句柄(包括socket )cat /proc/sys/fs/file-max
系统最大的文件句柄数- dmesg or dmesg -T
查看内核的错误信息,比如tcp链接太多,句柄不够用,内存不足导致某些进程被kill掉 - slabtop 内核内存分配
- iostat -d 1 10 -x
- vmstat -n 1 10
可以通过该命令动态观察swap内存是否在发生变化,如果一直在增长,那么可以初步断定系统内存不够用。 - 当cache、buffer占用大量内存是可以通过调整内核参数释放改内存:
$sync (必须要先执行)
$ echo “3” > /proc/sys/vm/drop_caches (该值默认是0,不释放)