linux服务器性能分析_TCP内存

linux 服务器性能分析

  1. 网络连接数
    cat /proc/net/sockstat
    或者ss 进行统计(比较慢)
  2. 系统dmesg提示 socket out of memory

    1. 首先查看系统socket使用了多少,参考1.
    2. 查看系统给tcp分配的内存大小限制
      cat /proc/sys/net/ipv4/tcp_rmem #tcp read buffer bytes

      4096 87380 629145
      第一项是buffer最小4096字节,第二项是默认值87380字节,第三项是read buffer 最大限制629145 字节

      cat /proc/sys/net/ipv4/tcp_wmem #tcp write buffer bytes
      write buffer与read buffer类似
      cat /proc/sys/net/ipv4/tcp_mem #tcp memory pages

      21498 28665 42996
      第一个值是内存使用的下限;第二个值是内存压力模式开始对缓冲区使用应用压力的上限;第三个值是内存使用的上限。在这个层次上可以将报文丢弃,从而减少对内存的使用socket out of memory。可以结合sockstat里的统计数据分析tcp使用内存是否超过了限制,注意这里单位是页,查看页大小getconf PAGESIZE
      另外可以查看tcp读写发送窗口默认值:
      /proc/sys/net/core/rmem_default
      /proc/sys/net/core/rmem_max
      /proc/sys/net/core/wmem_default
      /proc/sys/net/core/wmem_max
      另外socket out of memory 也有可能是孤儿socket过多导致的。
      内核配置最大的孤儿socket数:
      cat /proc/sys/net/ipv4/max_orphans
      4096

    3. 查看孤儿socket
      cat /proc/net/sockstat

      sockets: used 403
      TCP: inuse 4 orphan 0 tw 0 alloc 10 mem 1
      UDP: inuse 12 mem 7
      UDPLITE: inuse 0
      RAW: infuse 0
      FRAG: inuse 0 memory 0
      注意这里的orphan 往往会被内核x2 或者x4,所以有时候看到这里的orphan数比较小,但是却有out of socket memory的提示,有可能就是这个放大倍数导致的。
      关于孤儿socket 可以参考:孤儿socket

  3. 一个tcp socket占用多大内存
    首先socket包括本地ip、端口,对端ip、端口;发送、接收缓冲区等(跟配置有关)。
    如果按照上面最小的读写缓冲区来算那么一个socket大概占用8K的内存。
    如果单从一个socket占用的内存来看,一个8GB的内存,一般情况下可以承受100万得sock长连接,前提是系统文件句柄要调大
    tcp内存最大也要进行调整。
  4. tcp内核参数调优
    tcp参数调优
  5. 查看系统总共使用了多少文件描述符
    cat /proc/sys/fs/file-nr

    4096 0 9000
    第一项就是当前系统已经打开的文件句柄(包括socket )

    cat /proc/sys/fs/file-max
    系统最大的文件句柄数

  6. dmesg or dmesg -T
    查看内核的错误信息,比如tcp链接太多,句柄不够用,内存不足导致某些进程被kill掉
  7. slabtop 内核内存分配
  8. iostat -d 1 10 -x
  9. vmstat -n 1 10
    可以通过该命令动态观察swap内存是否在发生变化,如果一直在增长,那么可以初步断定系统内存不够用。
  10. 当cache、buffer占用大量内存是可以通过调整内核参数释放改内存:
    $sync (必须要先执行)
    $ echo “3” > /proc/sys/vm/drop_caches (该值默认是0,不释放)
坚持原创技术分享,您的支持奖鼓励我继续创作!