今日服务器流量监控发现2台下载服务器流量越来越低,到最后竟然直接连不上了。
通知机房排除机房原因之后,连上系统查看日志,发现message里面很多kernel: ip_conntrack: table full, dropping packet.报错。
google了一下,发现也有其他人遇到类似问题,原来是ip_conntrack(连接跟踪表)中的数量过过多导致的,默认是65528。
wc -l /proc/net/ip_conntrack可以统计当前有多少个,超过65528就会kernel报错,cat /proc/sys/net/ipv4/ip_conntrack_max查看当前设置。
解决办法:
增加ip_conntrack_max设置,可以在/etc/sysctl.conf文件中增加:
net.ipv4.ip_conntrack_max = 655280然后键入命令sysctl -p生效
net.ipv4.netfilter.ip_conntrack_tcp_timeout_established=86400 设置连接跟踪表中失效时间为1天,如果觉得一天还是长的话可以改为3600(一小时)或者600(10分钟)
如果想立即降下来跟踪表中的连接可以尝试使用以下办法:
下载hping:
http://www.hping.org/download.html
./configure
make
make install
安装后写一个script.
- #!/bin/bash
- echo
- echo "############################"
- echo "# Edit by Youngh 2003.06.24 v1.1 "
- echo "# Usage : clr_conns IpAddress"
- echo "# This will clear all connections from this IP_Address"
- echo "# Example:/root/clr_conns 10.0.3.3 "
- echo "############################"
- echo
- if [ -z $1 ] ; then
- exit
- fi
- grep -E "^tcp .{10,25}ESTABLISHED src=$1 " /proc/net/ip_conntrack | while read line ; do
- S_IP=`echo $line | awk '{print substr($5,5)}'`
- S_SOCK=`echo $line | awk '{print substr($7,7)}'`
- D_IP=`echo $line | awk '{print substr($6,5)}'`
- D_SOCK=`echo $line | awk '{print substr($8,7)}'`
- echo "$S_IP:$S_SOCK $D_IP:$D_SOCK"
- hping2 $D_IP -R -s $S_SOCK -p $D_SOCK -a $S_IP -k -c 1 >/dev/null 2>/dev/null &
- done
用:sh clr_conns.sh IP
就可以清除连接.
cat /proc/net/ip_conntrack | cut -d ' ' -f 10 | cut -d '=' -f 2 | sort | uniq -c | sort -nr | head -n 10
转载于:https://blog.51cto.com/jerrybear/426828
本文介绍了解决服务器因ip_conntrack溢出导致流量下降的问题。通过调整ip_conntrack_max参数并设置合理的连接超时时间来解决连接跟踪表满的问题。同时提供了一个脚本用于清除指定IP的连接。

451

被折叠的 条评论
为什么被折叠?



