排查python server当时的系统信息
发现并没有异常，仅记录device eth0 entered promiscuous mode表示当时网卡 eth0 进入混杂模式,应该与当时启用tcpdump有关。
一、将python server改为nginx server方式，测试下载有没有异常
1
2
3
4
5
6
7
8
|
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/404.html
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 3650 100 3650 0 0 2313k 0 --:--:-- --:--:-- --:--:-- 3564k
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/zookeeper.out
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 1880M 100 1880M 0 0 396M 0 0:00:04 0:00:04 --:--:-- 396M
|
一切正常
二、服务端参数修改异常参数测试
使用nginx server，设置成net.ipv4.tcp_wmem="4096 4096 4096"
顺便记录下nginx配置
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
server {
listen 80;
listen [::]:80;
server_name _;
root /usr/share/nginx/html;
# Load configuration files for the default server block.
# include /etc/nginx/default.d/*.conf;
error_page 404 /404.html;
location = /404.html {
}
error_page 500 502 503 504 /50x.html;
location = /50x.html {
}
}
|
2.1 测试改为异常数据时，能否同时下载别的文件，排除线程卡死原因
命令行窗口1
1
2
3
4
|
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/zookeeper.out
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
0 0 0 0 0 0 0 0 --:--:-- 0:00:13 --:--:-- 0
|
命令行窗口2
1
2
3
4
5
6
7
8
9
10
11
12
|
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/404.html
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 3650 100 3650 0 0 2676k 0 --:--:-- --:--:-- --:--:-- 3564k
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/zookeeper.out
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
0 0 0 0 0 0 0 0 --:--:-- 0:01:00 --:--:-- 0^C
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/404.html
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 3650 100 3650 0 0 2664k 0 --:--:-- --:--:-- --:--:-- 3564k
|
2.2 测试改为异常数据的临界值，使用二分法测试
1
2
3
4
5
6
7
8
9
10
11
|
[root@172.19.5.43 html]# sysctl -w net.ipv4.tcp_wmem="4096 4096 9000"
net.ipv4.tcp_wmem = 4096 4096 9000
# 这个可以正常下载
[root@172.19.5.43 html]# sysctl -w net.ipv4.tcp_wmem="4096 4096 8259"
net.ipv4.tcp_wmem = 4096 4096 8259
# 这个可以正常下载
[root@172.19.5.43 html]# sysctl -w net.ipv4.tcp_wmem="4096 4096 8257"
net.ipv4.tcp_wmem = 4096 4096 8257
[root@172.19.5.43 html]# sysctl -w net.ipv4.tcp_wmem="4096 4096 8258"
net.ipv4.tcp_wmem = 4096 4096 8258
# 这个不能下载
|
结论：参数配置再 net.ipv4.tcp_wmem="4096 4096 8258" 及以下不能正常请求
三、排除文件原因，使用dd生成2G文件
设置为sysctl -w net.ipv4.tcp_wmem="4096 4096 4096",大文件确实会被卡住，小文件不受影响。
用dd if=/dev/zero of=large_file bs=1G count=2生成的文件2G大小文件。
命令行窗口1
1
2
3
4
|
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/large_file
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
0 0 0 0 0 0 0 0 --:--:-- 0:00:04 --:--:-- 0
|
命令行窗口2
1
2
3
4
|
[root@172.19.9.147 ~]# curl -O http://172.19.5.43/404.html
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 3650 100 3650 0 0 2905k 0 --:--:-- --:--:-- --:--:-- 3564k
|
同样，换成 large_file 文件一样不能下载。得出结果与之前文件一致：
- 临界值就是在
net.ipv4.tcp_wmem = 4096 4096 8259
- 下载大文件卡住时，同时下载小文件不受影响。
四、确认内核版本
当前是用的linux版本内核为
1
2
|
[root@172.19.5.43 html]# uname -a
Linux 172.19.5.43 3.10.0-957.27.2.el7.x86_64 #1 SMP Mon Jul 29 17:46:05 UTC 2019 x86_64 x86_64 x86_64 GNU/Linux
|