K8S request limit 资源限制后，为啥 load average 还是很高

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 972 天前的主题，其中的信息可能已经有所发展或是发生改变。

我看对应的进程 cpu 已经最大 200%了

request limit 都设置为 2

load average

第 1 条附言 · 2022-03-26 11:50:52 +08:00

kubectl top命令cpu利用率正常，但是load average还是很高

第 2 条附言 · 2022-03-26 11:51:28 +08:00

k8s-node8

20 条回复 • 2022-03-26 19:31:31 +08:00

hwdef

2022-03-26 01:01:38 +08:00

kubectl top 看一下，容器里的 top 看资源使用量不一定准确

dunhanson

2022-03-26 01:03:34 +08:00

@hwdef 我在节点上面看的，没有在容器里面

dunhanson

2022-03-26 01:06:04 +08:00

@hwdef kubectl top node 确实占用不高，为啥节点上面用 top 比较高？

hwdef

2022-03-26 01:06:27 +08:00

不是你这个 pod 的问题吧，你这 pod 确实也没有超设定值，load average 高的原因有很多，磁盘什么的也会影响，不只是 cpu 和内存，看你这是阿里云的虚拟机，虚拟机底层的主机如果负载高也会造成虚拟机的平均负载高，

总之就是原因很多，不一定是 cpu 的问题

dunhanson

2022-03-26 01:07:39 +08:00

@hwdef 但是确实这个 pod 每次启动后负载都会很高，过几分钟后降下来了

dunhanson

2022-03-26 01:09:38 +08:00

@hwdef 因为这个项目很老，代码比较冗余，我现在代码在精简，有点效果，之前 top 启动的时候负载超过 200 300 ，现在<60 。但还是很高，cpu 总共也就 4 线程

hwdef

2022-03-26 01:11:45 +08:00

emmmm 容器优化 jvm 我也不熟，，我是写 go 的，，，感觉 java 上云还是容易水土不服，，

dunhanson

2022-03-26 01:19:03 +08:00

@hwdef 哈哈难搞

disk

2022-03-26 01:24:21 +08:00 via iPhone

你这个 java 程序是多线程的吗？ k8s 只能限制容器的 cpu 使用时间，如果你有多个线程在等 cpu ，负载一样会很高。

dunhanson

2022-03-26 01:33:05 +08:00

@disk

用的基于 tomcat7 的镜像，然后启动脚本是这样子，主要是为了方便看日志

chmod 777 /usr/local/tomcat/bin/catalina.sh
sh /usr/local/tomcat/bin/startup.sh
tee /opt/health.sh <<-'EOF'
while true
do
sleep 1s
if test $( ps -aux | grep java | grep tomcat | wc -l ) -eq 0
then
ps -aux | grep catalina.out | grep -v grep | awk '{print$2}' | xargs kill -9
fi
done
EOF
sh /opt/health.sh &
tail -f /usr/local/tomcat/logs/catalina_${HOSTNAME}.out

dunhanson

2022-03-26 01:33:43 +08:00

CMD ["sh","/usr/local/tomcat/bin/tomcat.sh"]