V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  liuxu  ›  全部回复第 29 页 / 共 146 页
回复总数  2904
1 ... 25  26  27  28  29  30  31  32  33  34 ... 146  
@Donahue 你这个价格上 5600x 也香
2021-11-10 00:06:46 +08:00
回复了 10935336 创建的主题 Linux Red Hat Enterprise Linux 9 Beta 已发布 RHEL 9 测试版
@10935336
红帽:centos steam 的小白鼠们真好用
2021-11-10 00:05:17 +08:00
回复了 10935336 创建的主题 Linux Red Hat Enterprise Linux 9 Beta 已发布 RHEL 9 测试版
红帽牛逼,我用 debian
2021-11-09 16:14:00 +08:00
回复了 yuandj 创建的主题 Linux 高并发服务器 tcp 内核参数优化及对于连接池配置数量请教
@yuandj 突然想起来,如果你没能通过 Timer 解决问题,我建议你再次从 kafka/mysql/redis 阻塞分析,原因是你 kafka 使用的是协程而不是异步任务,协程只能解决单线程 io 阻塞问题,只是能让程序并行处理多个任务,并不能让单个请求的时间减少(并不是多线程执行,请求的线程把任务扔给任务线程后直接返回请求 response )

如果你 kafka 节点有问题的话,一个请求中,协程依然会等待任务执行完(等待途中 yield 让别的请求执行),等待结束继续处理这个请求,然后返回请求。如果你的框架请求一开始就创建了 mysql 和 redis 连接而没有主动释放,kafka 的阻塞会导致 swoole 维持它们,所有 kafka/mysql/redis 连接数都多。因为 swoole 执行慢,所以 nginx 连接维持时间长,连接看上去也会多

当然还是希望是 Timer 问题,事情就简单很多
2021-11-09 12:34:54 +08:00
回复了 yuandj 创建的主题 Linux 高并发服务器 tcp 内核参数优化及对于连接池配置数量请教
@yuandj 根据你#17 的信息,我也觉得可能是 timer 的业务问题,由于 linux 内核的调度器频繁把 cpu 切到定时间的线程执行任务,导致影响了接口主线程执行。但是你的 cpu 负载并没有满,只用了 50%左右,这很奇怪,会有这么大的影响么。还是说你的定时器任务和接口中的代码有关联,导致接口需要等待定时器的任务结果。

如果 swoole 方面不好解决,可以把 nginx 的负载均衡改成最小连接数应急,不过这个方案你应该也知道
2021-11-09 11:07:38 +08:00
回复了 yuandj 创建的主题 Linux 高并发服务器 tcp 内核参数优化及对于连接池配置数量请教
我先给出问题的结论:
你的 kafka 集群中,存在某个单节点写入过慢 /负载过高。而且你的 kafka 负载均衡被连接后会固定写入某个到了某个节点。



首先和你的内核参数关系不大,qps 600 只要 ulimit -n 调大一点,就一切 ok 。

根据你提供的信息,我整理下现状:
1. 有问题的服务器 php 和 ruby 的 cpu 占用都大,但是 cpu 使用率都没有达到 100%。
2. 有问题的服务器 swap 占用过多,但不明显,只有 100MB 。
3. 有问题的服务器存在大量 connection 存在 dose not exists 。
4. nginx 是轮询 php 后端。
5. php 业务链接 kafka/mysql/redis 。
6. 有问题的 swoole 对 kafka 有多 1 倍的连接数,对 nginx 的连接数比正常的少 20%。
7. 只有 3 台固定的 swoole 有以上问题。
8. 有问题的 swoole 请求时间过长。




下面说下问题解析,如果以上信息没有提供错误的话,可以得到以下结论:

一、 主要现象是 php 接口过慢。所以一下现象可以正常解释:
1. 会出现大量 connection 错误。因为接口慢,所有 client 等不及关掉连接,或者刷新。
2. php 、ruby(fluentd)、supervisord 的 cpu 过高,但是 ruby 内存占用小。因为大量 connection 错误,所以 swoole 频繁写入日志,从而导致 fluentd 频繁调起读取日志发送或写入 buffer 。而日志都是 connnect 错误,字符少,所有内存占用少。同时我可以推测你的 fluentd 是 supervisord 管理的,所以 supervisord 频繁调起 fluentd ,导致它自己的 cpu 也高。

二、另一个现象是 3 台固定的 swoole 有问题。这个问题可以排除和定位问题:
1. nginx 没问题。虽然我推测可能是 nginx 负载均衡算法问题,或者说 nginx 轮询没有真实的运行,但是这个是解释不通的。首先 nginx 基本不可能出问题,有问题也极难遇到,当然我说的是你用的 stable 版。即使是 nginx 问题,那么出现 3 台固定 swoole 有问题,只有可能是有人用固定几个 ip 在 cc 攻击,才会导致 nginx 转发到这 3 台 swoole 。但是你 600 的 qps ,能 cc 0.6k 我还没见过这么抠的。
2. swoole 业务代码自身没问题。如果是 woole 业务代码逻辑问题,那么问题应该是随机出现在不同 swoole 服务器上,而不是固定 3 台。
3. swoole 所在物理服务器没问题。可能是内存颗粒有问题,导致处理业务数据过慢。但是我想你用的应该是 kvm 云服务器。而 3 台都落在一台云服务物理服务器可能性不大,即使存在云服务商应该能检查出来,会即使通知你,并更换内存条。当然也有极微可能是这个问题。
4. swoole 所在屋里服务器随机 io 满负荷。这个是有可能的,可能是你这 3 台 swoole 由于 connnection 错误日志太多,php 写入和 fluentd 读取导致 io 爆满。但是你的是 8H8G 的服务器,而且只有 600qps ,所有基本不可能。

三、为什么我推测是 kafka 单节点有问题。
1. 不是 mysql 问题,如果是 mysql 问题,例如业务 sql 读取大量数据,问题应该是随机出现在不同 swoole 服务器上。
2. 不是 redis 问题,原因如上。
3. kafka 情况有点不同,我推测你的 swoole 和 kafka 之间是 swoole 启动时和 kafka 创建的长连接,所以这 3 台固定写入到某个节点,而这个节点写入过慢,写入过慢所以 swoole 会维持连接,你看到的连接数就会更多。同时写入过慢所以你的 php 接口慢,这就都解释通了。
2021-11-03 19:51:14 +08:00
回复了 bfc 创建的主题 程序员 开发速度最快的 Web 框架?
spring-boot 开发快,但是 laravel 很多时候不需要开发,只需要 composer install 包就行了
2021-11-03 19:20:57 +08:00
回复了 liuxu 创建的主题 Java spring-boot 如何引入同一个包多个版本
@hand515 b 没有源码,正在从项目入手
2021-11-03 19:20:05 +08:00
回复了 liuxu 创建的主题 Java spring-boot 如何引入同一个包多个版本
@ic2y 多谢,我看看怎么整


@renmu123 目前是在升级到 v2 ,但是解决了一个问题却引出千千万万个问题,我看怎么搞
2021-11-03 09:51:17 +08:00
回复了 liu1996 创建的主题 Java 接口访问次数多了变慢是 tomcat 限制还是服务器 cpu 限制?
我的电脑平时用的挺好了,开了个软件就卡了,怎么回事,是不是我的电脑限制了这个软件运行,求大佬解答
2021-11-02 21:45:19 +08:00
回复了 777777 创建的主题 程序员 小组长因为预算问题不想购买第三方 API,让我写爬虫。
有期徒刑 2 年,2023 年见朋友
2021-11-02 12:19:55 +08:00
回复了 devinww 创建的主题 Elasticsearch 服务器 ip 地址改变是否只需要修改配置文件 ip
@liuxu broadcast
2021-11-02 12:18:23 +08:00
回复了 devinww 创建的主题 Elasticsearch 服务器 ip 地址改变是否只需要修改配置文件 ip
ip ,netmask ,boastcast ,gateway 都确认一遍
2021-11-02 10:45:34 +08:00
回复了 godev2021 创建的主题 Go 编程语言 Goland 开源许可证一年到期还能续吗?
用 vscode 写其实问题不大
2021-11-02 10:39:20 +08:00
回复了 kikione 创建的主题 程序员 多线程事务可行吗?
基于 CSP 模型做事务
2021-11-01 10:19:01 +08:00
回复了 imp258 创建的主题 Linux 银河 kylin 如何安装 suricata。
编译应该用 configure 文件,没用就用 automake 生成,我建议你看看官方文档

https://suricata.readthedocs.io/en/latest/install.html

或者建议你系统用 ubuntu ,直接 apt 安装
2021-10-31 20:21:28 +08:00
回复了 guoqiao 创建的主题 Linux 2021 年 10 月,在 Ubuntu Linux 上如何使用微信 ?
我用 ubuntu 的系统上不用腾讯系软件,wine 依赖太多了
rtmp 局域网推流就可以了
2021-10-29 17:16:07 +08:00
回复了 z0ro 创建的主题 硬件 有鉴别矿卡的路子吗?
买有 sn 码的,近两个月生产的卡
1 ... 25  26  27  28  29  30  31  32  33  34 ... 146  
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   968 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 54ms · UTC 22:44 · PVG 06:44 · LAX 14:44 · JFK 17:44
♥ Do have faith in what you're doing.