1
em70 2014-09-23 20:15:51 +08:00 via Android
awk分析网站日志太爽了,有sql的效率
|
3
frankzeng 2014-09-23 20:34:19 +08:00
批量处理数据,好像也就这用得着了。
|
4
treo 2014-09-23 20:45:19 +08:00
学习曲线有点陡,几个月不用就忘了。近几年我已经成功入门awk sed好几次了
|
6
ericls 2014-09-23 21:56:22 +08:00 via Android
基本上所有除了浏览器以外的东西
|
7
rrfeng 2014-09-23 21:57:05 +08:00
用 shell 做什么?
服务器上不用 shell 能做什么? |
8
dafang 2014-09-24 08:12:55 +08:00 1
不知道你要问啥,如果是问awk和sed的话,那太多了。
前面提到的处理访问日志,sed 配合 awk 可以很方便;我们用sed和awk对访问日志做预处理然后同步到分析库; 生产环境用awk统计netstat里的tcp状态,看close_wait、time_wait等得数量,统计哪些IP连接的time_wait/close_wait数据量很大;我们就用它来分析出阿里云的反向代理造成了很多的无效连接; 分析MySQL的状态,例如tmp table的几个数据,cache的几个数据;最大值平均值等; 实时分析网络速率;例如我内网进行数据同步的生活,用awk统计传输这段时间内网IP的速率; 实时文件I/O的分析,做文件处理的时候,例如你在用awk和sed处理日志的时候,你同时可以用iostat + awk 分析出read/write的性能。 。。。 |