诛仙1十万大山:awk的效率 ? 三斗室

来源：百度文库 编辑：九乡新闻网 时间：2024/04/29 13:57:38

偶然和某人谈到日志处理。最简单常见的需求，日志中访问量最大的前十个IP及其访问次数。

最常见的shell命令：cat access.log | cut -d ‘ ‘ -f 4 |sort|uniq -c|sort -nr|head

我最常用的awk命令：awk ‘{a[$4]++}END{for(i in a){print a[i],i}}’ access.log | sort -nr | head

对方表示上一种速度最快，而我说是下一种。

最后找到一个13G大小的access.log，用time命令分别检测命令用时。结果处理一个13GB的日志，shell花了13分钟，awk花了1分半钟……

awk的效率 ? 三斗室 吴稚晖的《斗室铭》 awk工具的使用 不得不知的斗室风水学 --厨房 awk的学习和使用（一） awk：好用的资料处理工具 高三的我学习效率很低怎么办 郝志强体会德鲁克之三：管理者的效率和效果 提高学习效率三法 听课也要有效率(三) 唯有斗室彩泼墨 斗室寒窗，皓首穷经 如何提高高三英语选择题(纠错集)的讲评课的效率 详解著名的awk oneliner，第一部分：空行、行号和计算 期末教学工作总结之三：思想政治课课堂教学效率不高的表现 献给即将升入高三的孩子们（九）相信自己 赢在效率 浑元桩的“效率” 管理的效率 注重效率的周总理 浑元桩的“运动效率” 效率的陷阱 提高会议的效率 浑元桩的“运动效率” Linux awk命令详解