简单比较Linux命令中字符串查找的效率
发布时间：2014-09-05 16:42:14作者：知识屋
有时候，我们要简单统计下一个文件中包含某个特殊字符串的行数。
我第一个想到的是grep + wc，不知道你想到了什么，不过，我们确实有多种方法。
假如我们的文件叫msg，里面有23380092行数据。
某些行是这样的receive: msg1
我们的任务是找出这些行的数量。
1. grep方法
grep ' msg1' msg | wc -l
使用这种方法耗时：1s
2. awk方法
awk 'BEGIN{c=1}{if($0 ~ / msg1/) c=c+1}END{print c}' msg
使用这种方法耗时：8s
3. 另一种awk方法
awk 'BEGIN{FS=":";c=0;}{if($2 == " msg1") c=c+1}END{print c}' msg
使用这种方法耗时：14s
4. 文件描述符打开文件遍历
Shell代码
#!/bin/bash
count=0;
exec 4<msg
while read line<&4
do
if [ "$line" == "receive: msg1" ]; then
count=$((count+1))
fi
done
exec 4<&-
echo $count;
#!/bin/bash
count=0;
exec 4<msg
while read line<&4
do
if [ "$line" == "receive: msg1" ]; then
count=$((count+1))
fi
done
exec 4<&-
echo $count; 我日，这种方法我跑了N久都没有出结果，效率差到无法忍受。
当然脚本本身的正确性，是通过小文件测试过得。
以上几种方法，grep的效率简直神了。这么多数据筛选出来，再有wc统计之后，一共只需要1秒。
而采取自己遍历文件的方法，无论是awk还是自己写脚本打开文件，效率都极差。
看来，我们还是懒一点的好。呵呵。
摘自liuzhiqiangruc
相关知识
-
linux一键安装web环境全攻略 在linux系统中怎么一键安装web环境方法
-
Linux网络基本网络配置方法介绍 如何配置Linux系统的网络方法
-
Linux下DNS服务器搭建详解 Linux下搭建DNS服务器和配置文件
-
对Linux进行详细的性能监控的方法 Linux 系统性能监控命令详解
-
linux系统root密码忘了怎么办 linux忘记root密码后找回密码的方法
-
Linux基本命令有哪些 Linux系统常用操作命令有哪些
-
Linux必学的网络操作命令 linux网络操作相关命令汇总
-
linux系统从入侵到提权的详细过程 linux入侵提权服务器方法技巧
-
linux系统怎么用命令切换用户登录 Linux切换用户的命令是什么
-
在linux中添加普通新用户登录 如何在Linux中添加一个新的用户
软件推荐
更多 >
-
1
专为国人订制！Linux Deepin新版发布2012-07-10
-
2
CentOS 6.3安装(详细图解教程)
-
3
Linux怎么查看网卡驱动?Linux下查看网卡的驱动程序
-
4
centos修改主机名命令
-
5
Ubuntu或UbuntuKyKin14.04Unity桌面风格与Gnome桌面风格的切换
-
6
FEDORA 17中设置TIGERVNC远程访问
-
7
StartOS 5.0相关介绍，新型的Linux系统！
-
8
解决vSphere Client登录linux版vCenter失败
-
9
LINUX最新提权 Exploits Linux Kernel <= 2.6.37
-
10
nginx在网站中的7层转发功能
