grep 或 egrep 或awk 过滤两个或多个关键词
grep -E '123|abc' filename // 找出文件（filename）中包含123或者包含abc的行
egrep '123|abc' filename //用egrep同样可以实现
awk '/123|abc/' filename // awk 的实现方式
sed在文件中某一行最后添加一个数字
#cat testaskdjaslkd aslkdjf3eskdjfsdfjsdkfjkfsdkfjksdjfkjsdf12sdfesdfaslkdjfkasdjf asdlfkjaskdfj
#sed 's/\(^a.*\)/\1 12/' test
askdj 12aslkd aslkdjf3e 12skdjfsdfjsdkfjkfsdkfjksdjfkjsdf12sdfesdfaslkdjfkasdjf asdlfkjaskdfj 12
如何使用sed打印1到100行包含某个字符串的行
sed -n '1,100{/abc/p}' 1.txt
打印文件中特定的某行到某行之间的内容
例如：有个文件test的内容如下：
ertfff**[abcfd]123324444[rty]**fgfgf怎么能截取[abcfd]123324444[rty]这一部分出来呢？
答案： sed -n '/\[abcfd\]/,/\[rty\]/p' test
看看你的网站程序有没有被******
grep -i -r --include='*.php' 'base64' 网站根目录/ |grep 'eval'
grep -i -r --include='*.php' system\s*\( 网站根目录/
awk 合并一个文件
我有这样的需求，需要把两个文件中，第一列相同的行合并到同一行中。
举个例子，有两个文件，内容如下
cat 1.txt cat 2.txt 合并后的结果为：1 aa 1 ab 1 ab aa2 bb 2 cd 2 cd bb3 ee 3 ad 3 ad ee4 ss 4 bd 4 bd ss 5 de 5 de
实现的命令为：
awk 'NR==FNR{a[$1]=$2}NR>FNR{print $0,a[$1]}' 1.txt 2.txt
解释：NR表示读取的行数，FNR表示读取的当前行数
所以其实NR==FNR 就表示读取2.txt的时候。 同理NR>FNR表示读取1.txt的时候数组a其实就相当于一个map
awk用print打印单引号
awk '{print "This is a '"'"'"$1} filename
解释一下：在awk中使用脱义字符\是起不到作用的，如果想打印特殊字符，只能使用'""' 这样的组合才可以。这里自左至右为单引号 双引号 双引号 单引号其中两个单引号为一对，两个双引号为一对。想脱义$那就是'"$"' 脱义单引号那就是 '"'"'
awk 中使用外部shell变量
如：
A=44
echo "ABCD" | awk -v GET_A=$A ’{print GET_A}’
说明：-v选项用于定义参数，这里表示将变量A的值赋予GET_A。有多少个
变量需要赋值，就需要多少个-v选项。与之等价的：
应用于脚本中：
#! /bin/bashsort -n filename |awk -F ':' '{print $1}'|uniq >id.txtfor id in `cat id.txt`; do echo "[$id]" awk -v id2=$id -F ':' '$1==id2 {print $2}' filename // ==: awk -F ':' '$1=="'id2'" {print $2}' filename done附件： 运行脚本后结果为：cat filename [1111111]1111111:13443253456 134432534562222222:13211222122 136435435441111111:13643543544 [2222222]3333333:12341243123 132112221222222222:12123123123 12123123123 [3333333] 12341243123 awk 计算1到100的和
awk 'BEGIN { for(i=1; i<=100; i++) sum+=i; print sum}'
把一个文件多行连接成一行
a=`cat file`;echo $a
awk '{printf("%s ",$0)}' file
// %s 后记得要有一空格，否则出来就是完全连在一起的，中间连空格都没有
cat file |xargs
awk 截取指定多个域为一行
for j in `seq 0 20`; do let x=100*$j let y=$x+1 let z=$x+100 for i in `seq $y $z` ; do awk -v a=$i '{printf $a " "}' example.txt >>/tmp/test.txt echo " " >>/tmp/test.txt donedone 用awk编写生成以下结构文件的程序
用awk编写生成以下结构文件的程序。( 最后列使用现在的时间，时间格式为YYYYMMDDHHMISS) 各列的值应如下所示，每增加一行便加1，共500万行
1,1,0000000001,0000000001,0000000001,0000000001,2005100110101
2,2,0000000002,0000000002,0000000002,0000000002,2005100110101
法一：
awk 'BEGIN{for(i=1;i<=10;i++)printf("%d,%d,%010d,%010d,%010d,%010d,%010d,%010d,%d\n",i,i,i,i,i,i,i,i,strftime("%Y%m%d%H%M"))}'
法二：
#! /bin/bashfor i in `seq 1 5000000`; do n=`echo "$i"|awk '{print length($0)}'` export m=$[10-$n] export o=`perl -e '$a='0'; $b=$a x $ENV{"m"}; print $b;'` export j=$i p=`perl -e '$c=$ENV{"o"}.$ENV{"j"}; print $c;'` echo "$i,$i,$p,$p,$p,$p,$p,$p,`date +%Y%m%d%H%M%S`"done awk中gsub函数的使用
awk 'gsub(/www/,"abc")' /etc/passwd // passwd文件中把所有www替换为abc
awk -F ':' 'gsub(/www/,"abc",$1) {print $0}' /etc/passwd // 替换$1中的www为abc