本文目录
- awk删除指定字符
- Linux shell awk怎么去除行内，重复列
- 如何用awk修改文件中某一列字段值
- 如何用SED、AWK、GREP 批处理命令 删除 文本文件 指定的几个行
- 如何使用awk去除日志第一列
- shell中 sed或awk 通过分隔符删除相应字段
awk删除指定字符
# awk
echo “name | mike | 12 | yes“ | awk ’{gsub(/\|/, ““); print}’
# sed
echo “name | mike | 12 | yes“ | sed ’s/\|//g’
Linux shell awk怎么去除行内，重复列
awk -F“[-，]“ ’{for(i=1;i《=NF;i++)a[$i,NR]++}{for(j in a){split(j,b,SUBSEP);if(b==NR)printf b“ “} printf “\n“}’ 关键词.txt 》去除重复后.txt
以此例测试通过。
关于awk二维数组的使用：
awk的多维数组在本质上是一维数组，更确切一点，awk在存储上并不支持多维数组。awk提供了逻辑上模拟二维数组的访问方式。例如，array[2,4] = 1这样的访问是允许的。awk使用一个特殊的字符串SUBSEP (\034)作为分割字段，在上面的例子中，关联数组array存储的键值实际上是2\0344。
类似一维数组的成员测试，多维数组可以使用 if ( (i,j) in array)这样的语法，但是下标必须放置在圆括号中。
类似一维数组的循环访问，多维数组使用 for ( item in array )这样的语法遍历数组。与一维数组不同的是，多维数组必须使用split()函数来访问单独的下标分量。split ( item, subscr, SUBSEP)。
如何用awk修改文件中某一列字段值
awk ’{print 7890 $2 $3 $4 $5}’ 本来$1 是第一列，如果你把他换成 7890那么就相当于是修改了，不过需要你把这些标准输出在保存一下，可以在awk脚本里面写一些方法代替7890这些字符
如何用SED、AWK、GREP 批处理命令 删除 文本文件 指定的几个行
sed -e ’2d’ -e ’10d’ myfile.txt 》 mynewfile.txt
删除第二第十行，输出保存在mynewfile.txt
’Xd’ X就是指定的行号，d是删除操作
如何使用awk去除日志第一列
如果日志以逗号分隔。
awk ’BEGIN{FS=“,“}{print sub($1,““,$0)}’ file
另外，sed就是专门干这个的。
shell中 sed或awk 通过分隔符删除相应字段
awk -F“|“ ’{print $1“|“$2“|“$4“|“}’ yourfile
这样就会在终端输出结果，如果要保存，只需把输出重定向到一个文件就行了
awk -F“|“ ’{print $1“|“$2“|“$4“|“}’ yourfile 》newfile
或者使用sed
sed ’s/|[^|]*\(|[^|]*|$\)/\1/’ yourfile
如果想直接修改原文件：
sed -i ’s/|[^|]*\(|[^|]*|$\)/\1/’ yourfile
