linux三剑客命令教学 linux3剑客
005 Linux 命令三剑客之-sed
三剑客各有所长，和锅锅一一搞起就是了！
作为一家“创意+整合+营销”的成都网站建设机构，我们在业内良好的客户口碑。创新互联提供从前期的网站品牌分析策划、网站设计、成都网站制作、网站设计、外贸网站建设、创意表现、网页制作、系统开发以及后续网站营销运营等一系列服务，帮助企业打造创新的互联网品牌经营模式与有效的网络营销方法,创造更大的价值。
使用示例:
使用示例:
使用示例:
sed [选项] s/[pattern]/[replace]/[flags]
[选项]常用的几个参数：
[pattern]
含义:待匹配的需要替换的内容。
[replace]
常见的特殊含义字符：
[flags]
常见的可选参数：
多个sed命令依次执行，用分号分割或加选项 -e,
使用示例:
把 test.html 文件中的第二个 body 替换为 /body 。
分析实际就是把第二个 body 替换为 /body，命令如下。
把 test.html 文件中的第二个 body 替换为 /body 。
分析实际就是把第二个 body 替换为 /body，命令如下。
编写执行脚本的步骤如下：
touch sed.sh
sed.sh 中写入脚本内容：
对sed.sh 脚本赋予可执行权限
chmod ug+x sed.sh
执行sed.sh 脚本，对文件进行处理
sed -i -f sed.sh test.html
linux三剑客的基本使用——grep、sed、awk
grep、sed、awk是linux功能非常强大的三个命令，grep是查找过滤文本，sed是对文本进行编辑替换，awk是对文本进行分析报告。
最简单的理解就是找什么东西用grep，想修改什么内容用sed，想格式化内容用awk。
创建一个文件名为grep_text.txt的文件，并放入内容：
SillyMadman is both a madman and a fool.
Everyone agrees with this sentence.
我要查找在grep_text.txt文件里有Silly的行
命令是： grep Silly grep_text.txt
会返回内容：SillyMadman is both a madman and a fool.
也可以带以下参数，这些我认为可能容易用到的参数，其它的参数需要另行查找
文档，比如可以使用正则进行匹配。
内容相关的
-B， --before context=NUM显示所在行之前的行数
-A， --after context=NUM显示所在行之后的行数
-C， --context=NUM打印输出上下文的行数
过滤内容相关的参数：
-i， --忽略大小写区分
-w，--匹配查找的整个单词
-x，--匹配查找的整行文本
-v, --过滤掉匹配的内容
输出内容相关的参数
-n， --行号打印带有输出行的行号
比如，我要查找在grep_text.txt文件里不区分大小写查找sillymadman，并显示行号和匹配文本的下一行，那么我可以用以下命令查找
grep sillymadman grep_text.txt -i -n -A1
内容返回为
1:SillyMadman is both a madman and a fool.
2-Everyone agrees with this sentence.
总体而言grep的使用方式就是
grep [参数...](查找的内容) (文件名)
grep也经常搭配管道符号"|"使用,比如我要查询某程序的进程，并去掉查找进程本身，那么命令为
ps -ef | grep program_name | grep -v grep
再创建一个文件名为sed_text.txt的文件，并放入内容：
SillyMadman is both a madman and a fool.
Everyone agrees with this sentence.
我想要在第一行下面添加一句：woshishazi
命令是：sed '1a\woshishazi' sed_text.txt
返回内容为：
SillyMadman is both a madman and a fool.
woshishazi
Everyone agrees with this sentence.
但是以上这个命令不会修改原文件，如果需要，需要加上-i
sed -i '1a\woshishazi' sed_text.txt
上面a是代表append，从指定行后面新的一行添加数据，还有其他操作
操作有以下这些
a ：从下面一行新增
i ：从上面一行插入,
d ：删除
c ：整行替换
p ：打印
s ：对指定内容进行替换
下面稍微举下例：
a: sed '1a\woshishazi' sed_text.txt 从第一行后面添加
i: sed '1i\woshishazi' sed_text.txt 从第一行前面插入
d: sed '1d' sed_text.txt 删除第一行
c: sed '1c\woshishazi' sed_text.txt 替换第一行内容为woshishazi
p: sed -n '1p' sed_text.txt 打印第一行，一般搭配-n使用，其他内容就不会再展示
s:这个相对复杂一点需要详细说明一下
sed的参数为 '[行]s/要被替换的内容/新的内容/g'
行是一个可选项，可以选择具体的行进行替换
g代表替换所有匹配到的内容，也可以改为数字，表示第几次匹配到时进行替换
sed 's\SillyMadman\shafengzi\g' sed_text.txt ,将所有SillyMadman替换为shafengzi
输出结果为：
shafengzi is both a madman and a fool.
Everyone agrees with this sentence.
最后再创建一个文件名为awk_text.txt的文件，并放入内容：
1 a
2 b
3 c
4 d
5 f
以空白符作为分隔符这个文本相当于每一行有两个字段。
那么打印第一个字段时 awk '{print 0的话，则代表打印所有字段
awk默认以空白符作为分隔符，也可以指定分割符通过-F
awk -F: '{print $1}' awk_text.txt,以“:”作为作为分隔符
那么返回内容就为
1 a
2 b
3 c
4 d
5 f
相当于只有一列或者说一个字段
然后还可以对前面加上一个正则对行进行匹配内容
awk '/a/{print 2 ~ /a/){print $1}' awk_text.txt
返回内容为
1
Linux三剑客awk命令篇二：命令操作符
Linux三剑客awk命令篇二：命令操作符
关于awk的原理等基本知识请参考上篇：
Linux三剑客awk命令篇一：原理及基本命令
补充
1、语法格式：
(1) Awk完整语法
awk 'BEGIN{commands} pattern{commands}END{commands} ' file
BEGIN{commands}：处理数据前执行的命令。
END{commands}：处理完数据后执行的命令。
这两个命令可以省略。见(2)
(2) Awk基本语法
awk -F '分割符' '/模式/{动作} ' file
这里的 '/模式/{动作} ' 类似于sed的命令格式。
模式：
(1) 正则表达式(注意格式： /正则表达式/ )
(2) 条件表达式(例如： 等等)
总结：
这里的模式通俗来讲是 用来找谁， 而动作表示是 干啥。
2、 awk的命令操作符
(1) 正则表达式与bash一致
(2) + - * / % ++ --
(3) || ！
(4) = = != == ~ !~
~：表示匹配后面的模式，用于字段，见 案例1 。
其余的都比较常见就不举例了。
3、案例
案例1：
~使用案例
awk -F : '$3 ~ /\...\/{print $1,$3}' /etc/passwd
解释：
模式：\...\
\ \表示定界符，只匹配3个字符。
$3 ~：表示$3这个字段必须符合后面模式(\...\)的要求。
见如下输出结果，$3都是3个字符。
案例2：
% || ==使用案例
seq 100 | awk '$1 % 7 == 0 || $1 ~ /^99/{print $1}'
输出结果的要求：
整除7或者以99开头
案例3：
++使用
awk 'BEGIN{num=0}{num++}END{print num}' /etc/passwd
简单解释：
BEGIN{num=0}：定义一个变量num
{num++}：这里没有模式，只有动作。
即每匹配到文件/etc/passwd的一行就执行num++
END{print num}：文件遍历结束，打印num的值，即文件的行数。
这里我们使用wc -l验证也是没问题的。
cat /etc/passwd | wc -l
上面3个案例简单的使用了awk的命令操作符。
虽然只是用到了几个简单的，但是其他同理，大家可以执行操作。
下一篇：
Linux三剑客awk命令篇二之内部变量
欢迎大家给予宝贵的意见或者建议。
欢迎大家补充或者共享一些其他的方法。
感谢支持。
文章名称：linux三剑客命令教学 linux3剑客
URL分享：http://scyanting.com/article/ddideds.html
