linux shell之sed

sed编辑器逐行处理输入，然后把结果发送到屏幕。

  

-i选项：直接作用源文件，源文件将被修改。

 

sed命令和选项：

 

a\	在当前行后添加一行或多行
c\	用新文本替换当前行中的文本
d	删除行
i\	在当前行之前插入文本
h	把模式空间的内容复制到暂存缓冲区
H	把模式空间的内容添加到缓冲区
g	取出暂存缓冲区的内容，将其复制到模式缓冲区
G	取出暂存缓冲区的内容，将其追加到模式缓冲区
l	列出非打印字符
p	打印行
n	读入下一行输入，并从下一条而不是第一条命令对其处理
q	结束或退出sed
r	从文件中读取输入行
!	对所选行以外的行应用所有命令
s	用一个字符串替换另外一个字符串

 

 

 

替换标志：

 

g	在行内进行全局替换
p	打印行
w	将行写入文件
x	交换暂存缓冲区和模式空间的内容
y	将字符转换成另外一个字符

 

 

sed例子：

 

打印：p命令

 

sed ‘/abc/p’ file	打印file中包含abc的行。默认情况sed把所有行都打印到屏幕，如果某行匹配到模式，则把该行另外再打印一遍
sed  -n ‘/abc/p’ file	和上面一样，只是去掉了sed的默认行为，只会打印匹配的行

 

 

删除：d命令

 

sed ‘3,$d’ file	删除从第3行到最后一行的内容。
sed ‘$d’ file	删除最后一行的内容
sed ‘/abc/d’	删除包含abc的行。
sed ‘3d’ file	删除第三行的内容

 

 

替换：s命令

 

sed  ‘s/abc/def/g’ file	把行内的所有abc替换成def，如果没有g,则只替换行内的第一个abc
sed  -n ‘s/abc/def/p’ file	只打印发生替换的那些行
sed  ‘s/abc/&def/’ file	在所有的abc后面添加def（&表示匹配的内容）
sed  -n ‘s/abc/def/gp’ file	把所有的abc替换成def，并打印发生替换的那些行
sed  ‘s#abc#def#g’ file	把所有的abc替换成def，跟在替换s后面的字符就是查找串和 替换串之间的分割字符，本例中试#

 

 

指定行的范围：逗号

 

sed  -n ‘/abc/,/def/p’ file	打印模式abc到def的行
sed  -n ‘5/,/def/p’ file	打印从第五行到包含def行之间的行。
sed /abd/,/def/s/aaa/bbb/g	修改从模式abc到模式def之间的行，把aaa替换成def

 

 

多重编辑-e

 

sed  -e ‘1,3d’ -e ‘s/abc/def/g’ file

删除1-3行，然后把其余行的abc替换成def

 

 

读文件：r命令

 

sed  ‘/abc/r newfile’ file

在包含abc的行后读入newfile的内容

 

 

写文件：w命令  

 

sed  ‘/abc/w newfile’ file

在包含abc的行写入newfile

 

 

追加：a命令     

 

sed  ‘/abc/a\def’ file

在包含abc的行后新起一行，写入def

 

 

插入：i命令     

 

sed  ‘/abc/i\def’ file

在包含abc的行前新起一行，写入def

 

 

修改：c命令   

 

sed  ‘/abc/c\def’ file

在包含abc的行替换成def，旧文本被覆盖

 

 

读取下一行：n命令  

 

sed  ‘/abc/{n ; s/aaa/bbb/g;}’ file

读取包含abc的行的下一行，替换aaa为bbb

 

 

转换：y命令       

 

sed  ‘y/abc/ABC’ file

将a替换成A，b替换成B，c替换成C（正则表达式元字符不起作用）

 

 

退出：q命令   

 

sed  ‘/abc/{ s/aaa/bbb/ ;q; }’ file

在某行包含了abc，把aaa替换成bbb，然后退出sed。

 

 

暂存和取用：h命令（把模式行存储到暂存缓冲区）和g（取出暂存缓冲区的行并覆盖模式缓冲区）G（取出临时缓冲区的行）命令 

 

h和g是复制行为(覆盖），H和G表示追加。    

sed  -e ‘/abc/h’  -e ‘$G’ file	包含abc的行通过h命令保存到暂存缓冲区，在第二条命令汇中，sed读到最后一行$时，G命令从暂存缓冲区中读取一行，追加到模式缓冲区的后面。即所有包含abc的行的最后一行被复制到文件末尾。
sed -e ‘/abc/{h; d;}’       -e  ‘/def/{g; }’ file	包含abc的行会移到包含def的行上，并进行覆盖。

 

 

暂存和互换：h和x命令    

 

sed  -e ‘/abc/h’  -e ‘/def/x’ file

包含abc的行会被换成def的行。

 

Linux Shell之cut命令

（转）一、定义    

  正如其名，cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut是以每一行为一个处理对象的，这种机制和sed是一样的。

 

2、剪切依据

cut命令主要是接受三个定位方法：

第一，字节（bytes），用选项-b

第二，字符（characters），用选项-c

第三，域（fields），用选项-f

 

例：

一，按字节cut：

注意：一个空格算一个字节，一个汉字算三个字节

[root@localhost ~]# date

2011年08月11日 星期四20:44:52 EDT

[root@localhost ~]# date |cut -b1-4               取前四个字节

2011

[root@localhost ~]# date |cut -b 1-6

2011

[root@localhost ~]# date |cut -b1-7          一个汉字算三个字节

2011年

[root@localhost ~]# date |cut -b 1-10

2011年08

多个定位之间用逗号隔开：

[root@localhost ~]# date |cut -b 1-7,10

2011年8

[root@localhost ~]# date |cut -b10,1-7  cut会先把-b后面所有的定位进行从小到大排序，然后再提取

2011年8

负号的使用：

[root@localhost ~]# date |cut -b -4

2011

[root@localhost ~]# date |cut -b 4-

1年08月11日 星期四21:05:30 EDT

[root@localhost ~]# date |cut -b -4,4-

2011年08月11日 星期四21:06:53 EDT

-4表示从第一个字节到第四个字节，而4-表示从第四个字节到行尾。这两种情况下，都包括了第4个字节“1”。如果我执行date |cut-b -4,4-，会输出整行，不会出现连续两个重叠的1

 

二，按字符cut：

按字符cut相对比较简单，中文字符和空格都算一个字符。

[root@localhost ~]# date |cut -c 1-5

2011年

[root@localhost ~]# date |cut -c 5,9,13

年月日

 

三、按域cut

 以/etc/passwd文件为例：

[root@localhost ~]# head -n5 /etc/passwd |cut -d : -f 1,3-5

root:0:0:root

bin:1:1:bin

daemon:2:2:daemon

adm:3:4:adm

lp:4:7:lp

-d指定域分隔符，-f 指定要剪出哪几个域，这个与awk的输出特定字段功能一样。

 

-d选项的默认间隔符就是制表符，所以当你就是要使用制表符的时候，完全就可以省略-d选项，而直接用－f来取域就可以了

如何分的清空格和制表符？

[root@localhost ~]# cattest           这个文件各单词间存在单个空格、制表符和多个空格

data11【单个空格 】data12【制表符】data13       

data21【多个空格】data22【单个空格】data23             

data31 【单个空格 】data32 【  多个空格data33      

[root@localhost ~]#sed -n ltest          用sed命令可以让制表符原形毕露~  ????

data11 data12\tdata13$

data21 data22 data23$

data31 data32   data33$

[root@localhost ~]# cat test |cut  -f 2

data13

data21   data22 data23

data31 data32   data33

[root@localhost ~]# cat test |cut -d"   " -f2          cut的间隔符只允许是一个字符

cut: the delimiter must be a single character

请尝试执行“cut --help”来获取更多信息。

[root@localhost ~]# cat test |cut -d " " -f2           

data12data13       中间那个空白字符是制表符

                                第一个空格后面还是空格，所以输出空格

data32                  单个空格后面就是data32