sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。


—sed的选项、命令、替换标记


命令格式


sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)

选项

-e<script>或--expression=<script>:以选项中的指定的script来处理输入的文本文件;
-f<script文件>或--file=<script文件>:以选项中指定的script文件来处理输入的文本文件;
-h或--help:显示帮助;
-n或--quiet或——silent:仅显示script处理后的结果;
-V或--version:显示版本信息。


sed命令


a\ 在当前行下面插入文本。
i\ 在当前行上面插入文本。
c\ 把选定的行改为新的文本。
d  删除,删除选择的行。
D  删除模板块的第一行。
s  替换指定字符
h  拷贝模板块的内容到内存中的缓冲区。
H  追加模板块的内容到内存中的缓冲区。
g  获得内存缓冲区的内容,并替代当前模板块中的文本。
G  获得内存缓冲区的内容,并追加到当前模板块文本的后面。
l  列表不能打印字符的清单。
n  读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。
N  追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码。
p  打印模板块的行。P(大写) 打印模板块的第一行。
q  退出Sed。
b  lable 分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾。
r  file 从file中读行。
t  label if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
T  label 错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
w  file 写并追加模板块到file末尾。  
W  file 写并追加模板块的第一行到file末尾。  
!  表示后面的命令对所有没有被选定的行发生作用。  
=  打印当前行号码。  
#  把注释扩展到下一个换行符以前。


sed替换标记


g  表示行内全面替换。  
p 表示打印行。  
w 表示把行写入一个文件。  
x 表示互换模板块中的文本和缓冲区中的文本。  
y 表示把一个字符翻译为另外的字符(但是不用于正则表达式
\1 子串匹配标记
& 已匹配字符串标记


sed元字符集


^ 匹配行开始,如:/^sed/匹配所有以sed开头的行。
$ 匹配行结束,如:/sed$/匹配所有以sed结尾的行。
. 匹配一个非换行符的任意字符,如:/s.d/匹配s后接一个任意字符,最后是d。
* 匹配0个或多个字符,如:/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
[] 匹配一个指定范围内的字符,如/[ss]ed/匹配sed和Sed。  
[^] 匹配一个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头,紧跟ed的行。
\(..\) 匹配子串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers。
& 保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**。
\< 匹配单词的开始,如:/\<love/匹配包含以love开头的单词的行。\> 匹配单词的结束,如/love\>/匹配包含以love结尾的单词的行。
x\{m\} 重复字符x,m次,如:/0\{5\}/匹配包含5个0的行。
x\{m,\} 重复字符x,至少m次,如:/0\{5,\}/匹配至少有5个0的行。
x\{m,n\} 重复字符x,至少m次,不多于n次,如:/0\{5,10\}/匹配5~10个0的行。


—sed用法实例


替换操作:s命令


# 替换文本中的字符串
$ sed 's/book/books/' files

# -n选项和p命令一起使用表示只打印那些发生替换的行
$ sed -n 's/book/books/'p files

# 直接编辑文件选项-i,会匹配file文件中每一行的第一个book替换为books
$ sed -i 's/book/books/' files


全面替换标记g


# 使用后缀 /g 标记会替换每一行中的所有匹配
$ sed 's/book/books/g' files

# 当需要从每一行的第N处匹配开始替换时,可以使用 /Ng
$ sed -n 's/book/books/2g'p files


定界符


# 之前命令中字符 / 在sed中作为定界符使用,也可以使用任意的定界符
$ sed 's#book#books#' files 
$ sed 's|book|books|' files
$ sed 's:book:books:' files 

# 定界符出现在样式内部时,需要进行转义
$ sed 's/\/user\/bin/#user#bin/' files


删除操作:d命令


# 删除空白行:
$ sed '/^$/d' files

# 删除文件的第2行:
$ sed '2d' files

# 删除文件的第2行到末尾所有行:
$ sed '2,$d' files

# 删除文件最后一行:
$ sed '$d' files

# 删除文件中所有开头是test的行:
$ sed '/^test/'d files


已匹配字符串标记&


# 正则表达式 \w\+ 匹配每一个单词,使用 --&-- 替换它,& 对应于之前所匹配到的单词
# 分别运行看看效果有什么不一样
$ sed 's|AB|--&--|g' files
$ sed 's|\w|--&--|g' files
$ sed 's|\+|--&--|g' files
$ sed 's|\w\+|--&--|g' files

# 所有以book开头的行都会被替换成[自己+&符后面的字符串(包括空格)]
$ sed 's|^book|& Test|g' files


组合多个表达式


# 3条命令执行结果是对等的
$ sed 's/book/books/' files | sed 's/books/book/'
$ sed 's/book/books/' | sed 's/books/book/' files
$ sed 's/book/books/;s/books/book/' files


引用


# sed表达式可以使用单引号来引用,但是如果表达式内部包含变量字符串,就需要使用双引号
$ TEST="Teh is Test ." 
$ sed "s/Test/$TEST/" files


选定行的范围 ,(逗号)


# 所有在模板books和Test所确定的范围内的行都被打印
$ sed -n '/books/,/Test/p' files

# 打印从第3行开始到第一个包含以Test开始的行之间的所有行
$ sed -n '3,/^Test/p' files

# 对于模板books和Test之间的行,每行的末尾用字符串LOOK BOOKS替换
$ sed '/books/,/Test/s/$/ LOOK BOOKS/' files


多点编辑:e命令


# 多点编辑:删除1~2行,并替换Test字符串为check
$ sed -e '1,2d' -e 's/Test/check/' files


从文件读入:r命令


# file里的内容被读进来,显示在与Test匹配的行后面,如果匹配多行,则file的内容将显示在所有匹配行的下面
$ sed '/Test/r file' files


写入文件:w命令


# 在files中所有包含Test的行都被写入file里
$ sed -n '/Test/w file' files


追加(行下):a\命令


# 将 The is a Test line 追加到 以test 开头的行后面
$ sed '/^Test/a\The is a Test line' files

在files文件第4行之前插入The is a Test line
$ sed '4a\The is a Test line' files


下一个:n命令


# 如果book被匹配,则移动到匹配行的下一行,替换这一行的Test,变为TEST,并打印该行,然后继续
$ sed '/book/{ n; s/Test/TEST/g; }' files


变形:y命令


# 把1~3行内所有book转变为大写. 注意:正则表达式元字符不能使用这个命令
$ sed '1,3y/book/BOOK/' files


退出:q命令


# 打印完第10行后,退出sed
$ sed '4q' files


待补充 ......