sed

# sed
## sed删除第一列后打印
```shell
sed -e 's/[^ ]* //'  file
```

## sed替换关键字后所有字符串
假设需要迁移dns记录，但是导出的记录带有注释，而导入的设备不支持注释，需要将注释全部删除。
数据样本`mail   IN   TXT     v=spf1 include:spf.mail.qq.com ~all;;无;;邮箱记录`可以看出注释有规律都是以两个`;;`开头，那么按照这个规律我们开始处理数据。
```shell
➜  echo 'mail   IN   TXT     v=spf1 include:spf.mail.qq.com ~all;;无;;邮箱记录' | sed 's/\;[^;]*//g'
mail   IN   TXT     v=spf1 include:spf.mail.qq.com ~all
```
当然也可以使用cut来切割文本，不过TXT的DMARC记录中包含`;`，而cut的分隔符只能使用一个字符，bind重的注释使用`;;`开头超出了cut的能力范围，简单的使用一个`;`来切割可能会出现数据错误。

## 打印第10到10行
```shell
sed -n '10,10p' file.txt
```

## 打印第10行
```shell
sed -n '10p' file.txt
```

## 打印两个关键字中间的所有行
- 假设nginx的access日志包含五月二十七日一整天的日志
- 现在需要查看凌晨十二点到凌晨一点的日志,所以第一个匹配项只写到了小时，第二个匹配项写到了分钟
- 参数`-n` ,`p`

```shell
sed -n '/27\/May\/2021:00/,/27\/May\/2021:01:0/p' nginx.access.log
```

## 与awk结合使用

- 结合[awk](https://blog.ihoiwan.com/project-2/doc-89/ "awk")打印某天(示例为：2021年6月4日)nginx access日志状态码非200的日志
```shell
sed '/04\/Jun\/2021/p' /home/wwwlogs/nginx.access.log  |awk '{if ($9!=200) print $0}'
```

## 每个单词的首字母大写
```
echo "abc aBc ABC" | sed 's/\b$[[:alpha:]]$$[[:alpha:]]*$\b/\u\1\L\2/g'
Abc Abc Abc
```

## 替换全部换行符
sed在处理文本时有两个空间：
- 存储空间：用来存储需要被处理的文本
- 模式空间：用来存储正在处理的文本，一般来说只存储一行

因为sed是按行处理文本的，并且会在行位自动添加换行符，所以需要将当前行与下一行合并为一行来处理文本，这时候需要在s前添加一个参数`N;`意义为将下一行添加到模式空间一同处理。

```
sed 'label;N;s/\n//g;t label'
```

`label`是一个标识符，用来标记每一行的开头
`t`或`b`指的是执行完命令后跳转到标识符所在的位置
`t label`可以理解为每一行的开头位置,这样就可以达到删除所有换行符的效果，否则只会没两行处理一次

## 在匹配行前后添加新行
最近部署apisix时需要添加ip白名单，就一行的事儿通过vim有点墨迹，所以通过sed来实现。
```
#        关键字      a换成i就是在匹配行前添加,"\"后是要添加的行内容不以"/"或"\"结尾
sed -i '/allow_list:/a\    - ${your_ip}' /usr/local/apisix/dashboard/conf/conf.yaml
```

## 替换ascii字符
查看`/proc/${pid}/cmdline`文件时，cat的时候不会显示空字符'\0'，出来的是一串字符串，，vim又要进入交互模式再替换。比较简单的还原方式是用sed替换ascii字符，如下：

```shell
[root@localhost 25025]# sed 's#\x00# #g' cmdline
nc -l 9923
```