.. _sed:

sed的使用方法
========================

格式::

    sed [-nefr] [n1, n2] action

    [n1, n2]选项:
      不一定需要, 选择要处理的行。如10，20表示在10~20行之间处理

    action选项支持如下参数:
    * a: 表示添加，后接字符串，添加到当前行的下一行
    * c: 表示替换，后接字符串，用它替换n1到n2之间的行
    * d: 表示删除符合模式的行，它的语法为 ``sed '/regexp/d'``, 斜杠之间是正则表达式，模式在d前面，d后面一般不接受任何内容
    * i: 表示插入，后接字符串，添加到当前行的上一行
    * p: 表示打印，打印某一选择的数据，通常与 ``-n`` 选项一同使用
    * s: 表示搜索，还可以替换，类似于Vim里的搜索替换功能。如:
        ``1,20s/old/new/g`` 表示替换1~20行的old为new，g在这儿表示处理这一行所有匹配的内容

参数介绍::

    -n, --quiet, --silent
     安静模式，只有经过Sed处理过的行才显示出来，其他不显示

    -e script, --expression=script
     表示直接在命令行上进行Sed操作，默认选项，不用写

    -f script-file, --file=script-file
     将Sed操作写在一个文件里,用的时候-f filename就可以按照内容进行Sed操作了

    -i[SUFFIX], --in-place[=SUFFIX]
     直接在文件中编辑(和 ``-f`` 参数不同点在于, 它直接在文件中替换) (makes backup if extension supplied)

    -r, --regexp-extended
     表示Sed支持扩展正则表达式





实例::

    //删除
    "."表示任意字元; 
    "*" 表示其前字元可重任意次 
    //它们结合 ".*" 表示两 "t" 字母间的任意字串)

    10d   //删除档内第 10 行资料
    /man/d    //删除含有 "man" 字串的资料行
    10,200d   //删除档内第 10 行到第 200 行资料
    10,/man/d    //删除档内第 10 行到含 "man" 字串的资料
    /t.*t/d    //删除所有含两 "t" 字母的资料行
    /apple/,/orange/d

文件操作::

    // 将文件中含 "machine" 字串的资料行中的 "phi" 字串
    // 替换成为 "beta" 字串。其命令列如下
    sed -e '/machine/s/phi/beta/g' input.dat

    //将文件中第 5 行资料 , 替换成句子 "Those must often wipe a bloody nose":
    sed -e '5c Those must often wipe a bloody nose' input.dat

    将文件中 1 至 100 行的资料区 , 替换成如下两行资料aaaa\nbbbb:
    sed -e '1,100c aaaa\nbbbb' input.dat

    将文件中含 "phi" 字串的资料行 , 搬至 mach.inf 档中储存:
    sed -e '/phi/w mach.inf' <文档>

    将 ``mach.inf`` 文件内容 , 搬至<文档>中含 "beta" 字串的资料行:
    sed -e '/beta/r mach.inf' <文档>



删除文件中的资料::

    将文件内所有空白行全部删除:
    sed -e '/^$/d' <文档>

    将文件内连续的空白行, 删除它们成为一行:
     sed -e '/^$/{ 
        N 
        /^$/D  
     }' <文档>
     # 函数参数 N表示: 将空白行的下一行资料添加至pattern space内
     # 函数参数 /^$/D 表示: 当添加的是空白行时, 删除第一行空白行, 而且剩下的空白行则再重新执行指令一次
     # 指令重新执行一次, 删除一行空白行, 如此反覆直至空白行後添加的为非空白行为止, 故连续的空白行最後只剩一空白行被输出

搜寻文件中的资料::

    将文件中含有 "gamma" 字串的资料行输出:
    sed -n -e '/gamma/p' <文档>




使用 ``-f`` 选项操作::

    将文件中的前 100 资料, 搬到文件中第 300 後输出。其命令列如下:
    sed -f mov.scr <文档>
    # mov.scr的内容为
    1,100 {
       H 
       d 
    }
    300G
    # 它表示将文件中的前100资料 , 先储存在 hold space,後删除
    # 将 hold space 内的资料 , 添加在文件中的第300



显示passwd内容，将2~5行删除后显示::

    cat -n /etc/passwd | sed '2,5d'

在第2行后面加上Hello China字符串::

    cat -n /etc/passwd | sed '2a Hello China'

将2~5行的内容替换为“Hello China”::

    cat -n /etc/passwd | sed '2,5c Hello China'

只显示5~7行，注意 ``p,-n`` 的配合使用::

    cat -n /etc/passwd | sed -n '5,7p'

得到eth0的ip(``^.* addr://g'`` 指把从开头到addr:的替换为空, ``s/Bcast.*$//g`` 指把以Bcast开头的到最后的替换为空)::

    ifconfig eth0 | grep 'inet ' | sed 's/^.* addr://g' | sed 's/Bcast.*$//g'

删除 yel.dat 内 1 至 10 行资料 , 并将其余文字中的 "yellow" 字串改成 "black" 字串::

    sed -e '1,10d' -e 's/yellow/black/g' yel.dat

打印出 white.dat 档内含有 "white"字串的资料行::

    sed -n -e '/white/p' white.dat

把文件 ``<fileName>`` 中手机号前面有区号的区号去掉(注意直接使用 ``\2`` 就是取第二个)::

    sed -e 's/\(0[0-9]\{2,3\}\)\([0-9]\{11\}\)/0\2/g' ./<fileName>

linux专用实例
-------------------

::

  1.把,改为换行符
  echo "a,b,c,d" |sed 's/,/\n/g'
  2.把,改为换行符,再换回来
  # 这种是错误的
  echo "a,b,c,d" |sed 's/,/\n/g'|sed 's/\n/,/g'
  # 用tr可实现
  echo "a,b,c,d" |sed 's/,/\n/g'|tr -t '\n' ','
  # 非用sed方法为
  echo "a,b,c,d" |sed 's/,/\n/g'|sed ':label;   N;   s/\n/,/;   b label'

  说明:
  :label;  这是一个标签，用来实现跳转处理，名字可以随便取(label),后面的b label就是跳转指令
  N;  N是sed的一个处理命令，追加文本流中的下一行到模式空间进行合并处理，因此是换行符可见
  s/\n/,/;   s是sed的替换命令，将换行符替换为,号
  b label  或者 t label    b / t 是sed的跳转命令，跳转到指定的标签处


实践
----

实践1-基本::

    1. 把文件 ``<fileName>`` 中的 ``($session[0]['id']`` 修改为 ``($session[0]['user_id']``
    $ sed -i "s/(\$session\[0]\['id']/(\$session\[0]\['user_id']/g" ./<fileName>

    2. 把文件/etc/fstab中含有' swap '的行前面加#符合注释
    $ sed -i '/ swap / s/^/#/' /etc/fstab



把当前项目中的 ``github.com/docker`` 替换为 ``docker.io`` ::

    files=( $(find . -name '*.go' -not -path './vendor/*') )   // 详情参见find命令

    for rule in \
        's|"github.com/docker/docker/api|"docker.io/go-docker/api|' \
        's|^([[:space:]]+)"github.com/docker/docker/client|\1client "docker.io/go-docker|' \
        's|"github.com/docker/docker/client|"docker.io/go-docker|' \
    ; do
        sed -i -E "$rule" ${files[*]}
    done

把指定文件夹./files下的 ``./files`` 替换为 ``/files/k8s/yamls`` ::

    $ sed -i -e "s/\.\/files/\/files\/k8s\/yamls/g" `grep -rl "./files" .`

实例: 把指定文件下的 ``PACKAGE_NAME`` 换成指定值::

    $ cat << EOF > replace.sh
    SRC_FILE=${1}
    DES_FILE=${2}
    PACKAGE=${3}
    sed 's/PACKAGE_NAME/'"${PACKAGE}"'/g' ${SRC_FILE} > ${DES_FILE}

    使用:
    $ zsh replace ./src.txt ./des.txt <replace text>



常见问题
--------

Mac sed与GNU sed之间的区别
''''''''''''''''''''''''''

https://qastack.cn/unix/13711/differences-between-sed-on-mac-osx-and-other-standard-sed


\d, +等都不能用
'''''''''''''''

可行的命令::

    $ sed -n  '/^.*[0-9][0-9]*\.[0-9][0-9]*\.[0-9][0-9]*\.[0-9][0-9]*.*$/p' file.txt

不可行的命令::

    $ sed -n '/^.*\d+\.\d+\.\d+\.\d+.*$/p' file.txt