安利好玩具sed

sed是好玩具。

稍有常识的运维工作者都能写得一手好替换,宛然一副ed编辑器的过来人,比如将redis-server的监听端口设为6679:

sed -i -e 's/^port.*/port 6679/' $REDIS_DIR/conf/redis.conf

或者对单行编辑命令用得滚瓜烂熟,比如对工程下的所有py文件第二行添加# coding=utf8

find $PYTHON_PROJECT -name '*.py' -print0 | xargs -0I{} sed -i -e '2i\
# coding=utf8
' {}

不过这些还是too simple,让我们来一点面向多行编辑的sed编程。

1.tail -n k

也就是输出文本文件的倒数k行。

利用sed的hold空间是很容易写出一个解答的:

k=11; sed -En 'H; '$k',${g; s/[[:print:]]*\n//; h;}; $p;' filename

总之就是充分利用hold空间来做文章:先追加到hold空间,再交换出来进行处理,再放回去。

如果抽象能力强一点的读者,可能会直接一眼抽象出这里的sed范式:

[address]{[address]h; [address]H; [address]{};}

或者标签党会倾向于直接写循环:

k=11; sed -En ':next; N; $p; '$k',$D; $!b next' filename

不停读取下一行追加到当前空间,并且在11行以后删除当前空间的首行文本,直到EOF打印。

当然这里的范式也是很容易看出来的:

[address]{:label; N; [address]{}; [address]b label;}

接下来我们来看这两个范式能够做一些什么事情。

2.将所有花括号包围的文本行都倒置

先看第一范式,注意到循环不变式是hold空间里的始终是已倒序的文本后其实是信手拈来:

sed -En '/\{/,/}/{/\{/h; /\{/!H; x; s/(.+)\n(.+)/\2\n\1/; h; /}/p;};' filename

如果用第二范式的话,其实也是非常自然的:

sed -En '/\{/{:next; N; s/(.+)\n(.+)/\2\n\1/; /}/!b next;}; p;' filename

3.分界不明显的情况

比如对py文件中的def函数定义块以行为单位进行倒置,情况会棘手一些。

在这种情况下,对每行的输入进行控制变得必要起来,不能再依靠sed进行文件读取。

也就是说整个读取-输入循环,完全要由我们自己来进行驱动。第一范式直接出局。

来看第二范式需要进行怎样的修改:

sed -En ':next; N; /^def/!s/.+\n//; /def/{:inner; N; /def.+def/!{s/(.+)\n(.+)/\2\n\1/; b inner;}; /def.+def/{h; s/(.+\n).+/\1/; p; g; s/.+\n//;};}; $!b next;' filename

好吧这看起来确实有点吓人了,不过简单来说,它其实就是:

:label1; N; [address]{:label2; N; [address]{}; [address]b label2;}; [address]b label1;```

其实也就是在第二范式上增加了一层供我们手动控制输入的循环而已。

不过这样就提供给了我们能够完全控制文本输入并定义其行为的能力,sed文本处理能力得以大大提高。

---
好吧我知道这种艰难生涩的文章是没有人会读的,我也被sed的坑折磨得欲仙欲死,我用了一个国庆节的下午才发现macOS的sed是不兼容POSIX sed的,还有奇奇怪怪的POSIX正则表达式的坑,我对sed的热情都消失殆尽了,再见(#微笑).

不过讲道理,sed真的很好玩啊,goto大法好,微笑。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,324评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,303评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,192评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,555评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,569评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,566评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,927评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,583评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,827评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,590评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,669评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,365评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,941评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,928评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,159评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,880评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,399评论 2 342

推荐阅读更多精彩内容

  • 本文承接之前写的三十分钟学会AWK一文,在学习完AWK之后,趁热打铁又学习了一下SED,不得不说这两个工具真的堪称...
    mylxsw阅读 4,382评论 3 74
  • linux资料总章2.1 1.0写的不好抱歉 但是2.0已经改了很多 但是错误还是无法避免 以后资料会慢慢更新 大...
    数据革命阅读 12,127评论 2 34
  • 这篇是当初看完Chinaunix论坛的帖子“抛砖引玉----翻译加注sed1line”的笔记,最近无聊从Evern...
    magic5650阅读 1,144评论 0 4
  • Sed工具工作原理及特性 1. sed是流编辑器,每一次读取一行到内存中,即称之为模式空间(pattern spa...
    魏镇坪阅读 10,920评论 0 12
  • 基础命令 主要的命令和快捷键 Linux系统命令由三部分组成:cmd + [options]+[operation...
    485b1aca799e阅读 1,085评论 0 0