7月25日 awk

awk作用

处理文件信息:文本文件信息 日志文件信息 配置文件信息
处理文件方式:排除信息 查询信息 统计信息 替换信息 对文件列进行处理


image.png

awk实践操作

创建环境

[root@oldboy63-libo ~]# cat reg.txt 
Zhang  Dandan    41117397    :250:100:175
Zhang  Xiaoyu    390320151   :155:90:201
Meng   Feixue    80042789    :250:60:50
Wu     Waiwai    70271111    :250:80:75
Liu    Bingbing  41117483    :250:100:175
Wang   Xiaoai    3515064655  :50           :95  :135
Zi     Gege      1986787350  :250:168:200
Li     Youjiu    918391635   :175:75:300
显示xiaoyu的姓氏和ID号码
[root@oldboy63-libo ~]# awk '$2~/Xiaoyu/{print $1,$3}' reg.txt 
Zhang 390320151
姓氏是Zhang的人,显示他的第二次捐款金额及他的名字
[root@oldboy63-libo ~]# awk -F "[: ]+" '$1~/Zhang/{print $1,$2,$5}' reg.txt
Zhang Dandan 100
Zhang Xiaoyu 90
显示所有以41开头的ID号码的人的全名和ID号码
[root@oldboy63-libo ~]# awk '$3~ /^41/{print $1,$2,$3}' reg.txt 
Zhang Dandan 41117397
Liu Bingbing 41117483
显示所有ID号码最后一位数字是1或5的人的全名
[root@oldboy63-libo ~]# awk '$3~/[15]$/{print $1,$2,$3}' reg.txt
Zhang Xiaoyu 390320151
Wu Waiwai 70271111
Wang Xiaoai 3515064655
Li Youjiu 918391635
获取文件中有井号或空行的内容, 将空行和井号信息的行排除
image.png
Zhang  Dandan    41117397    :250:100:175
#Zhang  Xiaoyu    390320151   :155:90:201
Meng   Feixue    80042789    :250:60:50

Wu     Waiwai    70271111    :250:80:75
Liu    Bingbing  41117483    :250:100:175
#Wang   Xiaoai    3515064655  :50:95:135

Zi     Gege      1986787350  :250:168:200
Li     Youjiu    918391635   :175:75:300

Lao    Nanhai    918391635   :250:100:175
Lao    Nanhai    Xiaoyu   :250:100:175
[root@oldboy63-libo ~]# awk '$0!~/#|^$/'  reg.txt
Zhang  Dandan    41117397    :250:100:175
Zhang  Xiaoyu    390320151   :155:90:201
Meng   Feixue    80042789    :250:60:50
Wu     Waiwai    70271111    :250:80:75
Liu    Bingbing  41117483    :250:100:175
Wang   Xiaoai    3515064655  :50           :95  :135
Zi     Gege      1986787350  :250:168:200
Li     Youjiu    918391635   :175:75:300
显示Xiaoyu的捐款,每个捐款数额都是以$开头
利用sed
[root@oldboy63-libo ~]# awk '$2~/Xiaoyu/{print $4}' reg.txt|sed 's#:#$#g'
$155$90$201
利用tr
[root@oldboy63-libo ~]# awk '$2~/Xiaoyu/{print $4}' reg.txt|tr ':' '$'
$155$90$201
awk替换
[root@oldboy63-libo ~]# awk  '$2~/Xiaoyu/{gsub(/:/,"$",$NF);print $NF}' reg.txt
$155$90$201

$NF 表示文件的最后一列信息

比较行信息
root@oldboy63-libo ~]# awk  'NR>2' reg.txt
Meng   Feixue    80042789    :250:60:50
Wu     Waiwai    70271111    :250:80:75
Liu    Bingbing  41117483    :250:100:175
Wang   Xiaoai    3515064655  :50           :95  :135
Zi     Gege      1986787350  :250:168:200
Li     Youjiu    918391635   :175:75:300
[root@oldboy63-libo ~]# awk  'NR<2' reg.txt
Zhang  Dandan    41117397    :250:100:175
取出多行信息
连续多行
[root@oldboy63-libo ~]# awk  'NR==2,NR==4' reg.txt
Zhang  Xiaoyu    390320151   :155:90:201
Meng   Feixue    80042789    :250:60:50
Wu     Waiwai    70271111    :250:80:75
不连续多行
[root@oldboy63-libo ~]#  awk  'NR==2;NR==4' reg.txt 
Zhang  Xiaoyu    390320151   :155:90:201
Wu     Waiwai    70271111    :250:80:75
BEGIN{动作}: 在处理文件之前,先做什么事情
添加信息
[root@oldboy63-libo ~]# awk  'BEGIN{print "姓","名","号码","捐款记录"}{print $0}' reg.txt|column -t
姓     名        号码        捐款记录
Zhang  Dandan    41117397    :250:100:175
Zhang  Xiaoyu    390320151   :155:90:201
Meng   Feixue    80042789    :250:60:50
Wu     Waiwai    70271111    :250:80:75
Liu    Bingbing  41117483    :250:100:175
Wang   Xiaoai    3515064655  :50           :95  :135
Zi     Gege      1986787350  :250:168:200
Li     Youjiu    918391635   :175:75:300
计算
[root@oldboy63-libo ~]# awk "BEGIN{print 2+2}"
4
修改内置变量

NF: 取出最后一列
NR: 表示行信息
awk '{print $(NF-1)}' reg.txt

END{动作}: 在处理文件之后,再做什么事情
[root@oldboy63-libo ~]# awk  'BEGIN{print "姓","名","号码","捐款记录"}{print $0}END{print "学生捐款登记表"}' reg.txt|column -t
姓              名        号码        捐款记录
Zhang           Dandan    41117397    :250:100:175
Zhang           Xiaoyu    390320151   :155:90:201
Meng            Feixue    80042789    :250:60:50
Wu              Waiwai    70271111    :250:80:75
Liu             Bingbing  41117483    :250:100:175
Wang            Xiaoai    3515064655  :50           :95  :135
Zi              Gege      1986787350  :250:168:200
Li              Youjiu    918391635   :175:75:300
学生捐款登记表

可以将统计后的最终结果进行输出

awk对文件进行统计分析
image.png
统计行数
[root@oldboy63-libo ~]# awk '{i=i+1}END{print i}' reg.txt
8
[root@oldboy63-libo ~]#  awk '{i++}END{print i}' reg.txt
8

sum=sum+nn 你要对文件第几列信息做求和运算

image.png

[root@oldboy63-libo ~]# seq 10|awk '{sum=sum+$1}END{print sum}'
55
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,463评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,868评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,213评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,666评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,759评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,725评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,716评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,484评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,928评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,233评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,393评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,073评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,718评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,308评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,538评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,338评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,260评论 2 352

推荐阅读更多精彩内容

  • 1. awk三剑客命令概述 # which awk--------查看awk在哪个目录下 显示: /u...
    男子瀚阅读 270评论 0 0
  • 课程知识回顾(提问环节)sed命令作用了解语法: sed [参数] '条件 指令' 文件信息sed命令实际应用查...
    威士忌酸WhiskySour阅读 221评论 0 0
  • 操作系统命令三剑客-awk 一: 三剑客命令awk概述gawk : pattern scanning and pr...
    ManBu_x阅读 311评论 0 1
  • 01. awk命令格式与操作原理 命令格式: sed [参数] '指令信息' 文件信息 awk [选项] '...
    白狐脸儿阅读 272评论 0 0
  • awk使用说明 awk是行处理器: 相比较屏幕处理的优点,在处理庞大文件时不会出现内存溢出或是处理缓慢的问题,通常...
    好好学习的蜗牛阅读 498评论 0 2