shell中的流编辑器awk

文章目录

  • shell中的流编辑器awk
  • awk命令
  • awk工作原理
  • awk的命令格式
  • awk常见的内建变量(可直接使用)
  • awk按行输出文本
  • awk以字段输出文本
  • awk通过管道符,双引号调用shell命令
  • getline
  • 例:获取本机ip,并转换成二进制

awk命令

  • awk是一种处理文本文件的语言,是一个强大的文本分析工具, 用于在linux/unix下对文本和数据进行处理 。

  • 而且它支持用户自定义函数和动态正则表达式等先进功能,是linux/unix下的一个强大编程工具

awk工作原理

逐行读取文本,默认以空格或tab键为分隔符进行分隔,将分隔所得的各个字段保存到内建变量中,并按模式或者条件执行编辑命令。

sed命令常用于一整行的处理,而awk比较倾向于将一行分成多个"字段"然后再进行处理。

awk信息的读入也是逐行读取的,执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符 "&&“表示"与”、 “II"表示"或”、 "!“表示"非”; 还可以进行简单的数学运算,如 +、一、*、/、%、^ 分别表示加、减、乘、除、取余和乘方。

awk的命令格式

awk 选项 "模式或条件 [操作]"  文件1 文件2awk -f 脚本文件 文件1 文件2

awk常见的内建变量(可直接使用)

内建变量 说明
FS 列分割符,制定和每行文本的字段分割符,默认为空格或者制表符
NF 当前处理的行的字段个数
NR 当前处理行的行号(序数)
$0 当前处理行的整行内容
$n 当前处理行的第n个字段(第n列)
FILENAME 被处理的文件名
RS 行分隔符,awk从文本上读取资料时,将根据RS的定义把资料切割成许多条记录,而awk一次仅读入一条,以进行处理,预设值是\n

awk按行输出文本

awk '(NR>=1)&&(NR<=4){print}' 11.txt#输出第一到第四行
111111
22222
233333
444444
awk '(NR==1)||(NR==4){print}' 11.txt#输出第一和第四行
111111
444444
awk 'NR==1,NR==2{print}' 11.txt#输出第一和第二行
111111
22222
awk '(NR%2)==1{print}' 11.txt#输出奇数行
111111
233333
55555
awk '(NR%2)==0{print}' 11.txt#输出偶数行
22222
444444
66666
awk '/^1/{print}' 11.txt#输出以1为开头的行
111111
awk '/2$/{print}' 11.txt#输出以2为结尾的行
22222
awk 'BEGIN{x=0};/^2/{x++};END {print x}' 11.txt
#统计以2开头的行的行数
2

BEGIN模式表示,在处理指定文本之前,需要先执行BEGIN模式中指定的动作,awk再处理指定的文本,之后再执行END模式中指定的动作,END{}语句块中,往往会放入打印结果等语句。

awk以字段输出文本



字段3为用户账号的UID

字段4为所属基本组账号的GID

awk通过管道符,双引号调用shell命令

getline

  • 当getline左右无重定向符“<”或“|”时,getline作用于当前文件,读入当前文件的第一行给其后跟的变量var或$0;应该注意到,由于awk在处理getline之前已经读入了一行,所以getline得到的返回结果是隔行的。
  • 当getline左右有重定向符“<”或“|”时,getline则作用于定向输入文件,由于该文件是刚打开,并没有被awk读入一行,只是getline读入,那么getline返回的是该文件的第一行,而不是隔行。

例:获取本机ip,并转换成二进制

#!/bin/bash
#获取IP
ifconfig | awk '(NR==2) {print $2}'#对分段后的IP地址赋值给一个变量
IP=`ifconfig |awk '(NR==2) {print $2}' | awk 'BEGIN {RS="."} ; {print} '`#进行外层循环,四次
for a in $IP
do#进行内循环,选用减法进行循环,如果外层循环的值比被减数大,则取余数,并输出1;反之则输出0,且不取减法结果。   for ((i=1;i<=255;i+=$i))dom=$[128/$i]sum=$[$a-$m]if [ $a -ge $m ]thena=$[$a-$m]echo -n "1"  #不换行输出elseecho -n "0"  #不换行输出fidoneecho  " "  #进行系统默认的空格换行操作
done   > test.txtIP1="`cat test.txt`"
echo $IP1 | sed 's/ /./g'

shell中的流编辑器awk相关推荐

  1. linux shell中的流编辑器sed的使用

    sed流编辑器 23.3.1  sed  strem editor 流编辑器 sed编辑器是一行一行的处理文件内容的.正在处理的内容存放在模式空间(缓冲区)内,处理完成后按照选项的规定进行输出或文件的 ...

  2. shell sed(流编辑器)的基本使用

    文章目录 1.基本用法 2.案例1 3.案例2 示例1:向文件中添加或插入行 示例2:更改文件中指定的行 示例3:删除文件中的行 示例4:替换文件中的内容 示例5:打印文件中的行 示例6:打印文件的行 ...

  3. Shell学习总结-流编辑器sed

    目录 正则表达式 定址 命令与选项 用sed修改文件 元字符 sed范例 106- 正则表达式 与grep一样,sed在文件中查找模式时也要使用正则表达式(RE)和各种元字符.正则表达式是括在斜杠间的 ...

  4. Linux指令:AWK - 可编程流编辑器

    Table of Contents awk功能 线路寻址 预定义的awk值 变数 条件和循环 推荐阅读:<Linux指令:sed和awk指令> 在详细介绍了sed 之后,还很了解awk(g ...

  5. shell中awk编辑器

    目录 一.awk工作原理 命令格式 awk常见的内建变量(可直接用) 二.按行输出文本 三.按字段输出文本 四.通过管道.双引号调用shall命令 五.使用awk统计httpd访问日志中每个客户端IP ...

  6. 详解流编辑器 sed 和 编程语言 awk

    一.流编辑器 sed sed 是一个精简的.非交互式的流式编辑器,它在命令行中输入编辑命令和指定文件名,然后在屏幕上查看输出. 逐行读取文件内容存储在临时缓冲区中,称为"模式空间" ...

  7. 第十九章 文本处理流编辑器:awk编程

    第十九章 文本处理流编辑器:awk编程 名词解释 awk 是一种编程语言,用于linux/unix下对文本和数据进行处理.数据可以来自标准输入(stdin).一个或多个文件.或其它命令的输出.它支持用 ...

  8. shell中色彩处理和三剑客之awk使用技巧

    Shell中的色彩处理 shell脚本中echo显示内容带颜色显示,echo显示带颜色,需要使用参数-e 格式1: echo -e "\033[背景颜色;文字颜色m 要输出的字符 \033[ ...

  9. shell脚本编程笔记(九)—— 初识流编辑器 sed

    一. 流编辑器 sed编辑器被称作流编辑器(stream editor).在交互式文本编辑器中(比如vim),你可以用键盘命令来交互式地插入.删除或替换数据中的文本.流编辑器则基于预先提供的一组命令来 ...

最新文章

  1. Eclipse显示内存占用
  2. python怎么和sql一起用_自己写的Python数据库连接类和sql语句拼接方法
  3. Spring XD 1.0.0.M5在这里!
  4. jQuery 利用 $.getJson() 实现跨域
  5. html5退出全屏触发的方法_在实战中学??typescript - 实现浏览器全屏(100行)
  6. jquery 如何获取动态添加的元素
  7. 计算机网络网络层重要概念
  8. 编译原理完整学习笔记(四):语法分析
  9. Access更新查询(更新员工姓名)
  10. android获取电池信息;android获取电池容量、技术、电压、电量、温度等信息
  11. java游戏管理器 闪退_手游频繁崩溃”闪退”? 从程序上找原因
  12. Chrome 插件下载、安装、加载正在开发的扩展程序和打包扩展程序
  13. 信息学奥赛一本通1379:热浪(heatwv) 图论dijkastra算法
  14. FleaPHP 学习笔记1
  15. python勾股定理中三个数的关系是、找出三十以内的_从勾股定理到余弦相似度-程序员的数学基础...
  16. 是时候聘请首席元宇宙官了吗?
  17. python笔记手写照片_用Python对手写笔记进行压缩与增强
  18. 5个让你爱上做计划的计划管理软件,每一个都非常好用!
  19. 写给2035年的自己
  20. 怎么关闭计算机用户账户控制面板,win7系统用户账户控制设置|win7关闭/取消用户账户控制的方法-系统城...

热门文章

  1. linux里进程状态为sl,Linux ps state sl+是什么意义
  2. Optimism Rollup原理详解
  3. 【PSO】熟悉PSO算法
  4. 元宇宙vs. 数字孪生:技术演化的视角
  5. 一文带你了解 JavaScript 函数式编程
  6. 安卓内存优化-bitmap优化
  7. (洛谷)小鱼的游泳时间
  8. 更换Linux启动logo的总结
  9. Spring Batch之读数据—读混合记录文件(三十)
  10. Java学习笔记 --- 多线程