shell编程--awk

2024-09-05 01:28
文章标签 编程 shell awk

本文主要是介绍shell编程--awk,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

作用

切片,显示信息的,按列显示,也是逐行处理的

语法

awk [options] 'commands' file

==options

-F可以指定分割符,默认分隔符为空格或制表符TAB,-F

==command(时空)

BEGIN{}

{}

END{}

awk -F: 'BEGIN{print "awk开始"}{print $0}END{print "awk结束"}' passwd.txt#############################################################
awk开始
root:x:0:0:root:/root:/bin/bash1
daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin2
bin:x:2:2:bin:/bin:/usr/sbin/nologin3
sys:x:3:3:sys:/dev:/usr/sbin/nologin4
sync:x:4:65534:sync:/bin:/bin/sync5
games:x:5:60:games:/usr/games:/usr/sbin/nologin6
man:x:6:12:man:/var/cache/man:/usr/sbin/nologin7
lp:x:7:7:lp:/var/spool/lpd:/usr/sbin/nologin8
mail:x:8:8:mail:/var/mail:/usr/sbin/nologin9
news:x:9:9:news:/var/spool/news:/usr/sbin/nologin10
awk结束
awk [options] 'pattern{action}' {filenames}

pattern:表示AWK在数据中查找的内容,就是匹配模式

action:在找到匹配内容时所执行的一系列命令

选项参数说明

选项参数功能
-F指定输入文件拆分分隔符
-v赋值一个用户定义变量

awk内置变量

内置变量含义
ARGC命令行参数个数
ARGV命令行参数排列
ENVIRON支持队列中系统环境变量的使用
FILENAMEawk浏览的文件名
FNR浏览文件的记录数
FS设置输入域分隔符,等价于命令行 -F选项
NF浏览记录的域的个数, 根据分隔符分割后的列数(列数)
NR已读的记录数, 也是行号(行号)
OFS输出域分隔符
ORS输出记录分隔符
RS控制记录分隔符
$n$0变量是指整条记录。$1表示当前行的第一个域,$2表示当前行的第二个域,......以此类推。
$NF$NF是number finally,表示最后一列的信息,跟变量NF是有区别的,变量NF统计的是每行列的总数

示例

#数据准备
cp /etc/passwd ./#默认每行空格切割数据
echo "abc 123 456" | awk '{print $1"&"$2"&"$3}'#打印含有匹配信息的行
awk '/root/ {print $0}' passwd
awk '/root/' passwd#打印匹配行中第7列数据
awk -F: '/root/ {print $7}' passwd#统计passwd:  文件名,每行的行号,每行的列数,对应的完整行内容
awk -F: '{print "文件名:" FILENAME "行号" NR "列数" NF "内容" $0}' passwd
#使用printf替代print,可以让代码阅读型更好
awk -F: '{printf("文件名:%s,行号 %s,列数 %s 内容 %s\n",FILENAME,NR,NF,$0)}' passwd#打印第二行信息
awk -F ':' 'NR==2{printf("filename:%s,%s\n",FILENAME,$0)}' passwd#查找以c开头的资源
ls -a | awk '/^c/'#打印第一列
awk -F: '{print $1}' passwd#打印最后1列
awk -F: '{print $NF}' passwd# 打印倒数第二列
awk -F: '{print $(NF-1)}'#打印10到20行的第一列
awk -F: '{if(NR>=10 && NR<=20) print $1}' passwd#多分隔符使用
echo "abc/123:456" | awk -F "[:/]" '{print $0,$1,$2,$3}'
echo "one:two/three" | awk -F '[:/]' '{printf("%s\n%s\n%s\n%s\n",$0,$1,$2,$3)}'#添加开始与结束内容
echo -e  "abc\nabc" | awk 'BEGIN{print "开始..."} {print $0} END{print "结束..."}'#使用循环拼接分割后的字符串
echo "1111    222 33 44" | awk -v str="" '{for(n=1;n<=NF;n++)  { str=str$n } print str}'#操作指定数字运算echo "2.1" | awk -v i=1 '{print $0+i}'#切割ip
ifconfig | awk '/broadcast/{print $0}' | awk '{print $2}'#显示空行行号
sed 'G' sed.txt | awk '/^$/{print NR}'#

小结

grep , sed ,awk , cut 文本字符串操作四剑客的区别

grep:用于查找匹配的行

cut: 截取数据. 截取某个文件中的列, 重点是按照列分割, 这个命令不适合截取文件中有多个空白字符的字段

sed: 增删改查数据. sed用于在文件中以行来截取数据进行增\删\改\查

awk:截取分析数据. 可以在某个文件中是以竖列来截取分析数据, 如果字段之间含有很多空白字符也可以获取需要的数据, awk是一种语言,可以深入分析文件数据

这篇关于shell编程--awk的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1137575

相关文章

Go语言数据库编程GORM 的基本使用详解

《Go语言数据库编程GORM的基本使用详解》GORM是Go语言流行的ORM框架,封装database/sql,支持自动迁移、关联、事务等,提供CRUD、条件查询、钩子函数、日志等功能,简化数据库操作... 目录一、安装与初始化1. 安装 GORM 及数据库驱动2. 建立数据库连接二、定义模型结构体三、自动迁

shell中set -u、set -x、set -e的使用

《shell中set-u、set-x、set-e的使用》本文主要介绍了shell中set-u、set-x、set-e的使用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参... 目录✅ 1. set -u:防止使用未定义变量 作用: 示例:❌ 报错示例输出:✅ 推荐使用场景:✅ 2. se

Linux脚本(shell)的使用方式

《Linux脚本(shell)的使用方式》:本文主要介绍Linux脚本(shell)的使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录概述语法详解数学运算表达式Shell变量变量分类环境变量Shell内部变量自定义变量:定义、赋值自定义变量:引用、修改、删

Linux实现简易版Shell的代码详解

《Linux实现简易版Shell的代码详解》本篇文章,我们将一起踏上一段有趣的旅程,仿照CentOS–Bash的工作流程,实现一个功能虽然简单,但足以让你深刻理解Shell工作原理的迷你Sh... 目录一、程序流程分析二、代码实现1. 打印命令行提示符2. 获取用户输入的命令行3. 命令行解析4. 执行命令

Python 异步编程 asyncio简介及基本用法

《Python异步编程asyncio简介及基本用法》asyncio是Python的一个库,用于编写并发代码,使用协程、任务和Futures来处理I/O密集型和高延迟操作,本文给大家介绍Python... 目录1、asyncio是什么IO密集型任务特征2、怎么用1、基本用法2、关键字 async1、async

CentOS和Ubuntu系统使用shell脚本创建用户和设置密码

《CentOS和Ubuntu系统使用shell脚本创建用户和设置密码》在Linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设置密码,本文写了一个shell... 在linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设

Java并发编程之如何优雅关闭钩子Shutdown Hook

《Java并发编程之如何优雅关闭钩子ShutdownHook》这篇文章主要为大家详细介绍了Java如何实现优雅关闭钩子ShutdownHook,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起... 目录关闭钩子简介关闭钩子应用场景数据库连接实战演示使用关闭钩子的注意事项开源框架中的关闭钩子机制1.

shell编程之函数与数组的使用详解

《shell编程之函数与数组的使用详解》:本文主要介绍shell编程之函数与数组的使用,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录shell函数函数的用法俩个数求和系统资源监控并报警函数函数变量的作用范围函数的参数递归函数shell数组获取数组的长度读取某下的

SpringShell命令行之交互式Shell应用开发方式

《SpringShell命令行之交互式Shell应用开发方式》本文将深入探讨SpringShell的核心特性、实现方式及应用场景,帮助开发者掌握这一强大工具,具有很好的参考价值,希望对大家有所帮助,如... 目录引言一、Spring Shell概述二、创建命令类三、命令参数处理四、命令分组与帮助系统五、自定

Spring Shell 命令行实现交互式Shell应用开发

《SpringShell命令行实现交互式Shell应用开发》本文主要介绍了SpringShell命令行实现交互式Shell应用开发,能够帮助开发者快速构建功能丰富的命令行应用程序,具有一定的参考价... 目录引言一、Spring Shell概述二、创建命令类三、命令参数处理四、命令分组与帮助系统五、自定义S