Linux 文本处理

2024-08-30 13:44
文章标签 linux 文本处理

本文主要是介绍Linux 文本处理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.正则表达式

        Linux 正则表达式在文本处理和搜索过程中起着非常重要的作用。它可以用于匹配和查找符合特定模式的字符串,从而实现强大的文本处理功能。以下是一些常见的正则表达式作用:

        1. 匹配字符串:正则表达式可以根据指定的模式匹配字符串。比如,可以使用正则表达式查找所有以特定字符开头或结尾的字符串。

        2. 搜索和替换:正则表达式可以用于搜索和替换文本中的特定字符或模式。可以通过正则表达式匹配需要替换的字符串,并使用新的字符串进行替换。

        3. 字符串提取:正则表达式可以从文本中提取特定的信息或字段。例如,可以使用正则表达式从日志文件中提取特定时间段内的日志记录。

        4. 格式验证:正则表达式可以用于验证输入数据的格式。例如,可以使用正则表达式验证邮箱地址、手机号码、IP地址等。

        5. 数据清理:正则表达式可以帮助清理和规范化数据。可以通过正则表达式删除或替换文本中的非法字符、空白字符等。

        总之,正则表达式在Linux中提供了一种强大的方式来处理和操作文本数据,让文本处理变得更加灵活和高效。

元字符作用
.任意单个字符
*前一个字符匹配0次或多次
?匹配前面的子表达式0到1次
^      匹配行首
$匹配行尾
[ ]匹配中括号中的任意一个字符
[^]匹配除中括号以外的任意一个字符。
\转义符
\{n\}表示其前面的字符恰好出现n次。
\{n, \}表示其前面的字符出现不小于n次。
\{n, m\}

表示其前面的字符至少出现n次,最多出现m次。

2.字符串截取命令 

1.cut命令

语法:cut [选项] 文件名

-f                提取第几列

-d               分隔符:按照指定分隔符分割列

-b               以字节单位进行分割

 例:

提前准备好的数据

ID      Name    Password        Level
1       wang    wang1234        2
2       li      li789456        3
3       xv      xv123456        1
4       liao    liao4567        3               

显示第2-4列的数据

cut -f 2-4 aaa

显示第2和4列的数据

cut -f 2,4 aaa

3.printf命令

语法:printf '输出类型输出格式' 输出内容

类型转换符                        解释

%s                                     输出字符串

%i                                      输出整数

%f                                      输出浮点数

转义字符             解释

\a                        输出警告声音

\b                        输出退格键(Backspace)

\f                         清除屏幕

\n                        换行 常用

\r                         回车 常用

\t                         缩进(tab) 常用

\v                        垂直输出退格键

3、awk命令

语法:awk [参数] [处理内容] [文件名]

1、条件(pattern):

>

>=

==

<=

<

例:大于1级的用户

awk '$4 > 1' aaa

例:在开头添加信息

awk 'BEGIN {printf "----------开头------- \n"}{printf$0 "\n"}' aaa

4.sed命令

语法 sed [选项] [sed内置命令字符] [文件名]

        示例:

        sed -n 'p' 文件路径

选项:

-n取消默认输出格式,只打印处理过的行(通常搭配p使用)
-i 修改保存文件(默认为预览)
-e同时执行多个过滤
-r扩展正则表达式

内置命令字符

a在指定行后添加一条数据或多行数据
d删除匹配的整行内容
i在指定行前添加一条数据或多行数据
p打印当前匹配的数据
c更改匹配行的内容
w筛选的内容保存到文件
r读取文件并追加
s

将匹配的内容进行替换(支持正则表达式)

5.排序命令sort命令

语法:sort [选项] 文件名

选项解释
-f忽略大小写
-n以数值型进行排序,默认使用字符串型排序
-r反向排序
-t指定分隔符,默认是分隔符是制表符
-k n,m按照指定的字段范围排序。从第n字段开始,m字段结束(默认到行尾)
6.统计命令wc 

语法: wc [选项] 文件名

-l           只统计行数

-w         只统计单词数
-m         只统计字符数

如有错误给孩子提醒一下,感谢观看! 

这篇关于Linux 文本处理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1120988

相关文章

Oracle数据库定时备份脚本方式(Linux)

《Oracle数据库定时备份脚本方式(Linux)》文章介绍Oracle数据库自动备份方案,包含主机备份传输与备机解压导入流程,强调需提前全量删除原库数据避免报错,并需配置无密传输、定时任务及验证脚本... 目录说明主机脚本备机上自动导库脚本整个自动备份oracle数据库的过程(建议全程用root用户)总结

Linux如何查看文件权限的命令

《Linux如何查看文件权限的命令》Linux中使用ls-R命令递归查看指定目录及子目录下所有文件和文件夹的权限信息,以列表形式展示权限位、所有者、组等详细内容... 目录linux China编程查看文件权限命令输出结果示例这里是查看tomcat文件夹总结Linux 查看文件权限命令ls -l 文件或文件夹

idea的终端(Terminal)cmd的命令换成linux的命令详解

《idea的终端(Terminal)cmd的命令换成linux的命令详解》本文介绍IDEA配置Git的步骤:安装Git、修改终端设置并重启IDEA,强调顺序,作为个人经验分享,希望提供参考并支持脚本之... 目录一编程、设置前二、前置条件三、android设置四、设置后总结一、php设置前二、前置条件

Linux系统中查询JDK安装目录的几种常用方法

《Linux系统中查询JDK安装目录的几种常用方法》:本文主要介绍Linux系统中查询JDK安装目录的几种常用方法,方法分别是通过update-alternatives、Java命令、环境变量及目... 目录方法 1:通过update-alternatives查询(推荐)方法 2:检查所有已安装的 JDK方

Linux系统之lvcreate命令使用解读

《Linux系统之lvcreate命令使用解读》lvcreate是LVM中创建逻辑卷的核心命令,支持线性、条带化、RAID、镜像、快照、瘦池和缓存池等多种类型,实现灵活存储资源管理,需注意空间分配、R... 目录lvcreate命令详解一、命令概述二、语法格式三、核心功能四、选项详解五、使用示例1. 创建逻

Linux下在线安装启动VNC教程

《Linux下在线安装启动VNC教程》本文指导在CentOS7上在线安装VNC,包含安装、配置密码、启动/停止、清理重启步骤及注意事项,强调需安装VNC桌面以避免黑屏,并解决端口冲突和目录权限问题... 目录描述安装VNC安装 VNC 桌面可能遇到的问题总结描js述linux中的VNC就类似于Window

linux下shell脚本启动jar包实现过程

《linux下shell脚本启动jar包实现过程》确保APP_NAME和LOG_FILE位于目录内,首次启动前需手动创建log文件夹,否则报错,此为个人经验,供参考,欢迎支持脚本之家... 目录linux下shell脚本启动jar包样例1样例2总结linux下shell脚本启动jar包样例1#!/bin

Linux之platform平台设备驱动详解

《Linux之platform平台设备驱动详解》Linux设备驱动模型中,Platform总线作为虚拟总线统一管理无物理总线依赖的嵌入式设备,通过platform_driver和platform_de... 目录platform驱动注册platform设备注册设备树Platform驱动和设备的关系总结在 l

linux批量替换文件内容的实现方式

《linux批量替换文件内容的实现方式》本文总结了Linux中批量替换文件内容的几种方法,包括使用sed替换文件夹内所有文件、单个文件内容及逐行字符串,强调使用反引号和绝对路径,并分享个人经验供参考... 目录一、linux批量替换文件内容 二、替换文件内所有匹配的字符串 三、替换每一行中全部str1为st

Python实现中文文本处理与分析程序的示例详解

《Python实现中文文本处理与分析程序的示例详解》在当今信息爆炸的时代,文本数据的处理与分析成为了数据科学领域的重要课题,本文将使用Python开发一款基于Python的中文文本处理与分析程序,希望... 目录一、程序概述二、主要功能解析2.1 文件操作2.2 基础分析2.3 高级分析2.4 可视化2.5