侯体宗的博客
  • 首页
  • Hyperf版
  • beego仿版
  • 人生(杂谈)
  • 技术
  • 关于我
  • 更多分类
    • 文件下载
    • 文字修仙
    • 中国象棋ai
    • 群聊
    • 九宫格抽奖
    • 拼图
    • 消消乐
    • 相册

linux学习日记九 正则表达式介绍

linux  /  管理员 发布于 7年前   185

正则表达式就是处理字符串的方法,它以行为单位来进行字符串的处理行为,正则表达式通过一些特殊符号的辅助,可以让用户轻易达到查找、删除、替换某特定字符串的处理程序。

正则表达式基本上就是一种“表示法”,只要工具程序支持这种表示法,那么该工具程序就可以利用正则表达式处理字符串。例如vi,grep,awk,sed等。

正则表达式和之前的bash通配符是两个完全不同的东西,两者毫无关系,这个要注意下。

# grep [-A]  [-B]  [--color=auto] ‘string’  filename

-A:后面加数字,为after的意思,除了列出该行,后续的n行也列出

-B:before的意思,不解释

# dmesg | grep -n -A3 -B2 –color=auto ‘eth’ <== 内核信息

====几个基本的正则式特殊符号====

特殊符号代表意义
[:alnum:]代表英文大小写字符以及数字,亦即 0-9, A-Z, a-z
[:alpha:]代表任何英文大小写字符,亦即 A-Z, a-z
[:blank:]代表空白键与 [Tab] 按键两者
[:cntrl:]代表键盘上面的控制按I,亦即包括 CR, LF, Tab, Del.. 等等
[:digit:]代表数字而已,亦即 0-9
[:graph:]除了空白字元 (空白键与 [Tab] 按I) 外的其他所有按I
[:lower:]代表小写字元,亦即 a-z
[:print:]代表任何可以被列印出淼淖衷
[:punct:]代表标点符号 (punctuation symbol),亦即:” ‘ ? ! ; : # $…
[:upper:]代表大写字元,亦即 A-Z
[:space:]任何会产生空白的字元,包括空白I, [Tab], CR 等等
[:xdigit:]代表 16 进制的数字类型,因此包括: 0-9, A-F, a-f 的数字与字符

====基础正则式====

RE 字符意义与范例
^word意义:待搜寻的字串(word)在行首!
范例:搜寻行首为 # 开始的那一行,并列出行号

grep -n ‘^#’ regular_express.txt

word$意义:待搜寻的字串(word)在行尾!
范例:将行尾为 ! 的那一行列印出恚⒘谐鲂泻

grep -n ‘!$’ regular_express.txt

.意义:代表『一定有一个任意字元』的字符!
范例:搜寻的字串可以是 (eve) (eae) (eee) (e e), 但不能仅有 (ee) !亦即 e 与 e 中间『一定』仅有一个字元,而空白字元也是字元!

grep -n ‘e.e’ regular_express.txt

\意义:跳脱字符,将特殊字符的特殊意义去除!
范例:搜寻含有单引号 ‘ 的那一行!

grep -n \’ regular_express.txt

*意义:重复零个到无穷个的前一个字符
范例:找出含有 (es) (ess) (esss) 等等的字串,注意,因为 * 可以是 0 ,所以 es 也是符合的。另外,因为 * 为重复『前一个字符』的符号, 因此,在 * 之前必须要紧接着一个字符喔!例如任意字元t为 『.*』 !

grep -n ‘ess*’ regular_express.txt

[list]意x:字元集合的 RE 字符,e面列出想要X取的字元!
范例:搜ず (gl) 或 (gd) 的那一行,需要特e留意的是,在 [] 中『代表一待搜さ淖衷唬 例如『 a[afl]y 』代表搜さ淖执梢允 aay, afy, aly 即 [afl] 代表 a 或 f 或 l 的意思!

grep -n ‘g[ld]‘ regular_express.txt

[n1-n2]意义:字元集合里,列出想要撷取的字元范围!
范例:搜寻含有任意数字的那一行!需特e留意,在字元集合 [] 中的减号 – 是有特殊意义的,他代表两个字元之间的所有连续字元!但这个连续与否与 ASCII 编码有关,因此,你的编码需要设定正确(在 bash当中,需要确定 LANG与LANGUAGE 的变量是否正确!) 例如所有大写字元t为 [A-Z]

grep -n ‘[A-Z]‘ regular_express.txt

[^list]意义:字元集合的 RE 字符,里面列出不要的字串或范围!
范例:搜寻的字串可以是 (oog) (ood) 但不能是 (oot) ,那个 ^ 在 [] 仁保淼囊庖迨恰悍聪蜓≡瘛坏囊馑肌 例如,我不要大写字元,则为 [^A-Z]。但是,需要特e注意的是,如果以 grep -n [^A-Z] regular_express.txt 硭蜒埃s发现该文件鹊乃行卸急涣谐觯裁矗恳蛭飧 [^A-Z] 是『非大写字元』的意思, 因为每一行均有非大写字元,例如第一行的 “Open Source” 就有 p,e,n,o…. 等等的小写字

grep -n ‘oo[^t]‘ regular_express.txt

\{n,m\}意义:连续 n 到 m 个的『前一个 RE 字符』
意义:若为 \{n\} 则是连续 n 个的前一个 RE 字符,
意义:若是 \{n,\} t是连续 n 个以上的前一个 RE 字符!
 

范例:在 g 与 g 之间有 2 个到 3 个的 o 存在的字串,亦即 (goog)(gooog)

grep -n ‘go\{2,3\}g’ regular_express.txt

====分析工具sed====

sed本身是一个管道命令,可以分析stdin数据

# sed [-nefr] [动作]

-n:使用安静模式(silent),在一般模式下,所有来自stdin数据都显示出来,而-n后只显示被sed特殊处理的那一行

-e:直接在命令行模式上进行sed的动作编辑

-f:直接将sed动作写在一个文件内,-f filename 则可以执行filename内的sed动作

-r:sed的动作支持的是扩展型正则式语法(默认是基础型)

-i:直接修改读取的文件内容,而不是由屏幕输出

动作说明:[n1[,n2]] function

n1,n2:不见得存在,一般代表选择进行动作的行数,比如在10到20行间进行,则”10,20 [动作行为]‘

function的参数:

a:新增,a的后面可以接字符串,而这些字符串会在新的一行出现(目前的下一行)

c:替换,c的后面接字符串,这些字符串可以替换n1,n2之间的行

d:删除,后面不接任何参数

i:插入,i后面可接字符串,这些字符串会在新的一行出现(目前的上一行)

p:打印,也就是将某个选择的数据打印出来。通常p会与参数sed -n 一起运行

s:替换,就是直接进行替换工作,通常这个s的动作可以搭配正则式例如:1,29s/old/new/g就是

注:sed后面接的动作,需要用两个单引号”括住。

# nl /etc/passwd | sed ’2,5d’

# nl /etc/passwd | sed ’3,$d’

整行替换:

# nl /etc/passwd | sed ’2,5c No 2-5 number’

# nl /etc/passwd | sed -n ’5,7p’ 这个等价于 : head -n 7 | tail -n 5

sed的查找并替换,跟vim的很类似:

# sed ‘s/要被替换的字符串/新的字符串/g’

# nl /etc/passwd | sed ‘/^$/d’  <==删除空白行

====扩展正则式====

====好用的数据处理工具awk====

相比于sed常常作用于一整行的处理,awk则运用于将一行分成数个字段来处理,适用于处理小型数据

# awk ‘条件类型1 {动作1} 条件类型2 {动作2} …’ filename

# awk -n 5 | awk ‘{print $t “\t” $3}’

awk处理流程:

1,读入第一行,并将第一行的数据填入$0,$1,$2等变量中

2,依据条件类型限制,判断是否需要进行后面的动作

3,做完所有的动作与条件类型

4,若还有后续的行的数据,则重复上面的1~3的步骤,直到所有的数据都读完为止

awk的内置变量为:

* NF :每一行($0)拥有的字段总数

* NR :目前awk所处理的是第几行数据

* FS :目前的分隔符,默认是空格键

# last -n 5 | awk ‘{print $1 “\t lines: ” NR “\t columns: ” NF}’

# cat /etc/passwd | awk ‘BEGIN {FS=”:”} $3 < 10 {print $1 “\t ” $3}’

====文件的比较命令diff====

# diff [-bBi] original_file new_file

-b:忽略一行中仅有多个空白的区别

-B:忽略空白行的区别

-i:忽略大小写的不同

====补丁命令patch====

先用diff命令生成补丁文件:

# diff -Naur passwd.old passwd.new > paswd.patch

# patch -pN < patch_file  <==更新

# patch -R -pN < patch_file  <== 还原

-p:后面的N表示取消基层目录的意思

-R:代表还原,将新的文件还原成原本的旧的版本

再开始把旧文件升级到新版本:

# patch -p0 < passwd.patch

把新版本还原:

# patch -R -p0 < passwd.patch

打印命令pr….

============END===============


  • 上一条:
    linux学习日记十 学习shell script
    下一条:
    linux学习日记八 认识与学习bash
  • 昵称:

    邮箱:

    0条评论 (评论内容有缓存机制,请悉知!)
    最新最热
    • 分类目录
    • 人生(杂谈)
    • 技术
    • linux
    • Java
    • php
    • 框架(架构)
    • 前端
    • ThinkPHP
    • 数据库
    • 微信(小程序)
    • Laravel
    • Redis
    • Docker
    • Go
    • swoole
    • Windows
    • Python
    • 苹果(mac/ios)
    • 相关文章
    • 在Linux系统中使用Iptables实现流量转发功能流程步骤(0个评论)
    • vim学习笔记-入门级需要了解的一些快捷键(0个评论)
    • 在centos7系统中实现分区并格式化挂载一块硬盘到/data目录流程步骤(0个评论)
    • 在Linux系统种查看某一个进程所占用的内存命令(0个评论)
    • Linux中grep命令中的10种高级用法浅析(0个评论)
    • 近期文章
    • 在go语言中使用api.geonames.org接口实现根据国际邮政编码获取地址信息功能(1个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf分页文件功能(0个评论)
    • gmail发邮件报错:534 5.7.9 Application-specific password required...解决方案(0个评论)
    • 欧盟关于强迫劳动的规定的官方举报渠道及官方举报网站(0个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf文件功能(0个评论)
    • Laravel从Accel获得5700万美元A轮融资(0个评论)
    • 在go + gin中gorm实现指定搜索/区间搜索分页列表功能接口实例(0个评论)
    • 在go语言中实现IP/CIDR的ip和netmask互转及IP段形式互转及ip是否存在IP/CIDR(0个评论)
    • PHP 8.4 Alpha 1现已发布!(0个评论)
    • Laravel 11.15版本发布 - Eloquent Builder中添加的泛型(0个评论)
    • 近期评论
    • 122 在

      学历:一种延缓就业设计,生活需求下的权衡之选中评论 工作几年后,报名考研了,到现在还没认真学习备考,迷茫中。作为一名北漂互联网打工人..
    • 123 在

      Clash for Windows作者删库跑路了,github已404中评论 按理说只要你在国内,所有的流量进出都在监控范围内,不管你怎么隐藏也没用,想搞你分..
    • 原梓番博客 在

      在Laravel框架中使用模型Model分表最简单的方法中评论 好久好久都没看友情链接申请了,今天刚看,已经添加。..
    • 博主 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 @1111老铁这个不行了,可以看看近期评论的其他文章..
    • 1111 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 网站不能打开,博主百忙中能否发个APP下载链接,佛跳墙或极光..
    • 2016-11
    • 2017-07
    • 2017-10
    • 2017-11
    • 2018-01
    • 2018-02
    • 2020-03
    • 2020-04
    • 2020-05
    • 2020-06
    • 2021-02
    • 2021-03
    • 2021-04
    • 2021-06
    • 2021-07
    • 2021-08
    • 2021-09
    • 2021-10
    • 2021-11
    • 2021-12
    • 2022-01
    • 2022-03
    • 2022-04
    • 2022-08
    • 2022-11
    • 2022-12
    • 2023-01
    • 2023-02
    • 2023-03
    • 2023-06
    • 2023-07
    • 2023-10
    • 2023-12
    • 2024-01
    • 2024-04
    Top

    Copyright·© 2019 侯体宗版权所有· 粤ICP备20027696号 PHP交流群

    侯体宗的博客