shell脚本命令(sotr/unip/tr/cut/eval)与正则表达式
阅读原文时间:2023年07月12日阅读:3

shell脚本命令(sotr/unip/tr/cut/eval)与正则表达式

1、sort命令

概述:

  • Linux sort命令用于将文本文件内容加以排序。
  • sort命令可针对文本文件的内容,以行为单位来排序

格式:

sort [选项] 参数

常用选项:

  • -f∶ 忽略大小写,会将小写字母都转换为大写字母来进行比较;
  • -b∶ 忽略每行前面的空格;
  • -n∶ 按照数字进行排序;
  • -r∶ 反向排序;
  • -u∶ 等同于uniq,表示相同的数据仅显示一行;
  • -t∶ 指定字段分隔符,默认使用 【Tab】键分隔;
  • -k∶指定排序字段;
  • -o <输出文件>∶ 将排序后的结果转存至指定文件

概述:

  • Linux uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用。

  • uniq 可检查文本文件中重复出现的行列。

格式:

uniq [选项] 参数

常用选项:

  • -c∶ 进行计数,并删除文件中重复出现的行;
  • -d∶ 仅显示连续的重复行;
  • -u∶ 仅显示出现一次的行

概述:

  • Linux tr 命令用于转换或删除文件中的字符。
  • tr 指令从标准输入设备读取数据,经过字符串转译后,将结果输出到标准输出设备。

格式:

tr [选项] 参数

常用选项:

  • -c∶保留字符集1的字符,其他的字符(也包括换行符\n)用字符集2替换
  • -d∶ 删除所有属于字符集1的字符
  • -s∶ 将重复出现的字符串压缩为一个字符串;用字符集2替换 字符集1
  • -t∶ 字符集2 替换 字符集1,不加选项和结果

参数

  • 字符集1:指定要转换或删除的原字符集,当执行转换操作时,必须使用参数“字符集2”指定转换的目标字符集,但是执行删除操作时,不需要参数“字符集2”;
  • 字符集2:指定要转换成的目标字符集

使用tr进行排序

  1. 使用echo ${arr[*]}可以输出数组列表
  2. 结合| tr " " "\n" 可以将输出内容中的空格换成换行符
  3. 然后在使用| sort -n对输出的内容进行按数值从小到大排序即可。

概述:

Linux cut命令用于显示每行从开头算起 num1 到 num2 的文字。

cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。

如果不指定 File 参数,cut 命令将读取标准输入。必须指定 -b、-c 或 -f 标志之一

格式:

cut [选项] 参数

常用选项:

  • -f∶ 通过指定哪一个字段进行提取。cut命令使用"TAB"作为默认的字段分隔符。
  • -d∶ “TAB"是默认的分隔符,使用此选项可以更改为其他的分隔符。
  • - -complement∶ 此选项用于排除所指定的字段。
  • - -output-delimiter∶ 更改输出内容的分隔符。

概述:

加上eval时,shell就会在执行命令之前扫描他2次,

eval命令将首先会先扫描命令行进行所有的置换,然后在执行该命令,

该命令适用于那些一次扫描无法实现其功能的变量,该命令对变量进行2次扫描

通常用于判断语句中,用来检查某一字符串是否满足某一格式

正则表达式是由普通字符与元字符组成:

  1. 普通字符包括大小写字母、数字、标点符号及一些其他符号。
  2. 元字符是指在正则表达式中具有特殊意义的专用字符,可以用来规定其前导字符( 即位于元字符前面的字符)在目标对象中的出现模式。

基础常见的元字符:(支持工具grep、egrep、sed、awk)

\ :转义字符,用于取消特殊符号的含义,例: \!、\n、\$等

^ :匹配字符串开始的位置,例: ^a、 ^the、 ^#、^[a-z]

$ :匹配字符串结束的位置,例: word$、 ^$匹配空行

. :匹配除\n之外的任意的一个字符,例: go.d、 g..d

* :匹配前面子表达式0次或者多次,例: goo*d、 go.*d

[list] :匹配list列表中的一个字符,例: go[ola]d, [abc]、 [a-z]、 [a-z0-9]、 [0-9]匹配任意一位数字

[^list] :匹配任意非list列表中的一个字符,例: [^0-9]、 [^A-20-9]、 [^a-z]匹配任意一位非小写字母

\{n\} :匹配前面的子表达式n次,例: go\{2\}d、 '[0-9]\{2\} '匹配两位数字

\{n,\} :匹配前而的子表达式不少于n次,例: go\{2, \}d、'[0-9]\{2, \}'匹配两位及两位以上数字

\{n,m\} :匹配前面的子表达式n到m次,例: go\{2,3\}d、 ' [0-9]\{2,3\}'匹配两位到三位数字

  注: egrep、 awk使用{n}、{n,小、{n, m}匹配时“{}”前不用加“\”

扩展正则表达式元字符:(支持工具egrep、awk)

+ :匹配前面子表达式1次以上,例: do+g, 将匹配至少一个o, 如dog、 doog、 dooog等

? :匹配前面子表达式0次或者1次,例: do?g, 将匹配dg或dog

() :将括号中的字符串作为h一个整体,例1: d(oo)+g," 将匹配oo整体1次以上,如doog、doooog等

| :以或的方式匹配字条串,例: d (oo|)g," 将匹配doog或者doofuck123g或者dooooooog