linux shell

关注公众号 jb51net

关闭
首页 > 脚本专栏 > linux shell > Shell正则表达式文本处理

Shell编程基础语法与正则表达式文本处理指南

作者：会飞的鱼_123

本文详解Shell编程与正则表达式在Linux系统中的应用,涵盖函数、数组、grep工具及实战案例,建议深入学习文本处理三剑客和正则进阶技巧,提升系统管理效率,感兴趣的朋友跟随小编一起看看吧

Shell编程与正则表达式实战指南

引言：Shell与正则表达式的强大组合

在Linux/Unix系统中，Shell作为连接用户与内核的"桥梁"，既是命令解释器，也是一门强大的脚本语言。配合正则表达式这一文本处理"利器"，能够大幅提升系统管理、日志分析和批量任务处理的效率。本文将带你从基础到实战，全面掌握这两项核心技能。

一、Shell编程核心技能

1. 函数：封装可复用的代码块

Shell函数是代码复用的重要工具，具有以下特点：

基础函数示例
#!/bin/bash
sum(){
read -p "请输入第一数：" num1
read -p "请输入第二数：" num2
echo " 你输入的两个数：$num1 和 $num2 "
SUM=$(($num1+$num2))
echo "两个数的和为：" $SUM
}
sum

参数处理技巧
show_params() {
    echo "第一个参数: $1"
    echo "第二个参数: $2"
    echo "第十个参数: ${10}"  # 注意大括号
    echo "参数总数: $#"
    echo "所有参数: $@"
}
show_params 1 2 3 4 5 6 7 8 9 10 11

3. 函数的返回值

#!/bin/bash
getMax()
{
if [ $1 -lt $2 ]; then
   return $2
else
   return $1;
fi
}
echo "Shell程序中传递的两个参数是：$1 , $2"
getMax $1 $2
echo "最大值：：$?"   # $?表示返回值

使用 ? 并不妥，因为 ?并不妥，因为 ?并不妥，因为?的范围为0-255。当比较的数字大于255时无法得到正确的结果。

2. 数组：存储多个数据的容器

Shell数组特点：

数组基本操作
files=(*.txt)  # 将当前目录所有txt文件存入数组
echo "第一个文件: ${files[0]}"
echo "文件总数: ${#files[@]}"
# 遍历数组
for file in "${files[@]}"; do
    echo "处理文件: $file"
done

关联数组（Bash 4.0+）
declare -A colors  # 声明关联数组
colors["red"]="#FF0000"
colors["green"]="#00FF00"
echo "红色代码: ${colors[red]}"

二、正则表达式深度解析

1. 正则表达式基础

正则表达式是一种描述"字符串模式"的规则，通过元字符组合实现对文本的检索、替换和过滤。

Linux正则分类
分类全称特点支持工具
BRE基础正则表达式功能有限，部分元字符需转义grep, sed
ERE扩展正则表达式功能更强，元字符无需转义egrep, awk

2. 核心元字符

基础元字符
元字符含义示例匹配结果
.任意单个字符a.cabc, a1c
[]字符集中的一个[aeiou]a, e
^行首^start行首的start
$行尾end$行尾的end
重复次数元字符
元字符含义示例匹配结果
*0次或多次ab*cac, abc, abbc
+1次或多次ab+cabc, abbc
?0次或1次ab?cac, abc
{n}恰好n次a{3}aaa

3. grep工具实战

常用选项
选项含义示例
-E启用扩展正则grep -E 'a+'
-i忽略大小写grep -i 'hello'
-o只输出匹配部分grep -o '[0-9]+'
-v反向匹配grep -v '^#'
实战案例
# 查找包含"error"或"warning"的行
grep -E 'error|warning' log.txt  #-E 可以识别正则表达式的元字符
|表示为或
# 提取邮箱地址
grep -E -o '\b[A-Za-z0-9._%+-]+@[A-Za-z0-9.-]+\.[A-Za-z]{2,}\b'  emails.txt

三、综合实战项目

1. 日志分析系统

#!/bin/bash
analyze_logs() {
    # 统计访问量TOP10 IP
    awk '{print $1}' access.log | sort | uniq -c | sort -nr | head -10
    # 统计HTTP状态码
    awk '{print $9}' access.log | sort | uniq -c
    # 查找错误请求
    awk '$9 ~ /^[45]/ {print $0}' access.log
}
analyze_logs

2. 文件批量处理工具

#!/bin/bash
batch_rename() {
    for file in *.$1; do
        mv "$file" "${file%.*}.$2"
    done
}
batch_replace() {
    find . -type f -exec sed -i "s/$1/$2/g" {} +
}
# 使用示例
# batch_rename txt md
# batch_replace "old_text" "new_text"

四、进阶学习建议

结语

Shell编程与正则表达式是Linux系统管理的核心技能组合。通过本文的学习，你已经掌握了从基础语法到实战应用的关键知识点。建议在日常工作中多实践、多思考，将这些技能真正转化为提升效率的"得力助手"。记住，持续实践是掌握这些技能的最佳途径！

到此这篇关于Shell编程基础语法与正则表达式文本处理指南的文章就介绍到这了,更多相关Shell正则表达式文本处理内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:
阅读全文