Shell grep 命令扩展增强

背景: 线上排查问题需要找出有某个特征的日志,并获取这些日志的完整调用日志链路。  

 

比如, 通过某个tag 获取到了这些日志的 请求id 【Span ID】,

cat xxxx.log | grep '某tag' | awk  -F '某tag' '{print $2}' 

 

然后还需要再一步取得所有SpanId的完整日志链。显然目前我们需要使用 xargs 来批处理执行。 但这里有个问题。 grep 无法支持这种用法。

如下:

[localhost ~]$ cat xxxxxx.log | grep '某tag' | awk  -F '某tag' '{print $2}'  | xargs grep xxxxxx.log

grep: 某SpanId: No such file or directory

grep 第一个参数必须是 关键词正则 ,其后跟随文件路径。

 

所以为了解决这个问题,我们需要使用一个改造后的SHELL脚本,这里命名为 grepx ,用于增强 grep 命令: 

#!/bin/bash

FILE_PATH="$1*"

COUNT=0
while  [ $# -gt 0 ]
do
    if [ $COUNT -gt 0 ]
    then
        grep "$1" $FILE_PATH
        #输出空白行用来隔断日志   
       echo -e "\n\n"
    fi

    #shift命令用于对参数的移动(左移),通常用于在不知道传入参数个数的情况下,依次遍历每个参数
    shift
    let COUNT=COUNT+1
done

原理是对调参数位置, 再通过 shift 命令移动参数,批量读取管道传递过来的参数,或者 控制台传递的参数。 

 

然后 shell 脚本便可以写成如下: 

cat xxxxxx.log | grep '某tag' | awk  -F '某tag' '{print $2}'  | xargs ~/grepx xxxxxx.log

 

完美搞定。

 

 

 

PS:

Shell编程中Shift的用法

posted @ 2021-06-16 21:02  phpdragon  阅读(239)  评论(0编辑  收藏  举报