如何通过在 bash 中通配来过滤 STDIN？ [复制]

Question

我的 bash 脚本通过管道 (stdin) 获取完整路径，并通过命令行参数获取排除模式。目前这处理正则表达式模式，但我想重写为仅处理 glob 模式。

如何使用 glob 模式（如 fnmatch）过滤 stdin？ 因为据我所知，我不能使用 grep 进行通配，而且我不会想手动将glob 模式转换为正则表达式。 - 所以我想找到一个快速而不是 hacky 的解决方案。

示例：

echo -e 'apple tree\nbanana tree\norange tree' | ./filter_script.sh '*ban' '*ge*'

预期输出：

# banana tree
# orange tree

完整的示例代码在GitHub Gists

编辑 1：

在现实生活中，这个脚本会得到上千条路径，所以我认为，原生的 bash 实现并不好。

有人知道“grep like”glob 过滤器吗？

Answer 1

假设您希望只使用原生bash 方式来支持glob 模式，您可以使用Extended Globs 来做到这一点，这不是 默认设置，但可以通过

shopt -s extglob

你有一个按以下方式定义的字符串

myStr=$'apple tree\nbanana tree\norange tree'

您可以按如下方式应用glob 模式。将字符串读入一个数组，用readarray 换行符分割（你需要有bash 4.0 或更大）

readarray -t y <<<"$myStr"

现在是循环，

for i in "${y[@]}"; do 
    [[ $i == @(*n*) ]] && echo "$i" ;
done

根据需要生成结果。

其中，@(list) 代表 Matches one of the given patterns

另一个示例glob 匹配apple 中的*le*（或）orange 中的ge 将使用

for i in "${y[@]}"; do [[ $i == @(*le*|*ge*) ]] && echo "$i" ; done
apple tree
orange tree

对于您有问题的原始输入，

for i in "${y[@]}"; do [[ $i == @(*ban*|*ge*) ]] && echo "$i" ; done
banana tree
orange tree

---

对于 OP 将输入参数转换为 glob 模式的要求，由 | 分隔，需要额外的一行来解析位置参数，具体取决于计数，

#!/bin/bash

shopt -s extglob

myStr=$'apple tree\nbanana tree\norange tree'
readarray -t y <<<"$myStr"

# if the argument count is more than 1, since the input arguments are 
# separated by ' ', replace them with `|` as required in the glob
# pattern

(($# > 1)) && args=$(printf "%s" "$*" | tr ' ' '|') || args="$*"

for i in "${y[@]}"; do
    [[ $i == @($args) ]] && echo "$i" ;
done

现在你可以运行脚本了

bash script.sh '*ge*' '*le*'
apple tree
orange tree

（或）只有一个论点，

bash script.sh '*ba*'
banana tree

Answer 2

我认为以下应该可以满足您的需要：

#!/bin/bash
while IFS= read -r line
do
  for pattern in "$@"
  do
    if
      [[ $line = $pattern ]]
    then
      echo "$line"
      break
    fi
  done
done

这会逐行读取标准输入（因此适用于“流式”应用程序或非常大的文件）。在 Bash 条件 ([[ ]]) 中，相等比较（以及 !=）执行 glob 类型匹配，除非右边的字符串被引用。

Answer 3

从grep 的速度中受益的一种方法是将模式转换为正则表达式。

试试这个：

#!/bin/bash
glob_to_regex()
{
  local regex=$1
  regex=${regex//\./\\.}
  regex=${regex/\\/\\\\}
  regex=${regex//\*/.*}
  regex=${regex//\?/.}
  printf %s "^$regex$"
}

regex_from_args()
{
local arg
local not_first=
for arg in "$@"
do
  [[ $not_first ]] && printf %s "|"
  not_first=1
  glob_to_regex "$arg"
done
}

egrep "$(regex_from_args "$@")"