雪花图案的正则表达式

Question

我在s3 存储桶中有一个文件列表，如下所示。我只想加载当前日期文件，例如， 我想获取 2020/06/09 下的所有 file_a.csv，同样获取相同 2020/06/09 下的所有 file_b.csv

我尝试了语法，但这让我得到了所有日期的所有文件 select metadata$filename from @stage/snflk/ts/(file_format=>CSV_SKIP_HEADER,pattern=>'.*/file_a.*[.]csv')

snflk/ts/ts-prod/2020/06/08/file_a.csv
snflk/ts/ts-prod/2020/06/09/file_a.csv
snflk/ts/ts-prod3/2020/06/08/file_a.csv
snflk/ts/ts-prod3/2020/06/09/file_a.csv
snflk/ts/ts-prod2/2020/06/08/file_a.csv
snflk/ts/ts-prod2/2020/06/09/file_a.csv
snflk/ts/ts-prod/2020/06/08/file_b.csv
snflk/ts/ts-prod/2020/06/09/file_b.csv
snflk/ts/ts-prod3/2020/06/08/file_b.csv
snflk/ts/ts-prod3/2020/06/09/file_b.csv
snflk/ts/ts-prod2/2020/06/08/file_b.csv
snflk/ts/ts-prod2/2020/06/09/file_b.csv

Answer 1

我只想加载当前日期文件

.*/file_a.*[.]csv

这会得到我所有日期的所有文件

此处开头提供的模式 (.*) 是一个通配符，它​​将匹配所有可用的内容。

如果您需要将日期限制为常量值，请在regular expression pattern 中指定常量值（即ts-prod.*/2020/06/09/file_a\.csv、ts-prod.*/2020/06/09/file_b\.csv 等）：

select
  metadata$filename
from @stage/snflk/ts/
(pattern=>'ts-prod.*/2020/06/09/file_a\.csv');

要迭代地测试和编写您的正则表达式模式，您可以使用Regex101、RegExr 等网络工具。

P.s.如果您尝试自动执行此操作，您也可以将模式构造为use the current date dynamically：

-- Produces 'ts-prod.*/2020/06/11/file_a\.csv'
SET curr_dt_a=(
  SELECT 
    'ts-prod.*/' || 
    TO_VARCHAR(CURRENT_DATE(), 'YYYY/MM/DD') || 
    '/file_a\\.csv'
)

-- Referenced as a SQL variable in the PATTERN option
SELECT
  metadata$filename
FROM @stage/snflk/ts/
(PATTERN=>$curr_dt_a);