在 pig 脚本中执行 shell 命令时出错

【问题标题】：Error executing shell command in pig script在 pig 脚本中执行 shell 命令时出错
【发布时间】：2012-07-20 21:00:49
【问题描述】：

我有一个猪脚本，一开始我想从某个日期生成过去 7 天的日期字符串（后来用于检索那些日子的日志文件）。我试图用这条线做到这一点： %声明 CMD7 input= ; for i in {1..6}; do d=$(date -d "$DATE -i days" "+%Y-%m-%d"); input="\$input\$d,"; done; echo \$input

我收到一个错误： " 错误 2999: 意外的内部错误。执行 shell 命令时出错: input= ; for i in {1..6}; do d=$(date -d "2012-07-10 -i days" "+%Y-% m-%d"); input="$input$d,"; done;. 命令退出，退出代码为 127"
但是 shell 命令在 pig 之外运行得非常好。我真的不确定这里出了什么问题。

谢谢！

【问题讨论】：

标签： apache-pig

【解决方案1】：

我有一个可行的解决方案，但不像你想要的那样精简，基本上我没有设法让 Pig 在声明中执行复杂的 shell 语句。

我首先编写了一个 shell 脚本（我们称之为 6-days-back-from.sh）：

#!/bin/bash
DATE=$1
for i in {1..6}; do d=$( date -d "$DATE -$i days" +%F ) ; echo -n "$d "; done

然后是一个猪脚本如下（我们称之为days.pig）：

%declare my_date `./6-days-back-from.sh $DATE`
A = LOAD 'dual' USING PigStorage();
B = FOREACH A GENERATE '$my_date';
DUMP B

请注意，dual 是一个包含单行文本的文本文件的目录，用于显示我们的变量

我将脚本调用如下：

pig -x local -param DATE="2012-08-03" days.pig

得到以下输出：

({(2012-08-02),(2012-08-01),(2012-07-31),(2012-07-30),(2012-07-29),(2012-07-28)})

【讨论】：