sed 替代变量包含换行符（保留它）

Question

我有一个多行字符串，从网上下载的：

toast the lemonade
blend with the lemonade
add one tablespoon of the lemonade
grill the spring onions
add the lemonade
add the raisins to the saucepan
rinse the horseradish sauce

我已将此分配给$INPUT，如下所示：

INPUT=$(lynx --dump 'http://example.net/recipes' \
     | python -m json.tool \
     | awk '/steps/,/]/' \
     | egrep -v "steps|]" \
     | sed 's/[",]\|^ *//g; $d')

此时，$INPUT 已准备好替换到我的目标文件中，如下所示：

sed -i "0,/OLDINPUT/s//$INPUT/" /home/test_file

当然，sed 抱怨一个未终止的s 命令——这就是问题所在。

我正在使用的当前解决方法是在将其提供给 sed 之前将 echo $INPUT 发送给 echo $INPUT，但随后不会保留换行符。 echo 去除换行符 - 这就是问题所在。

正确的输出应该保持它的换行符。如何指示 sed 保留换行符？

Answer 1

直接的答案是用\n 替换所有换行符，您可以通过添加来做到这一点

| sed ':a $!{N; ba}; s/\n/\\n/g'

到上面的长命令。一个更好的答案是使用 awk 代替，因为将 shell 变量替换为代码总是一个坏主意，并且使用 sed 你别无选择：

awk -i inplace -v input="$INPUT" 'NR == 1, /OLDINPUT/ { sub(/OLDINPUT/, input) } 1' /home/test_file

-i inplace 需要 GNU awk 4.1.0 或更高版本。

Answer 2

如果您使用的是 Bash，则可以将 \n 替换为换行符：

INPUT="${INPUT//
/\\n}"

如果您不喜欢参数扩展中的文字换行符，您可能更喜欢

INPUT="${INPUT//$'\n'/\\n}"

旁注 - 您可能的意思是 change 匹配的行到您的输入，而不是 substitute 每个。在这种情况下，你不想引用换行符，毕竟......

Answer 3

清理你的代码一些。

这个：

lynx --dump 'http://somesite.net/recipes' | python -m json.tool | awk '/steps/,/]/' | egrep -v "steps|]" | sed 's/"//g' |sed 's/,//g' | sed 's/^ *//g' | sed '$d'

可以用这个代替：

lynx --dump 'http://somesite.net/recipes' | python -m json.tool | awk '/]/ {f=0} f {if (c--) print line} /steps/{f=1} {gsub(/[",]|^ */,"");line=$0}'

它可能会更短，但我现在不知道这是做什么的：python -m json.tool

这个：

awk '/]/ {f=0} f {if (c--) print line} /steps/{f=1} {gsub(/[",]|^ */,"");line=$0}'

做：

1. 将模式steps 之后的行打印到] 之前的行 - awk '/steps/,/]/' | egrep -v "steps|]"
2. 删除"、, 和所有行前的所有空格。 - sed 's/"//g' |sed 's/,//g' | sed 's/^ *//g'
3. 然后删除该组的最后一行。 - sed '$d'

---

例子：

cat file
my data
steps data
 more
 do not delet this
hei "you" , more data
extra line
here is end ]
this is good

awk '/]/ {f=0} f {if (c--) print line} /steps/{f=1} {gsub(/[",]|^ */,"");line=$0}' file
more
do not delet this
hei you  more data

Answer 4

假设您的输入 JSON 片段如下所示：

{ "other": "random stuff",
  "steps": [
    "toast the lemonade",
    "blend with the lemonade",
    "add one tablespoon of the lemonade",
    "grill the spring onions",
    "add the lemonade",
    "add the raisins to the saucepan",
    "rinse the horseradish sauce"
  ],
  "still": "yet more stuff" }

您可以只提取steps 成员

jq -r .steps

要将其插入到sed 语句中，您需要转义结果中的任何正则表达式元字符。从标准输入读取静态文本是一个不那么令人生畏并且希望稍微不那么骇人听闻的解决方案：

lynx ... | jq ... |
sed -i -e '/OLDINPUT/{s///; r /dev/stdin' -e '}' /home/test_file

教育从业人员使用结构感知工具来处理结构化数据的努力已达到epic 的高度，并且有增无减。在您决定使用快速而肮脏的方法之前，至少要确保您了解危险（技术和心理）。

Answer 5

您需要使用编辑器而不是 sed 的替换：

$ input="toast the lemonade
blend with the lemonade
add one tablespoon of the lemonade
grill the spring onions
add the lemonade
add the raisins to the saucepan
rinse the horseradish sauce"

$ seq 10 > file

$ ed file <<END
1,/5/d
1i
$input
.
w
q
END

$ cat file
toast the lemonade
blend with the lemonade
add one tablespoon of the lemonade
grill the spring onions
add the lemonade
add the raisins to the saucepan
rinse the horseradish sauce
6
7
8
9
10