如何通过 shell 脚本抓取 URL？答案

【问题标题】：how crawl an URL through shell scripting?如何通过 shell 脚本抓取 URL？
【发布时间】：2017-06-30 07:30:30
【问题描述】：

我必须通过触发某个 URL 来检查服务器是否启动。我尝试使用 wget 命令，其中有一个响应，例如“已发送 HTTP 请求，等待响应... 200 OK” 即将到来，这表明服务器已启动并正在运行。但我无法返回状态以使其自动化。我有一个包含 10 个 URL 的列表，我必须让它自动检查所有 URL 是否正确响应。请帮忙。

【问题讨论】：

你应该看看How to Ask和minimal reproducible example
可以考虑使用 curl - stackoverflow.com/questions/6136022/…
运行命令后检查退出代码。非零值表示失败。

标签： shell scripting web-crawler

【解决方案1】：

这就是字面意思：

if curl https://example.com
then
    echo "up"
else
    echo "down"
fi

【讨论】：