file_get_contents 不适用于某些域

Question

作为要求的一部分，我需要查明域是否已停放。由于没有有效的方法来找出这一点，我将检查 DOM 中是否存在“购买此域”、“可能出售”等短语。

我发现了一些可以通过浏览器访问的托管域，但无法使用file_get_contents获取它们。

例子

$url = 'http://buythisdomain.com/'
$get = file_get_contents($url);

对于上面的输出，得到以下消息。

警告：file_get_contents(http://buythisdomain.com/)：打开流失败：HTTP 请求失败！

但可以通过浏览器访问相同的 URL。我也尝试了fopen 方法，但结果相同。有什么方法可以实现吗？

Answer 1

许多网站，不仅是停放的域名，都使用某种机制来阻止没有有效浏览器标头的基本请求。

尝试使用像这样的浏览器发送所需标头的流上下文

$url = "http://buythisdomain.com/"
$context = stream_context_create(array(
    'http' => array(
        'method' => "GET",
        'header' =>
            "Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8\r\n" .
            "Accept-Language: en-US,en;q=0.8\r\n".
            "Keep-Alive: timeout=3, max=10\r\n",
            "Connection: keep-alive",
        'user_agent' => "User-Agent: Mozilla/5.0 (Windows NT 6.1) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.66 Safari/535.11",
        "ignore_errors" => true,
        "timeout" => 3
    )
));
file_get_contents($url, false, $context);