通过 PHP 从其他网站抓取 iframe 视频答案

【问题标题】：Scraping iframe video from other sites through PHP通过 PHP 从其他网站抓取 iframe 视频
【发布时间】：2014-10-31 14:57:49
【问题描述】：

我想将其他网站的视频抓取到我的网站（例如，从直播视频网站）。

如何从其他网站抓取<iframe> 视频？和抓取图片的过程一样吗？

$html = file_get_contents('http://website.com/');
$dom = new domDocument;
$dom->loadHTML($html);
$dom->preserveWhiteSpace = false;
$iframes = $dom->getElementsByTagName('frame');
foreach ($iframes as $iframe) {
  $pic = $iframe->getAttribute('src');
  echo '<li><frame src="'.$pic.'"';
}

【问题讨论】：

那么你的代码有什么问题？
打印很多或错误，没有视频刮掉

标签： php iframe video-streaming scraper webgrabber

【解决方案1】：

这篇文章有点老了，但仍然是我的答案：

我建议您使用 cURL 和 Xpath 来抓取站点并解析 HTML 数据。 file_get_content 存在一些安全问题，一些主机可能会禁用它。你可以这样做：

<?php
    function scrape($URL){
        //cURL options
        $options = Array(
                    CURLOPT_RETURNTRANSFER => TRUE, //return html data in string instead of printing it out on screen
                    CURLOPT_FOLLOWLOCATION => TRUE, //follow header('Location: location');
                    CURLOPT_CONNECTTIMEOUT => 60, //max time to try to connect to page
                    CURLOPT_HEADER => FALSE, //include header
                    CURLOPT_USERAGENT => "Mozilla/5.0 (X11; Linux x86_64; rv:21.0) Gecko/20100101 Firefox/21.0", //User Agent
                    CURLOPT_URL => $URL //SET THE URL
                    );

        $ch = curl_init($URL);//initialize a cURL session
        curl_setopt_array($ch, $options);//set the cURL options
        $data = curl_exec($ch);//execute cURL (the scraping)
        curl_close($ch);//close the cURL session

        return $data;
    }

    function parse(&$data, $query, &$dom){
        $Xpath = new DOMXpath($dom); //new Xpath object associated to the domDocument
        $result = $Xpath->query($query);//run the Xpath query through the HTML
        var_dump($result);
        return $result;
    }


    //new domDocument
    $dom = new DomDocument("1.0"); 

    //Scrape and parse
    $data = scrape('http://stream-tv-series.net/2013/02/22/new-girl-s1-e6-thanksgiving/'); //scrape the website
    @$dom->loadHTML($data); //load the html data to the dom

    $XpathQuery = '//iframe'; //Your Xpath query could look something like this
    $iframes = parse($data, $XpathQuery, $dom); //parse the HTML with Xpath

    foreach($iframes as $iframe){

        $src = $iframe->getAttribute('src'); //get the src attribute
        echo '<li><iframe src="' . $src . '"></iframe></li>'; //echo the iframes
    }
?>

以下是一些您可能会发现有用的链接：

卷曲：http://php.net/manual/fr/book.curl.php

Xpath：http://www.w3schools.com/xpath/

还有 php.net 上的 DomDocument 文档。我无法发布链接，我没有足够的声誉。

【讨论】：