symfony 2 dom 爬虫循环并获取链接

Question

我正在尝试传递 html，以便找到标题和链接。目前我可以同时获得所有的标题，当我真的想一个一个地循环浏览它们时。我也无法获得链接，方法 link();当我硬编码链接的实际名称时的方法返回，错误

          Current URI must be an absolute URL ("").

我需要一个 foreach 循环并获取标题和链接的东西，代码如下，请帮帮我

    $html <<<<ol>
        <li
              class="first-child ol1">
              <a href="http://link1"
               class="story">
               <span class="livestats-icon livestats-1">1:</span>  Skywatchers await solar eclipse</a>
                                </li>
                                            <li
                                              class="ol2">
                                              <a
                                                href="http://link2"
                                                class="story">
                                                <span
                                                  class="livestats-icon livestats-2">2: </span>Indians caught 'cheating' in exams</a>
                                            </li>
                                            <li
                                              class="ol3">
                                              <a
                                                href="http://link3"
                                                class="story">
                                                <span
                                                  class="livestats-icon  livestats-3">3: </span>Hunting for Prince's vault</a>
                                            </li>
                                                            </ol>>>>html
  $crawler = new Crawler($html);

 $message = $crawler->filterXPath('//ol')->text();

print_r($message);



$link = $crawler->selectLink('1: Skywatchers await solar eclipse')->link();


 print_r($link);     

Answer 1

您可以使用过滤器并使用 css 选择器选择您的链接，例如：

$links = $crawler->filter('a')->links();

这将选择您拥有的所有 a 标签，如果您想要特定的标签，则需要一种方法来选择它们，如果您不这样做，然后将 css 类添加到您需要选择的标签中：

$links = $crawler->filter('.myclass')->links());

它将返回链接数组。

编辑：

真的只是尝试了你的代码，你需要一个 URI，因为错误说...我认为它在其他地方失败了，但它在爬虫构造中失败了...

$crawler = new Crawler($html, 'http'); //http is not a valid uri obviously but it does the trick if you dont need the uri.

Answer 2

您收到的错误实际上是从 Symfony\DomCrawler\Link constructor 中抛出的 InvalidArgumentException。这意味着您提供给selectLink() 方法的值不是API 中看到的有效名称：

按名称或 alt 值选择可点击图像的链接。

DomCrawler 确实有 links() 方法，根据 API Documentation 将：

返回列表中节点的 Link 对象数组。