如何访问网页内容

Question

我将网页的文本存储在字符串中。但是网页的某些内容没有存储在字符串中。我不知道为什么不存储类似 div 的元素中的内容。即使是 div 内的链接也无法使用我实现的网络爬虫访问。谁能帮我解决这个问题！！！。

 List<String> tags = new ArrayList<String>();
for(int i=0;i<8;i++)
{
Document doc = Jsoup.connect("some link here").get();
Elements taglinks = doc.select("html");
for (Element link : taglinks) {
tags.add(link.text());}
System.out.println(tags);

Answer 1

您的问题不够清楚，但从您的代码中，我了解到您正在寻找，保存链接的文本并使用您必须使用的 .select() 语法 doc.select("a[href"]); 然后你可以使用你当前的 for 循环。