BeautifulSoup 无法提取元数据

Question

我正在尝试创建一个函数，该函数将从给定的 URL 中提取元关键字并将其返回。但是，无论我传递给它什么 URL，它总是会失败。

def GetKeywords(url):
  soup = BeautifulSoup(url)
  keywords = soup.findAll('meta', attrs={'name':re.compile("^keywords$", re.I)}) #Find all meta keywords on that page
  if len(keywords) == 0: #Check to see if that page has any meta keywords to begin with
    print "No meta keywords for: " + str(url)
    return -1
  else:  #If so then return them
    return keywords

Answer 1

BeautifulSoup 在哪里声明它将接受并获取 URL？

soup = BeautifulSoup(url)

抱歉，请自己阅读 BeautifulSoup 文档首先，而不是尝试和猜测 API 方法..

http://www.crummy.com/software/BeautifulSoup/documentation.html#Parsing 一个文档

你想要的可能是使用 Python 的 urllib2 模块来获取数据你自己 在将其输入 BeautifulSoup 之前，或者您查看类似 scrapy 模块的内容。