无法为 re.compile 定义正则表达式并将其传递给 Beautifulsoup

Question

目前我正在练习使用python访问网络的基本概念。我正在关注 YouTube 上的教程，并被引导到以下代码。

from urllib2 import urlopen,  HTTPError
from BeautifulSoup import BeautifulSoup
import re


url="http://getbusinessreviews.org/"
try:
   webpage = urlopen(url).read
except HTTPError, e:  
    if e.code == 404:
        e.msg = 'data not found on remote: %s' % e.msg
    raise
pathFinderTitle = re.compile('<h2 class="entry-title"><a href.* rel="bookmark">(.*)</a></h2>')
if  webpage:
    if pathFinderTitle:
        findPathTitle = re.findall(pathFinderTitle,webpage)
    else:
        print "unable to get path finder title"

else:
    print "unable to url open "
listIterator =[]
listIterator[:]= range(2,10)

for i in listIterator:
    print findPathTitle[i]

我想从以下 HTML 中提取“Nutracoster”

        <h2 class="entry-title">

            <a href="http://getbusinessreviews.org/nutracoster/" rel="bookmark">Nutracoster</a>

        </h2>

我有两个问题

1. 目前我没有得到任何结果，谁能指导我我做错了什么？（我想我的正则表达式没有明确定义）

2. 如何将此正则表达式传递给 Beautifulsoup？

由于我处于学习阶段，因此提前感谢任何愚蠢的错误：D

Answer 1

Beautiful Soup 不需要使用正则表达式来选择元素：它可以自行提取所有具有特定属性的<h2> 标签。

此外，最好不要使用正则表达式来解析 HTML（参见 popular question）。

试试这个小sn-p代码：

from bs4 import BeautifulSoup as BS
from urllib2 import urlopen, HTTPError, URLError

url = "http://getbusinessreviews.org/"
try:
    webpage = urlopen(url)
except HTTPError, e:
    if e.code == 404:
        e.msg = 'data not found on remote: %s' % e.msg
    raise
except URLError, e:
    print e.args

soup = BS(webpage, 'lxml')

## Relevant lines ##
for h2 in soup.find_all("h2", attrs={"class": "entry-title"}):
    print h2.text