在 Selenium 中快速获取表格的文本

Question

我正在尝试使用 Selenium 将表中的许多列解析为字典，但我所拥有的似乎很慢。我正在使用 python、Selenium 2.0 和 webdriver.Chrome()

table = self.driver.find_element_by_id("thetable")
    # now get all the TR elements from the table
    all_rows = table.find_elements_by_tag_name("tr")

    # and iterate over them, getting the cells
    for row in all_rows:
        cells = row.find_elements_by_tag_name("td")
        # slowwwwwwwwwwwwww
        dict_value = {'0th': cells[0].text,
                 '1st': cells[1].text,
                 '2nd': cells[2].text,
                 '3rd': cells[3].text,
                 '6th': cells[6].text,
                 '7th': cells[7].text,
                 '10th': cells[10].text}

问题似乎在于获取每个 td 元素的“文本”属性。有更快的方法吗？

Answer 1

另一种选择。

如果稍后（循环之后），您不需要 selenium 为您提供的交互性 - 您可以将页面的当前HTML source code 传递给以速度着称的lxml.html。示例：

import lxml.html

root = lxml.html.fromstring(driver.page_source)
for row in root.xpath('.//table[@id="thetable"]//tr'):
    cells = row.xpath('.//td/text()')
    dict_value = {'0th': cells[0],
                  '1st': cells[1],
                  '2nd': cells[2],
                  '3rd': cells[3],
                  '6th': cells[6],
                  '7th': cells[7],
                  '10th': cells[10]}