如何使用 Python 在 Selenium 中刮取值？

Question

我正在尝试使用 css 选择器刮取选项标签中的值，但我不能：

我想抓取选项标签中的值属性，例如<option value='i want to scrape this'>text</option>

这是另一个屏幕截图，以便您更好地理解：

在选项标签中我想抓取值而不是文本

你可以看到这里是选项值截图：

我也想在这里抓取值：

这是我的代码：

cur = driver.find_elements_by_css_selector('#id_currency')
country = driver.find_elements_by_css_selector('search-form-place-country')
items = len(cur)

with open('cur.csv','w') as s:
    for i in range(items):
        s.write(cur[i].text + ',' + country[i].text + '\n')

任何帮助将不胜感激

谢谢！

Answer 1

使用Select 类，它专门用于<select> 下拉菜单

from selenium.webdriver.support.select import Select

dropDown = driver.find_element_by_id('search-form-place-country')
select = Select(dropDown)
with open('cur.csv','w') as s:
    for option in select.options:
        s.write(option.get_attribute('value') + '\n')

Answer 2

要使用css-selectors 提取<option> 标记中的值，您可以使用以下Locator Strategy：

from selenium import webdriver
from selenium.webdriver.support.ui import Select

select_places = Select(driver.find_element_by_css_selector("select.search-form-place.select.form-control"))
for option in select_places.options:
    print(option.get_attribute("value"))  

Answer 3

只需根据选项标签选择它们。

country= driver.find_elements_by_css_selector('option')

新的 for 循环：

    for i in range(items):
        s.write(cur[i].text + ',' + country[i].get_attribute["value"] + '\n')