我似乎无法从网络上抓取 href 或文本

Question

我尝试了各种方法，包括通过完整的 xpath 搜索和通过类查找，然后通过 a 标签搜索 href。我已经做了好几个小时了，但我似乎无法理解。任何帮助将不胜感激。

from selenium import webdriver 
import time
namelist=[]
driver=webdriver.Chrome()
driver.get("https://waxpeer.com/")
time.sleep(15)

当我使用 .text 时它不起作用

search=driver.find_elements_by_xpath('//*[@id="container"]/div/div/a')
print(search)
namelist.append(search)

Answer 1

嘿，你可以使用time 模块延迟加载元素，以便它可以找到关联标签

正如你在这段代码中提到的，你可以从div标签container中提取href链接

代码：

from selenium import webdriver 
import time
path="C:\Program Files (x86)\chromedriver.exe"
driver=webdriver.Chrome(path)
driver.get("https://waxpeer.com/")
time.sleep(10)
main_div=driver.find_elements_by_xpath('//*[@id="container"]')
for divs in main_div:
    links=div.find_elements_by_tag_name("a")
    for link in links:
        print(link.get_attribute('href'))

输出：

https://waxpeer.com/sport-gloves-vice-field-tested/item/21642893513 ...