为什么我的代码只抓取第一条记录？

Question

我的代码进入一个网站，点击导致下拉的记录。

我当前的代码只打印第一个下拉记录，而不打印其他记录。

例如，网页的第一条记录被点击时，下拉1条记录。该记录显示为附件。这也是第一个也是唯一一个作为我的输出打印的下拉记录。

代码打印这个

如何让它拉出所有下拉标题？

from selenium import webdriver
import time
driver = webdriver.Chrome()


for x in range (1,2):
    driver.get(f'https://library.iaslc.org/conference-program?product_id=24&author=&category=&date=&session_type=&session=&presentation=&keyword=&available=&cme=&page={x}')
    time.sleep(4)
    productlist_length = len(driver.find_elements_by_xpath("//div[@class='accordin_title']"))
    
for i in range(1, productlist_length + 1):

        product = driver.find_element_by_xpath("(//div[@class='accordin_title'])[" + str(i) + "]")
        title = product.find_element_by_xpath('.//h4').text.strip()
        print(title)

        buttonToClick = product.find_element_by_xpath('.//div[@class="sign"]')
        buttonToClick.click()
        time.sleep(5)

        subProduct=driver.find_element_by_xpath(".//li[@class='sub_accordin_presentation']")
        otherTitle=subProduct.find_element_by_xpath('.//h4').text.strip()
        print(otherTitle)

Answer 1

你根本不需要硒。不确定您所追求的所有信息是什么，但以下内容向您展示了这些扩展块内的内容可用，并带有来自简单的requests.get() 的响应。：

import requests
from bs4 import BeautifulSoup as bs
import re

r = requests.get('https://library.iaslc.org/conference-program?product_id=24&author=&category=&date=&session_type=&session=&presentation=&keyword=&available=&cme=&page=1')
soup = bs(r.text, 'lxml')
sessions = soup.select('#accordin > ul > li')

for session in sessions:
    print(session.select_one('h4').text)
    sub_session = session.select('.sub_accordin_presentation')
    if sub_session:
        print([re.sub(r'[\n\s]+', ' ', i.text) for i in sub_session])
    print()
    print()

Answer 2

试试：

productlist_length = len(driver.find_elements_by_xpath('//*[@class="jscroll-inner"]/ul/li'))
for product in productlist_length:
    title = product.find_element_by_xpath('(.//*[@class="accordin_title"]/div)[3]/h4').text