页面存在但内容为 404 错误（想使用 Selenium 获取图像）

Question

我想使用 Selenium webdriver 从this site 下载图片

每天都会创建一个新页面，在这个新页面上，图像将在下午 6 点左右上传到它。

url = 'http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021'
driver.get(url)
images = driver.find_elements_by_tag_name('img')

for image in images:
  print(image.get_attribute('src'))

当我运行代码时，即使在常规浏览器中看不到图像（下午 6 点之前），使用 selenium 我仍然可以获得这些图像 url 的列表，

# sample output from code
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/ukk-KlusterBaruHarian9.jpg
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/ukk-KlusterBaruHarian10.jpg
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/statskluster01.jpg
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/statskluster02.jpg
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/statskluster03.jpg
http://covid-19.moh.gov.my/terkini/2021/06/situasi-terkini-covid-19-di-malaysia-24062021/taburankes-all.jpg

img url 存在，但图像似乎出现 404 错误。

我什至可以在 img url 上使用 wget 来下载，但结果是一个空的/损坏的 img

谁能向我解释这些行为（我没有网络开发知识）以及如何绕过它？我只想在图像真的存在时才下载它。

Answer 1

这里有 2 个问题：

1. 您使用的 URL 加载非常缓慢甚至根本没有加载，这就是您收到 错误 404 的原因
2. 在执行images = driver.find_elements_by_tag_name('img') 之前，您必须等待/延迟才能让页面完全加载。
   UPD
   如果单击网页上的链接后出现错误 404，则表示该链接已损坏或存在其他服务器端问题。它不是由错误的 Selenium 代码引起的。只是该网站存在一些问题。