WebClient.OpenRead 异常：“值不能为空。”

Question

我正在开发一种抓取器，它可以抓取一个网页的链接，然后创建执行线程 子页面的抓取。

这是线程的作用：

Dim client As New WebClient()
Dim stream As Stream = client.OpenRead(_Address)
Dim streamReader As New StreamReader(stream, True)
_Content = streamReader.ReadToEnd()
streamReader.Close()
streamReader.Dispose()
stream.Close()
stream.Dispose()
client.Dispose()

我注意到有时（通常当有更多同时运行的线程时）线程会引发异常。它是随机发生的，异常在client.OpenRead 处抛出，它说"Value cannot be null. Parameter name: address"。我这里也有一个 try..catch，所以我在 catch 块中放置了一个断点，看起来 _Address 在当时是有效的，但代码会引发异常。

_Address 是受保护的类字段，其他线程无法访问。

确切的信息是：

“值不能为空。参数名称：地址”。

例外是System.ArgumentNullException。

堆栈跟踪是：

在 MyAppFolder\Scraper.vb:line 96 中的 MyAppName.Scraper.Scrape() 处的 System.Net.WebClient.OpenRead(String address)

您对解决此问题有什么建议吗？ 提前谢谢你。

Answer 1

WebClient.OpenRead(string address) 的内部实现只是：

public Stream OpenRead(string address)
{
    if (address == null)
    {
        throw new ArgumentNullException("address");
    }
    return this.OpenRead(this.GetUri(address));
}

所以_Address在传入时必须为null。

不妨试试这样的：

private string _address;
private string _Address
{
    get
    {
        if(_address == null)
            throw new ArgumentNullException("_Address was never set and is still null!");
        return _address;
    }
    set
    {
        if(value == null)
            throw new ArgumentNullException("_Address can not be null!");
        _address = value;
    }
}

所以基本上如果有东西试图将_Address设置为null，当它发生时你会得到一个错误，并且可以在调用堆栈中看到它被设置为null的位置。