【发布时间】:2014-07-23 04:26:59
【问题描述】:
我不确定这是否是正确的问题,但我正在 Windows Azure 上运行一个网站。在那个网站上,我正在展示我通过数据抓取收集的数据,目前我使用的是单一来源。我的目标是让一个工作线程在我的网站之外运行,它会定期重新抓取并更新数据库。目前阻碍我的是我的服务器应用程序(工作线程)正在向另一台服务器发出 500 多个请求,其中包含所有数据。我是否可以设置一些东西来使请求通过代理或其他东西,这样我就不会因为从单个 ip 发出许多请求而被拒绝访问?
【问题讨论】: