【发布时间】:2019-11-15 09:30:37
【问题描述】:
我正在尝试使用 CodePen URL extensions 发出 HTTP 请求以接收 HTML part of any pen。
这在浏览器中运行良好,如果您将其复制到 F12 控制台并运行以下代码:
fetch("https://codepen.io/AdamDipinto/pen/MWWzgMa.html")
.then(x => x.text())
.then(x => console.log(x))
注意:如果我使用像 Fiddler 这样的代理,那么我会得到与我的 C# HTTP 示例相同的 403 'Please enable cookies' 响应
但是当我使用 HTTPClient 在我的 C# 应用程序中尝试它时,我得到一个 403 和一个页面返回说“请启用 cookie”。
这是.Net Fiddle to demo。
代码如下:
CookieContainer cookies = new CookieContainer();
HttpClientHandler handler = new HttpClientHandler();
handler.CookieContainer = cookies;
handler.UseCookies = true;
using(HttpClient client = new HttpClient(handler))
{
client.DefaultRequestHeaders.Add("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.97 Safari/537.36");
Uri site = new Uri("https://codepen.io/AdamDipinto/pen/MWWzgMa.html");
var response1 = client.SendAsync(new HttpRequestMessage(HttpMethod.Get,site)).Result;
var content = response1.Content.ReadAsStringAsync().Result;
Console.WriteLine(content);
}
注意:如果您在浏览器中使用
F12并检查 cookie,CodePen 会添加“codepen_session”cookie。
不知道是不是这个cookie是服务器不能在C'HttpClient例子里加,但在fetch例子里能加。
有什么想法吗?
谢谢
编辑
这个问题似乎与C# HttpClient blocked by Cloudflare 相似,我会自己联系 CodePen 并更新这个问题。
【问题讨论】:
-
请在您的问题中包含所有必要的代码,而不是在指向其他地方的某些链接后面。
-
.Net Fiddle 显示控制台输出,所以更有用 - 我会更新我的问题
-
@Longoon12000 我正在使用
handler.CookieContainer = cookies; handler.UseCookies = true;,我认为这样可以解决问题 - 也许限制太小了?
标签: c# http fetch dotnet-httpclient codepen