【发布时间】:2015-02-18 13:36:44
【问题描述】:
是否有可能在 ftp:// URL 上发送 HTTP 标头?我该怎么办?
我想要的是基于 HTTP 的爬虫在人类用户看到纯 FTP 内容时看到 HTML 响应(在标题中)。
解决这个问题最聪明的方法是什么?我考虑过用户代理特定的重定向,但这似乎违反了大多数搜索引擎的准则。
我想要的是让机器人索引内容的 HTTP 版本,而普通用户可以访问 FTP 版本,同时使用单个 ftp:// URL。
这可行吗?
【问题讨论】:
-
不,这是不可行的。 HTTP 是 HTTP,FTP 是 FTP。 FTP 没有标头。为什么不总是使用 HTTP?
-
不幸的是,有些人需要 FTP。是否有可能以某种方式在 FTP URL 上嵌入 HTML?
标签: http redirect ftp http-headers