CloudFront 热门引荐来源报告 - 所有引荐来源网址答案

【问题标题】：CloudFront Top Referrers Report - ALL referrer URLsCloudFront 热门引荐来源报告 - 所有引荐来源网址
【发布时间】：2018-08-10 12:30:55
【问题描述】：

在 AWS 中我可以找到：

Cloudfront >> 报告和分析 >> 热门推荐人 (CloudFront Top Referrers Report)

我得到了 top25 项。我怎样才能获得全部？

我已在我的存储桶中打开日志记录，但似乎引用者不是日志文件的一部分。知道亚马逊如何收集其 top25 以及我如何据此获得整个列表吗？

提前感谢您的帮助。

【问题讨论】：

日志中的referer是column 10。列名称为cs(Referer)，当请求中不存在引用标头时（iirc）显示为-。
谢谢你，Michael - sqlbot。这些天将尝试在 sql 上运行选择。我从日志中检查了几个随机样本，但没有找到 URL。我的想法也是，top25 列表中的那些顶级推荐人来自其他地方。会这样吗？

【解决方案1】：

如您所见，亚马逊的内置分析功能相当基础。您要查找的所有数据都存在于日志文件中，您可以设置 cloudfront 以导出（在 cs(Referer) 字段中）。如果您知道自己在寻找什么，您可以设置一个小管道来下载日志、提取您关心的数字并生成报告。

Amazon 还可以轻松 [1] 设置 Athena 或 Redshift 以直接查看其目标存储桶中的 Cloudfront 或 S3 日志文件。一次性设置后，您可以直接向他们查询您需要的号码。

还构建了付费服务来填补亚马逊默认报告中的漏洞。例如，S3stat (https://www.s3stat.com/) 会在其报告中为您提供 Top 200 Referrer 列表，并能够导出完整列表。

[1]“easy”，用亚马逊对这个词的定义，意思是真的真的很难。

【讨论】：