想要处理大型 appengine 日志文件

Question

我在谷歌应用程序引擎上运行我的应用程序.....由于交通繁忙，我的日志文件很大 日志文件如下所示

122.167.221.243 - - [06/Mar/2012:01:11:29 -0800] "GET /Bengali/enable HTTP/1.1" 404 0 "http://www.epicsearch.in/" -
---Similar rows ---- below

我想处理它们以获得有意义的统计信息，例如否。唯一的 IP 地址或没有。给定页面上的点击次数...... 我是初学者所以不知道该怎么做！！！！！！

Answer 1

假设您还没有这样做，您首先要做的是使用appcfg.py 实用程序download your App Engine logs，例如：

appcfg.py --num_days=5 request_logs appname/ logs.txt

下载后，您必须编写一个脚本或程序来解析您的日志以获取您认为有用的任何信息。

This Stack Overflow 问题可能是一个很好的起点——实际上任何体面的脚本语言都应该能够为您充分解析这些日志。