logfile-analysis

1热度

5回答

我有一个包含数十万行的日志文件。我正在通过这些行循环查找具有某些特定文本的任何行，例如：!!event!!。然后，一旦找到!!event!!行，我需要继续循环此行!!event!!，直到找到接下来的3行包含自己的特定文本('flag1', 'flag2', and 'flag3')。一旦我找到第三行('flag3')，然后我想继续循环下一行!!event!!行并重复前一个过程，直到没有更多事

4热度

1回答

大厦索引文件在Perl

我目前新Perl和我在一个偶然的问题：我的任务是创建一个简单的方法来访问线Perl中的大文件时，最快的方式可能。我创建了一个由500万行组成的文件，在每一行上都有该行的编号。我已经创建了我的主程序，它需要能够打印给定行的任何内容。要做到这一点，我使用两种方法，我发现在互联网上： use Config qw(%Config); my $off_t = $Config{lseeksize}

0热度

1回答

亚马逊S3访问日志文件错误值»字节发送«

分析我们的S3访问日志文件我注意到，S3访问日志文件（S3stat和自己的日志文件分析）中“每月数据传输”的值是与账单中的价值有很大的不同。现在我做了一个测试，从我们的一个桶中下载文件，它看起来像访问日志文件不正确。在2015年2月3日我上传了一个zip文件到我们的存储桶，然后用两个不同的互联网连接成功下载了完整的文件。一天后在04/02/2015我分析了日志文件。不幸的是，这两个条目在“发

10热度

3回答

使用py2exe创建的exe不起作用，并返回错误日志文件

这是我的第一篇文章，所以对我来说很容易。我的问题与此处类似，但我无法使其工作，但我真的尝试过： “py2exe with enthought and pandas”。在分别安装了两个版本的python（x84-64，x32）和库之后，我开始使用py2exe制作python脚本的可执行文件。我不得不下载缺少的dll文件：msvcp90.dll，libiomp5md.dll，libifcoremd

0热度

1回答

使用并行工作人员生成的日志文件的工具（例如，通过构建系统）

我们有一个构建系统，它将并行工作人员的日志写入同一文件。我正在寻找使用这种类型的日志来简化生活的工具。此日志文件中的每行都是任意文本sting，从工作人员id开始。例如： - 11> compiling my.cpp 14> compiling your.cpp 7> ***starting linking*** 7> Linking project CoreEngine... 14>

8热度

3回答

将很多行绘制为热图

我有大量（〜1000）来自我正在尝试处理的数据记录器的文件。如果我想使用 plot(timevalues,datavalues) 我希望能够查看所有这些线路在同一时间以同样的方式绘制从这些日志文件，我可以做一个单一的一个趋势以及示波器如何具有“持续”模式。我也许可以凑齐的东西，使用直方图，但我希望有预先存在的或更优雅的解决这个问题。

2热度

3回答

通过正则表达式解析大文件的最佳方法python

我必须在python中使用reg ex解析大型日志文件（2GB）。在日志文件中，正则表达式匹配我感兴趣的行。日志文件也可能有不需要的数据。这里是从文件的样品： "#DEBUG:: BFM [L4] 5.4401e+08ps MSG DIR:TX SCB_CB TYPE:DATA_REQ CPortID:'h8 SIZE:'d20 NumSeg:'h0001 Msg_Id:'h00000000"

2热度

1回答

解析带空格的日志文件

我想解析一个logfile（文本文件保存为*.log文件）到Visual Basic 2013 Express'DataGridView。日志文件使用空格作为分隔符，但日志的消息部分在其中包含空格。这里是日志文件的布局：日期时间的ID连接Type_of_message（命令/响应/状态/等）消息（可能包括多个空间（不是空格相同量每消息））每个日志条目都是文件中的单独一行。编辑：这里是an

2热度

2回答

解析gzip压缩日志文件一行行内焦油gzip压缩文件

我有以下结构日志文件： /var/log/2013-12-24.tar.gz 这个文件有： 2013年12月24日/ {00,01,02 ...... 23} .log.gz文件我需要分析这些文件，使用Python，，而不在磁盘上提取任何文件OR内存有什么建议吗？

1热度

1回答

Apache日志格式：“％{c} a”是什么意思？

我一直负责解析Apache Web日志文件以将数据提取到另一种格式。客户向我提供格式行，其中包含指令“％{c} a”。虽然我可以找到“％a”（远程IP地址）的定义，但我找不到任何有关括号内部分含义的参考。有人认出来，让我知道它代表什么？