2010-06-28 71 views
3

我们有一个抓取工具,可持续抓取我们的目标站点,它的日志文件变得相当庞大。在某些情况下超过1 GB,我不太愿意删除或覆盖它们。您如何管理大型日志文件的任何示例?管理大型日志文件

+2

定义“管理”:读取,尾部,归档,压缩,日志较少,... – janmoesen 2010-06-28 06:56:27

回答

5

使用cron脚本来每日轮换日志文件。基本上,您将您的logfile.log重命名为logfile-YYYY-MM-DD.log。这样,而不是一个巨大的日志文件,你有更小的日志文件,并能够从一定时间段轻松地找到记录的消息。如果您还压缩旋转的日志,则会节省更多的磁盘空间。

+2

检出日志旋转文档:http://gd.tuwien.ac.at/linuxcommand.org/man_pages/logrotate8。 HTML。这是一个标准的工具。 – 2010-06-28 07:05:14