管理大型日志文件

Question

4

我们有一个持续爬取目标网站的爬虫，但是它的日志文件非常大。在某些情况下超过了1GB，我不太想删除或覆盖它们。你有没有处理大型日志文件的示例？

- HyderA

2

定义“管理”：读取、追加、归档、压缩、日志少量、... - janmoesen

2个回答

1

您也可以使用log4net、log4j或其他日志框架，这些框架会根据文件大小或日期自动更改文件名。http://logging.apache.org/log4net/

- Matt Watson

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- nikc.org · Accepted Answer

使用cron脚本每天轮换日志文件。基本上，您将logfile.log重命名为logfile-YYYY-MM-DD.log。这样，您不再拥有一个巨大的日志文件，而是有了更小的文件，并且能够轻松查找某个时间段内记录的消息。如果您还压缩轮换的日志文件，您将节省更多的磁盘空间。