如何在Windows上设置MongoDB日志轮换?

3
我有一个针对 mongod 的配置文件,我正在尝试设置日志轮转、日志文件大小和要保留的旧实例数量。
我已经按如下所示在配置文件中添加了 logRotate: rename:
systemLog:
  timeStampFormat: ctime
  destination: file
  logAppend: true
  logRotate: rename
  path: C:\Program Files\ApplicationName\logs\db.log

但我找不到任何文档或示例,显示如何在日志文件轮换之前指定最大大小以及保留多少旧实例。 此外,我不知道如何测试这个功能。 显然,您需要设置某种外部进程,以从操作系统发送SIGUSR1信号来触发轮换。 有什么想法吗?是否有人已经成功地做到了这一点?

1
你能帮忙而不是投票否定这个问题吗? - undefined
这并不是那么简单的事情,可以参考以下链接:https://stackoverflow.com/questions/67079426/mongo-log-rotation-does-not-work-on-windows、https://stackoverflow.com/questions/54206847/how-do-i-configure-mongodb-to-remove-old-log-files、https://stackoverflow.com/questions/38888470/how-to-rotate-log-automaticly-in-mongo-db/50860546#50860546,或者也许可以尝试使用https://sourceforge.net/projects/logrotatewin/files/。 - undefined
4个回答

0

Wernfried-Domscheit的帮助下,经过大量研究、数周的试错和挫折,我终于在Windows上找到了一个可行的解决方案。


前提条件
  • 您已经运行了一个带有配置文件mongod.cfg的MongoDB服务。
  • LogRotateWin已安装。这是一个第三方软件包,基于Unix实现来旋转日志文件。它提供了许多可定制的功能,如压缩、旋转应用时、旧文件删除等。您可以在LogRotateWin Configuration中找到完整的选项列表。
  • 基本了解Windows任务计划程序。
  • 非常基本的批处理文件知识。
1. 调整MongoDB服务的配置文件
  1. 停止服务
  2. 打开mongod.cfg并找到配置systemLog的代码行:
# where to write logging data. 
systemLog:
      destination: file
      logAppend: true
      path:  E:\MongoDB\Server\4.4\log\mongod.log
      logRotate: reopen

请确保覆盖您的 mongod.log 路径。同时,请确保设置了 logAppend: truelogRotate: reopen

  1. 删除当前的 mongod.log 文件
  2. 重新启动服务
2. 配置日志轮换配置

这是我的配置。您可以根据自己的需求进行自定义。但不要使用 copycopytruncatecreate,并且不要删除 postrotate 命令!

E:\MongoDB\Server\4.4\log\mongod.log {
  nocompress
  daily
  size 100m
  missingok
  rotate 50
  postrotate
    E:\logrotate\notify_mongodb_service.bat
  endscript
}

此配置每天或当日志大小超过100兆字节时,以未压缩的形式进行日志轮转。最多存储50个日志文件,旧文件将被删除。当轮转成功时,将执行postrotate脚本。

3. 创建notify_mongodb_service.bat文件

此文件向MongoDB服务发送一个命令,表示将使用一个新文件。如果启用了授权,您还可以添加-u username -p password

E:\MongoDB\Server\4.4\bin\mongo.exe --eval "db.adminCommand({ logRotate: 1 })"
  • 将路径更改为系统上的mongo.exe位置。
  • 保存文件,并确保logrotate配置中的路径相同!(在postrotateendscript之间的行)

该命令存储在额外的文件中,因为LogRotateWin解释mongo命令的括号({})并抛出异常。

4. 检查所有是否正常工作
  1. 打开日志文件夹。您应该看到一个单独的文件mongod.log

  2. 打开终端并检查日志轮换是否正在工作(-f即使没有触发器被触发也会强制进行日志轮换):

logrotate logrotate.conf -f

应该出现一个新的日志文件。(对我来说是mongod.log.1mongod.log 应该为空。

  1. 触发将被记录的事件。例如,使用monogdbCompass连接到您的MongoDB。

  2. 检查 mongod.log。连接应该在其中记录。

5. 创建一个任务计划程序作业以定期运行日志轮换

我不会谈论任务计划程序的创建,但这是我的配置示例。您可以导入该文件并根据需要进行修改。

还要更改 logrotate.exe 的路径为您系统的位置。

此作业每小时运行一次,以检查是否触发了一个或多个日志轮换触发器:

<?xml version="1.0" encoding="UTF-16"?>
<Task version="1.4" xmlns="http://schemas.microsoft.com/windows/2004/02/mit/task">
  <RegistrationInfo>
    <Date>2021-12-02T17:57:55.9541897</Date>
    <Author>Grayknife</Author>
    <Description>Execute Logrotate Hourly</Description>
    <URI>\docker\LogRotate</URI>
  </RegistrationInfo>
  <Triggers>
    <CalendarTrigger>
      <Repetition>
        <Interval>PT1H</Interval>
        <StopAtDurationEnd>false</StopAtDurationEnd>
      </Repetition>
      <StartBoundary>2021-12-02T18:00:00</StartBoundary>
      <ExecutionTimeLimit>PT30M</ExecutionTimeLimit>
      <Enabled>true</Enabled>
      <ScheduleByDay>
        <DaysInterval>1</DaysInterval>
      </ScheduleByDay>
    </CalendarTrigger>
  </Triggers>
  <Principals>
    <Principal id="Author">
      <UserId>1234</UserId>
      <LogonType>Password</LogonType>
      <RunLevel>LeastPrivilege</RunLevel>
    </Principal>
  </Principals>
  <Settings>
    <MultipleInstancesPolicy>IgnoreNew</MultipleInstancesPolicy>
    <DisallowStartIfOnBatteries>true</DisallowStartIfOnBatteries>
    <StopIfGoingOnBatteries>true</StopIfGoingOnBatteries>
    <AllowHardTerminate>true</AllowHardTerminate>
    <StartWhenAvailable>false</StartWhenAvailable>
    <RunOnlyIfNetworkAvailable>false</RunOnlyIfNetworkAvailable>
    <IdleSettings>
      <StopOnIdleEnd>true</StopOnIdleEnd>
      <RestartOnIdle>false</RestartOnIdle>
    </IdleSettings>
    <AllowStartOnDemand>true</AllowStartOnDemand>
    <Enabled>true</Enabled>
    <Hidden>false</Hidden>
    <RunOnlyIfIdle>false</RunOnlyIfIdle>
    <DisallowStartOnRemoteAppSession>false</DisallowStartOnRemoteAppSession>
    <UseUnifiedSchedulingEngine>true</UseUnifiedSchedulingEngine>
    <WakeToRun>false</WakeToRun>
    <ExecutionTimeLimit>PT0S</ExecutionTimeLimit>
    <Priority>7</Priority>
  </Settings>
  <Actions Context="Author">
    <Exec>
      <Command>E:\logrotate\logrotate.exe</Command>
      <Arguments>logrotate.conf</Arguments>
      <WorkingDirectory>E:\logrotate</WorkingDirectory>
    </Exec>
  </Actions>
</Task>

我希望这个指南能够帮助到某些人。


编辑于2022年5月1日

我遇到了一个问题,当文件数量超过9个时,logrotate会抛出异常:

E:\logrotate>E:\logrotate\logrotate.exe logrotate.conf -f
logrotate: Force option set to true
logrotate: Exception: Cannot create a file when that file already exists.

logrotate: StackTrace:    at System.IO.__Error.WinIOError(Int32 errorCode, String maybeFullPath)
   at System.IO.__Error.WinIOError()
   at System.IO.File.InternalMove(String sourceFileName, String destFileName, Boolean checkHost)
   at logrotate.Program.AgeOutRotatedFiles(logrotateconf lrc, FileInfo fi, String rotate_path)
   at logrotate.Program.RotateFile(logrotateconf lrc, FileInfo fi)
   at logrotate.Program.Main(String[] args)

E:\logrotate>E:\logrotate\logrotate.exe logrotate.conf -f
logrotate: Force option set to true
logrotate: Exception: Access to the path 'E:\MongoDB\Server\4.4\log\mongod.log.10' is denied.
logrotate: StackTrace:    at System.IO.__Error.WinIOError(Int32 errorCode, String maybeFullPath)
   at System.IO.File.InternalDelete(String path, Boolean checkHost)
   at System.IO.File.Delete(String path)
   at logrotate.Program.DeleteRotateFile(String m_filepath, logrotateconf lrc)
   at logrotate.Program.AgeOutRotatedFiles(logrotateconf lrc, FileInfo fi, String rotate_path)
   at logrotate.Program.RotateFile(logrotateconf lrc, FileInfo fi)
   at logrotate.Program.Main(String[] args)
E:\logrotate>

暂时的解决方案是将文件最大数设置为9。


0
  1. 创建一个名为 logrotate.py 的 Python 文件,内容如下:
import os

# path to your mongod.log file
path = 'D:/MongoDB/Server/5.0/log/'

# you can insert a condition here that checks the size of mongod.log first
# ...

# send logrotate command through terminal
# if you don't have mongosh(ell) installed, replace by mongo / mongod
os.system('cmd /c "mongosh --eval "db.adminCommand({ logRotate: 1 })"')

# delete rotated log file
for file in os.listdir(path):
    if file.startswith('mongod.log.'):
        os.remove(path+file)

quit()
  1. 创建一个批处理文件logrotate.bat,内容如下:
python logrotate.py
  1. 在Windows任务计划程序中创建一个任务,每X小时运行一次此程序。

0

MongoDB本身没有提供任何可用的内容。您可以将所有日志写入一个文件中:

systemLog
  logAppend: true

或者每次启动MonogDB服务器时,您可以创建一个新的日志文件:

systemLog
  logAppend: true
  logRotate: rename

无论哪种情况,您都必须使用第三方工具或脚本手动删除/压缩旧日志文件。
在Linux中,您可以通过“kill -USR1”触发日志轮换,但我不知道这在Windows中是否可用。您需要从Mongo shell启动日志轮换:
use admin
db.runCommand({ logRotate: 1 })

或者

db.getSiblingDB('admin').runCommand({ logRotate: 1 })
db.adminCommand({ logRotate: 1 }) 

你可以在命令行中运行它

mongo --eval "db.adminCommand({ logRotate: 1 })"

使用Windows任务计划程序设置此类任务。您可以查看LogRotateWin,它是适用于Windows平台的logrotate实用程序的实现。我从未尝试过它,但似乎能够正常工作。有关示例logrotate配置,请参见如何禁用MongoDB的日志记录?

请注意,在Linux上为了不丢失任何日志,您必须首先重命名日志文件,然后再启动日志轮换命令。我不知道Windows是否以相同的方式运行。


0
最简单的方法就是创建一个批处理文件来运行logRotate命令,并在Windows任务计划程序中安排它的定时执行。
mongod(s)的配置文件应该设置logRotate = rename。
systemLog:
  destination: file
  logAppend: false
  path:  C:\<where you put the log>\mongod.log
  logRotate: rename
在适当的文件夹中创建一个批处理文件,命名为:
@Echo off
C:\Program Files\mongosh\mongosh.exe -u <user name> -p <pw> --authenticationDatabase <auth db name> --eval "db.adminCommand( { logRotate: 1 } );"     
@Echo "Clean up older than 30 days log file"
Forfiles /P C:\<where you put the log>\ /m Mongo*.log.* /D -30 /C "cmd /c del /S /Q @file"
创建一个Windows定时任务来运行上述批处理文件。
这样就不需要安装任何东西,简单方便地控制Mongodb的日志轮转。

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接