我有以下问题：
我有一个应用程序，它不断在stderr和stdout上产生输出。这个应用程序的输出被保存在一个日志文件中（该应用程序被重定向为：&> log.txt）。我没有任何选项来将其适当地记录到文件中。
现在，我有一个cron作业，每小时运行一次，除了做其他事情外，还尝试通过将其复制到log.txt.1并创建一个空文件并将其复制到log.txt来旋转此日志文件。
看起来像这样：
cp log.txt log.txt.1
touch /tmp/empty
cp /tmp/empty log.txt
问题在于应用程序仍然在向其写入内容，因此我会在log.txt.1中得到一些非常奇怪的东西。它以许多垃圾字符开头，而实际的日志文件位于结尾某处。
你有任何想法如何为这种特定情况创建正确的日志轮换吗（我也尝试过cat log.txt > log.txt.1，但不起作用）？对于这个特定的应用程序，使用logrotate不是一个选项，因为后台有整个机制我可能无法更改。
谢谢, f.
好的，这里有一个灵感，受到http://en.wikibooks.org/wiki/Bourne_Shell_Scripting/Files_and_streams的启发
创建一个命名管道：
mkfifo /dev/mypipe
将标准输出和错误输出重定向到命名管道：
&> /dev/mypipe
从 mypipe 读取数据并写入文件：
cat < /dev/mypipe > /var/log/log.txt &
当你需要进行日志轮转时，终止进程并旋转日志，然后重新启动该进程。
注意：你可以给命名管道起任何名称，比如 /var/tmp/pipe1, /var/log/pipe, /tmp/abracadabra等等。只需确保在开机之前重新创建管道，在运行日志脚本之前。
另外，也可以不使用cat，而是使用一个简单的脚本文件：
#!/bin/bash
while : ; do
read line
printf "%s\n" "$line"
done
这个脚本保证每次读取换行符后都会有输出。(使用cat命令可能需要等到缓冲区满或遇到EOF时才会开始输出)
重要提示： 请阅读下方@andrew的评论。他指出了几种需要注意的情况。
好了！我终于能够访问我的Linux服务器了。以下是步骤：
第一步：创建此记录器脚本：
#!/bin/bash
LOGFILE="/path/to/log/file"
SEMAPHORE="/path/to/log/file.semaphore"
while : ; do
read line
while [[ -f $SEMAPHORE ]]; do
sleep 1s
done
printf "%s\n" "$line" >> $LOGFILE
done
步骤2： 开始使用录音器：
创建一个命名管道：
mkfifo $PIPENAME
将应用程序的标准输出(STDOUT)和标准错误(STDERR)重定向到命名管道(named pipe):
...things... &> $PIPENAME
开始录制：
/path/to/recorder.sh < $PIPENAME &
你可能希望使用nohup命令，使得上述命令在退出登录后仍然运行。
完成！
步骤三：如果需要进行日志轮换，请暂停记录器：
touch /path/to/log/file.semaphore
mv /path/to/log/file /path/to/archive/of/log/file
rm /path/to/log/file.semaphore
建议将上述步骤放入自己的脚本中。可以随意更改第二行以使用你想要使用的日志轮转方法。
注意：如果您熟悉C编程，您可能想制作一个短小的C程序来执行recorder.sh的功能。编译后的C程序肯定比nohup分离bash脚本更轻巧。
注意2： David Newcomb在评论中提供了有用的警告：当记录器未运行时，对管道的写操作将会阻塞并且可能会导致程序无法预测地失败。确保记录器关闭（或轮转）的时间尽可能短。
因此，如果您可以确保旋转发生得非常快，则可以将sleep（仅接受整数值的内置命令）替换为/bin/sleep（接受浮点值的程序），并将睡眠时间设置为0.5或更短。
read line; if [ "$line" != "" ]; then [do logging]; fi 来解决这个问题。 - andrew/etc/logrotate.d/中的所有脚本 - 这可以通过将脚本放置在其他位置来避免。
logrotate中实现）也可以被任何其他设施很好地实现。例如，这是一个使用bash的示例实现：MAXLOG=<maximum index of a log copy>
for i in `seq $((MAXLOG-1)) -1 1`; do
mv "log."{$i,$((i+1))} #will need to ignore file not found errors here
done
mv log log.1 # since a file descriptor is linked to an inode rather than path,
#if you move (or even remove) an open file, the program will continue
#to write into it as if nothing happened
#see https://dev59.com/W2435IYBdhLWcg3wxDL_
<make the daemon reopen the log file with the old path>
最后一项是通过发送SIGHUP或（较少情况下）SIGUSR1，并在守护进程中设置一个信号处理程序来替换相应的文件描述符或变量来完成的。这样，切换是原子的，因此日志记录可用性不会中断。在bash中，可以这样实现：
trap { exec &>"$LOGFILE"; } HUP
rotatelogs。<your_program> 2>&1 | rotatelogs <opts> <logfile> <rotation_criteria>
rotatelogs（这里的文档）来实现。该工具将会以透明的方式管理日志文件的轮换，从而将脚本的标准输出与日志文件分离开来。例如：your_script.sh | rotatelogs /var/log/your.log 100M
当输出文件达到100M时（可以根据时间间隔配置旋转），将自动旋转。
您还可以通过Apache的rotatelogs工具管道传输输出。或者使用以下脚本：
#!/bin/ksh
#rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]
numberOfFiles=10
while getopts "n:fltvecp:L:" opt; do
case $opt in
n) numberOfFiles="$OPTARG"
if ! printf '%s\n' "$numberOfFiles" | grep '^[0-9][0-9]*$' >/dev/null; then
printf 'Numeric numberOfFiles required %s. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$numberOfFiles" 1>&2
exit 1
elif [ $numberOfFiles -lt 3 ]; then
printf 'numberOfFiles < 3 %s. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$numberOfFiles" 1>&2
fi
;;
*) printf '-%s ignored. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$opt" 1>&2
;;
esac
done
shift $(( $OPTIND - 1 ))
pathToLog="$1"
fileSize="$2"
if ! printf '%s\n' "$fileSize" | grep '^[0-9][0-9]*[BKMG]$' >/dev/null; then
printf 'Numeric fileSize followed by B|K|M|G required %s. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$fileSize" 1>&2
exit 1
fi
sizeQualifier=`printf "%s\n" "$fileSize" | sed "s%^[0-9][0-9]*\([BKMG]\)$%\1%"`
multip=1
case $sizeQualifier in
B) multip=1 ;;
K) multip=1024 ;;
M) multip=1048576 ;;
G) multip=1073741824 ;;
esac
fileSize=`printf "%s\n" "$fileSize" | sed "s%^\([0-9][0-9]*\)[BKMG]$%\1%"`
fileSize=$(( $fileSize * $multip ))
fileSize=$(( $fileSize / 1024 ))
if [ $fileSize -le 10 ]; then
printf 'fileSize %sKB < 10KB. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$fileSize" 1>&2
exit 1
fi
if ! touch "$pathToLog"; then
printf 'Could not write to log file %s. rotatelogs.sh -n numberOfFiles pathToLog fileSize[B|K|M|G]\n' "$pathToLog" 1>&2
exit 1
fi
lineCnt=0
while read line
do
printf "%s\n" "$line" >>"$pathToLog"
lineCnt=$(( $lineCnt + 1 ))
if [ $lineCnt -gt 200 ]; then
lineCnt=0
curFileSize=`du -k "$pathToLog" | sed -e 's/^[ ][ ]*//' -e 's%[ ][ ]*$%%' -e 's/[ ][ ]*/[ ]/g' | cut -f1 -d" "`
if [ $curFileSize -gt $fileSize ]; then
DATE=`date +%Y%m%d_%H%M%S`
cat "$pathToLog" | gzip -c >"${pathToLog}.${DATE}".gz && cat /dev/null >"$pathToLog"
curNumberOfFiles=`ls "$pathToLog".[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]_[0-9][0-9][0-9][0-9][0-9][0-9].gz | wc -l | sed -e 's/^[ ][ ]*//' -e 's%[ ][ ]*$%%' -e 's/[ ][ ]*/[ ]/g'`
while [ $curNumberOfFiles -ge $numberOfFiles ]; do
fileToRemove=`ls "$pathToLog".[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]_[0-9][0-9][0-9][0-9][0-9][0-9].gz | head -1`
if [ -f "$fileToRemove" ]; then
rm -f "$fileToRemove"
curNumberOfFiles=`ls "$pathToLog".[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]_[0-9][0-9][0-9][0-9][0-9][0-9].gz | wc -l | sed -e 's/^[ ][ ]*//' -e 's%[ ][ ]*$%%' -e 's/[ ][ ]*/[ ]/g'`
else
break
fi
done
fi
fi
done
#! /bin/bash
#DATE_FMT="%Y%m%d-%H%M" # for testing
#DATE_FMT="%Y%m%d-%H" # rotate each hour
DATE_FMT="%Y%m%d" # rotate each day
if [ "$1" != "" ]
then
f=$1
else
f="rotatelog"
fi
p=$(date +${DATE_FMT})
r=$f-$p.log
exec 2>&1 > $r
while read l
do
d=$(date +${DATE_FMT})
if [ $p != $d ]
then
x=$r
p=$d
r=$f-$p.log
exec 2>&1 > $r
gzip $x
fi
echo $l
done
你可以像这样使用：
your_process | rotatelog.sh yout_log_path_pattern
head --lines=-10 log.txt > log.txt.1这个命令可以工作吗（其中10是保留在末尾的一些“合理数量”的行数）？然后，为了清空日志，也许可以使用truncate命令，不过它是按字节大小而非行数来操作的... - drysdamlogrotate是一个可以从 Shell 脚本中使用的命令行实用程序。如果你不能使用它，还有什么是不能使用的？你之前使用了cat、cp和touch，那么mv处于可使用状态吗？ - drysdamlogrotate，但效果相同，文件中出现了很多垃圾字符...也许原因是当我重定向时，底层操作系统知道当前文件描述符的位置，并从那个点继续写入？ - Ferenc Deak