Подтвердить что ты не робот

Прикладной файл журнала не сразу скрывается

В некоторых случаях мне необходимо принудительно промыть файл в приложении logback file. Я нашел в docs эта опция включена по умолчанию. Таинственно это не работает. Как я вижу в исходных процессах, исходный процесс включает BufferedOutputSream правильно. Есть ли проблемы с BufferedOutputSream.flush()? Вероятно, это связано с проблемой промывки.

Обновление: Я нашел проблему на Windows XP Pro SP 3 и на Red Hat Enterprise Linux Server версии 5.3 (Tikanga). Я использовал эти библиотеки:

jcl-over-slf4j-1.6.6.jar
logback-classic-1.0.6.jar
logback-core-1.0.6.jar
slf4j-api-1.6.6.jar

logback.xml:

<configuration>
    <appender name="FILE" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>/somepath/file.log</file>
        <rollingPolicy class="ch.qos.logback.core.rolling.FixedWindowRollingPolicy">
            <fileNamePattern>file.log.%i</fileNamePattern>
            <minIndex>1</minIndex>
            <maxIndex>3</maxIndex>
        </rollingPolicy>
        <triggeringPolicy class="ch.qos.logback.core.rolling.SizeBasedTriggeringPolicy">
            <maxFileSize>5MB</maxFileSize>
        </triggeringPolicy>
        <encoder>
            <pattern>%d{HH:mm:ss.SSS} [%thread] %-5level %logger - %msg%n</pattern>
        </encoder>
    </appender>

    <root level="debug">
        <appender-ref ref="FILE"/>
    </root>
</configuration>

Обновлено: Я бы предоставил unit test, но это не так просто. Позвольте мне более подробно описать проблему.

  • Событие регистрации произошло
  • Событие передается в файл appender
  • Событие сериализуется с определенным шаблоном
  • Сериализованное сообщение события передается файловому приложению и собирается записать в выходной поток
  • Запись в поток завершена, поток вывода очищается (я проверили реализацию). Заметим, что immidiateFlush истинно по умолчанию, поэтому метод flush() явно вызывается
  • В файле нет результата!

Несколько позже, когда был запущен некоторый базовый буфер, в файле появляется событие. Поэтому возникает вопрос: обеспечивает ли поток вывода немедленный сброс?

Честно говоря, я уже решил это, реализовав свой собственный ImmediateRollingFileAppender, который использует средство FileDescriptor для непосредственной синхронизации. Любой, кто заинтересован, может следовать этому.

Итак, это не проблема с журналом.

4b9b3361

Ответ 1

Я решил принести свое решение всем. Позвольте мне в первую очередь уточнить, что это не проблема журнала, а не проблема JRE. Это описано в javadoc и, как правило, не должно быть проблемой, пока вы не столкнетесь с некоторыми старыми школьными интеграционными решениями по синхронизации файлов.

Итак, это приложение для резервного копирования, которое выполняется для немедленного скрытия:

public class ImmediateFileAppender<E> extends RollingFileAppender<E> {

    @Override
    public void openFile(String file_name) throws IOException {
        synchronized (lock) {
            File file = new File(file_name);
            if (FileUtil.isParentDirectoryCreationRequired(file)) {
                boolean result = FileUtil.createMissingParentDirectories(file);
                if (!result) {
                    addError("Failed to create parent directories for [" + file.getAbsolutePath() + "]");
                }
            }

            ImmediateResilientFileOutputStream resilientFos = new ImmediateResilientFileOutputStream(file, append);
            resilientFos.setContext(context);
            setOutputStream(resilientFos);
        }
    }

    @Override
    protected void writeOut(E event) throws IOException {
        super.writeOut(event);
    }

}

Это соответствующий класс утилиты выходного потока. Из-за некоторых методов и полей исходных ResilientOutputStreamBase, которые предполагались для расширения изначально, были модифицированные модификаторы доступа, я должен был расширить OutputStream вместо этого и просто скопировать остальные и без изменений ResilientOutputStreamBase и ResilientFileOutputStream на новый. Я просто показываю измененный код:

public class ImmediateResilientFileOutputStream extends OutputStream {

    // merged code from ResilientOutputStreamBase and ResilientFileOutputStream

    protected FileOutputStream os;

    public FileOutputStream openNewOutputStream() throws IOException {
        return new FileOutputStream(file, true);
    }

    @Override
    public void flush() {
        if (os != null) {
            try {
                os.flush();
                os.getFD().sync(); // this make sence
                postSuccessfulWrite();
            } catch (IOException e) {
                postIOFailure(e);
            }
        }
    }

}

И, наконец, config:

<appender name="FOR_INTEGRATION" class="package.ImmediateFileAppender">
    <file>/somepath/for_integration.log</file>
    <rollingPolicy class="ch.qos.logback.core.rolling.FixedWindowRollingPolicy">
        <fileNamePattern>for_integration.log.%i</fileNamePattern>
        <minIndex>1</minIndex>
        <maxIndex>3</maxIndex>
    </rollingPolicy>
    <triggeringPolicy class="ch.qos.logback.core.rolling.SizeBasedTriggeringPolicy">
        <maxFileSize>5MB</maxFileSize>
    </triggeringPolicy>
    <encoder>
        <pattern>%d{HH:mm:ss.SSS} - %msg%n</pattern>
        <immediateFlush>true</immediateFlush>
    </encoder>
</appender>

Ответ 2

Ты проделал хорошую работу - молодец. Вот предложение, чтобы сделать его более кратким:

public class ImmediateFlushPatternLayoutEncoder extends PatternLayoutEncoder {
    public void doEncode(ILoggingEvent event) throws IOException {
        super.doEncode(event);
        if (isImmediateFlush()) {
             if (outputStream.os instanceof FileOutputStream) {
                 ((FileOutputStream) outputStream.os).getFD().sync();
             }
        }
    }
}

В конфигурации вы должны использовать этот специальный кодер:

<encoder class="ch.qos.logback.core.recovery.ImmediateFlushPatternLayoutEncoder">

Не тестировалось. Вероятно, будут проблемы с видимостью с полями, , требующие использования самого пакета журнала ch.qos.logback.core.recovery.

Кстати, я приглашаю вас отправить отчет об ошибках в журнал, чтобы получить дополнительную опцию immediateSync on LayoutWrappingEncoder.

Ответ 3

Много промежуточного программного обеспечения мониторинга обнаруживают новые события, проверяя обновления отметки времени и размера файла. По этой причине необходимо время, в которое записывается событие, отметка времени и размер файла обновляются.

Этот класс может решить его

public class MyFileAppender<E> extends FileAppender<E> {
    protected void writeOut(E event) throws IOException {
        super.writeOut(event);
        ResilientFileOutputStream resilientFos = (ResilientFileOutputStream) super.getOutputStream();
        resilientFos.flush();
        resilientFos.getChannel().force(true);
    }
}

Установить класс MyFileAppender для appender.

<appender name="FILE" class="MyFileAppender">

Надеюсь, что этот журнал решает эту проблему.