如何清理 Log4j 中的日志消息以将其保存在数据库中

Question

我正在尝试将日志消息保存到中央数据库。为了做到这一点，我在 log4j 的 xml 配置中配置了以下 Appender：

<appender name="DB" class="org.apache.log4j.jdbc.JDBCAppender">
            <param name="URL" value="jdbc:postgresql://localhost/logging_test" />
            <param name="user" value="test_user" />
            <param name="password" value="test_password" />
            <param name="sql" value="INSERT INTO log_messages ( log_level, message, log_date ) VALUES ( '%p', '%m', '%d{yyyy-MM-dd HH:mm:ss}' )" />
</appender>

这工作正常，除了某些消息包含 '，然后 Appender 失败。

有没有简单的方法可以做到这一点？

Answer 1

我建议创建一个自定义附加程序并覆盖 flushBuffer 和 execute 方法，您可以在其中转义字符串或使用 PreparedStatement ：

public class MyJDBCAppender extends JDBCAppender {

}

解释为什么需要覆盖flushBuffer - 附加程序将LogEvent对象放入缓冲区中，该缓冲区稍后会刷新到目标（在本例中为数据库）。此处，flushBuffer 方法使用 getLogStatement 和（通过execute）普通的 Statement。您可以完全替换该行为。查看当前源代码

然后注册您的appender，而不是JDBCAppender。

Answer 2

看看这个非官方的 Log4J JDBCAppender 它修复了这个问题并在阿帕奇 2.0 许可证。引用其功能与org.apache.log4j.jdbc.JDBCAppender进行比较：

• 记录到（关系）数据库
• 灵活的连接处理（尚不支持数据源）
• 灵活的 sql 命令来执行实际日志记录
• 支持准备好的语句和存储过程（J2SDK 1.4+）
• 允许记录带有特殊字符的消息，例如 '（单个
  引用）和,（逗号）
• 灵活的表和列结构
• 灵活的 ID 生成
• 允许多个 PatternLayout 应用程序；在一个或多个
  栏目
• 支持 J2SDK 1.3、1.4 和 1.5
• 支持 Log4j 1.2.9 和当前开发

或者，您应该认真考虑此选项，从 log4j 切换到其后继者， logback（这就是事情发生的地方），它有一个DBAppender 使用 PreparedStatement （请参阅 sources)，可以使用 JNDI 数据源、连接池（这是一个很大的优点）等。了解更多有关此附加程序的信息，请参阅在线手册 http://logback.qos.ch/手册/appenders.html#DBAppender

Answer 3

我不熟悉 log4j 或 JDBC，但我知道 JDBC 支持准备好的语句。也许有一种方法可以将其与 JDBCAppender 一起使用

Answer 4

我通过以下方式解决了这个问题：

复制名为 ACMEJDBCAppender 的 JDBCAppender 源代码

覆盖 getLogStatement(LoggingEvent event) 方法，克隆旧事件并向新事件提供转义消息。

从 oop 的角度来看，这不是最干净的解决方案，但它确实有效。希望有帮助。

protected String getLogStatement(LoggingEvent event) {

  LoggingEvent clone = new LoggingEvent(
    event.fqnOfCategoryClass,
    LogManager.getLogger(event.getLoggerName()),
    event.getLevel(),
    AidaUtils.sqlEscape(event.getMessage().toString()),
    event.getThrowableInformation()!=null ? event.getThrowableInformation().getThrowable() : null
  );

  return getLayout().format(clone);
}

Answer 5

根据 Javadocs，官方的JDBCAppender功能相当有限，尤其是没有很好的方法来处理这个问题。

解决这个问题的一种方法是使用替代的附加程序，例如这个，其目的是在功能上与 Log4J 兼容，但工作除外。

Answer 6

要解决记录到 Oracle 的此问题，您可以使用 Oracle 的 quote 运算符。

将引号运算符括在 %m 周围（即 q#'%m'#）

例如：

INSERT INTO log_messages ( log_level, message, log_date ) 
VALUES ( '%p', q#'%m'#, '%d{yyyy-MM-dd HH:mm:ss}' )

Answer 7

Joao，抱歉迟到了，但这里是：

<appender name="DB" class="org.apache.log4j.db.DBAppender">                                                                                                             
                <connectionSource class="org.apache.log4j.db.DriverManagerConnectionSource">                                                                                       
                        <param name="driverClass" value="org.postgresql.Driver" />                                                                                                 
                        <param name="url" value="jdbc:postgresql://localhost/database" />                                                                                      
                        <param name="user" value="user" />                                                                                                                          
                        <param name="password" value="password" />                                                                                                                 
                </connectionSource>                                                                                                                                                
                <layout class="org.apache.log4j.PatternLayout">                                                                                                                    
                        <param name="ConversionPattern" value="%d %-5p [%t] %c - %m%n" />                                                                                          
                </layout>                                                                                                                                                          
        </appender>

希望有帮助！

Answer 8

如果您使用的是 SQL Server，则可以使用以下

SET QUOTED_IDENTIFIER OFF;
INSERT INTO log_messages ( log_level, message, log_date ) VALUES ( "%p", ":%m", "%d{yyyy-MM-dd HH:mm:ss}" )'
SET QUOTED_IDENTIFIER OFF;

命令将问题转移到双引号上。如果您的消息中没有双引号，这可以解决问题。

Answer 9

对于 postgresql，使用 $$

示例：$$%m$$