前言
项目基于node开发,为满足日志记录的需要,使用了log4js做为日志管理工具,当前的使用版本为4.1.0 。
先说具体需求,当前项目使用的是express框架,大概想法是,能够记录常规日志,并且剥离错误日志单独记录到文件,日志文件按文件大小或日期分割,支持日志的自动压缩。
记录一下当前的配置方案以及了解到的一些概念,具体实现代码参见文末。
log4js的基础配置
log4js.configure() 是日志的配置入口。在configure配置项中,最为常用的是appenders和categories属性。了解更多配置项详见API。
appenders可以理解为是对各种日志输出形式的定义,而categories决定了在某种类型输出下调用哪些的appender。appenders和categories都至少需要一个配置,否则将会抛出异常。大概的配置像这样:
var log4js = require('log4js');
log4js.configure({
appenders: {
'out': { type: 'console' },
'err': { type: 'stderr' }
},
categories: {
default: { appenders: ['out'], level: 'INFO' },
err: { appenders: ['err'], level: 'ERROR' }
});
var logger = log4js.getLogger(); // 当不传参或找不到对应 category时,默认使用default的配置
var errLogger = log4js.getLogger('err');
// 手动输出
logger.info('This is a message from INFO.');
errLogger.info('This is a message from INFO.');
errLogger.error('This is a message from ERROR.');
而控制台的输出大概会像这样:
[2019-03-31T23:17:04.254] [INFO] default - This is a message from INFO.
[2019-03-31T23:17:04.254] [ERROR] err - This is a message from ERROR.
appenders定义日志输出形式,appender中的type决定了选用何种的日志形式,如‘console’、‘stderr’都会将日志输出到node的控制台,而dateFile、file等等则会将日志写入到日志文件。
categories定义了日志输出类别,在何种类别下使用哪些appender,它拥有两个属性,appenders和level。appenders支持传入一个或多个appender,level决定过滤的允许输出的日志级别。
log4js默认的日志级别如下:
ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < MARK < OFF
当指定level为INFO时,只允许输出INFO级别以上的日志,WARN、ERROR都会被记录,但是TRACE和DEBUG不会。这也就是为什么,手动输出的三条日志,只打印两条的原因。
log4js.getLogger([category]) 允许接收一个字符串,表示使用category类型,如果不传参,或者找不到对应的category,将会使用默认配置即default。
Appenders
log4js支持多种输出形式,打印到控制台、输出到文件,传输到服务器,也可以以邮件形式发送日志。
直接支持的形式:
categoryFilter、console、dateFile、file、fileSync、logLevelFilter、multiFile、multiprocess、recording、stderr、stdout、tcp、tcp-server
支持但需要额外插件的形式:
gelf、hipchat、logFaces-HTTP、logFaces-UDP、loggly、logstashHTTP、logstashUDP、mailgun、rabbitmq、redis、slack、smtp
常用的日志形式
file(以文件大小划分日志文件)
log4js.configure({
appenders: {
infoLogs: {
type: 'file',
filename: 'logs/info/file.log',
maxLogSize: 10485760, // 10mb,日志文件大小,超过该size则自动创建新的日志文件
backups: 20, // 仅保留最新的20个日志文件
compress: true // 超过maxLogSize,压缩代码
}
},
categories: {
default: { appenders: [ 'infoLogs' ], level: 'info' }
}
});
dateFile(以日期划分日志文件)
log4js.configure({
appenders: {
infoLogs: {
type: 'dateFile',
filename: 'logs/',
backups:5, // 仅保留最新的五个日志文件
pattern: ".yyyy-MM-dd", // 用于确定何时滚动日志的模式
alwaysIncludePattern: true,
compress: true
}
},
categories: {
default: { appenders: [ 'infoLogs' ], level: 'info' }
}
});
pattern,默认为.yyyy-MM-dd, 用于确定何时滚动日志的模式,如果.yyyy-MM-dd-hh则以小时为单位滚动日志。格式:.yyyy-MM-dd-hh:mm:ss.log
console
将日志输出到控制台,需要注意的一点是,大量日志写入控制台可能会使应用占用大量内存,可以考虑使用stdout。
log4js.configure({
appenders: { console: { type: 'console' } },
categories: { default: { appenders: [ 'console' ], level: 'info' } }
});
logLevelFilter
日志过滤器,当需要在一堆日志中特殊处理某特定级别日志时,会比较有用。官方示例如下:
log4js.configure({
appenders: {
everything: {
type: 'file',
filename: 'all-the-logs.log'
},
emergencies: {
type: 'file',
filename: 'panic-now.log'
},
just-errors: {
type: 'logLevelFilter',
appender: 'emergencies',
level: 'error'
}
},
categories: {
default: { appenders: ['just-errors', 'everything' ], level: 'debug' }
}
});
在此示例中,‘ just-errors’会过滤得到ERROR以上级别的日志,并使用emergencies appender,单独将错误日志记录到panic-now.log文件中。
logLevelFilter可以过滤某一区间的日志,当你同时定义了level和maxLevel的话。maxLevel的默认值为FATAL,也就是最高级别。
layouts
请求默认的输出格式
[2019-04-01T11:28:38.696] [INFO] default - ::1 - - "GET / HTTP/1.1" 304 - "" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"
[2019-04-01T11:28:39.169] [INFO] default - ::1 - - "GET /favicon.ico HTTP/1.1" 404 1062 "http://localhost:3000/" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"
layout可以用来自定义日志的输出格式,参见layouts。
具体配置方案
当前项目的需求是,记录常规日志,剥离错误日志单独记录,日志文件按文件大小或日期回滚,支持日志的压缩。由于项目基于express,所以参考了官方示例(Connect / Express Logger),根据实际需求,调整配置如下:
var log4js = require('log4js');
...
log4js.configure({
appenders: {
infoLogs: {
type: 'file',
filename: 'logs/info/file.log',
maxLogSize: 10485760, // 10mb,日志文件大小,超过该size则自动创建新的日志文件
backups: 20, // 仅保留最新的20个日志文件
compress: true // 超过maxLogSize,压缩代码
},
errorLogs: {
type: 'file',
filename: 'logs/error/file.log',
maxLogSize: 10485760,
backups: 20,
compress: true
},
justErrors: {
type: 'logLevelFilter', // 过滤指定level的文件
appender: 'errorLogs', // appender
level: 'error' // 过滤得到error以上的日志
},
console: {type: 'console'}
},
categories: {
default: { appenders: ['console', 'justErrors', 'infoLogs'], level: 'info' },
err: { appenders: ['errorLogs'], level: 'error' },
}
});
var logger = log4js.getLogger();
app.use(log4js.connectLogger(logger , { level: 'info' }));
...
4:先安装log4js模块
npm install log4js
目前安装的版本信息:"log4js": "^3.0.5"
5:引用及配置( 具体配置例子 )
1:先安装log4js模块
npm install log4js
目前安装的版本信息:"log4js": "^3.0.5"
2:引用及配置
var log4js = require('log4js');
// log4js的输出级别6个: trace, debug, info, warn, error, fatal
log4js.configure({
//输出位置的基本信息设置
appenders: {
//设置控制台输出 (默认日志级别是关闭的(即不会输出日志))
out: { type: 'console' },
//设置每天:以日期为单位,数据文件类型,dataFiel 注意设置pattern,alwaysIncludePattern属性
//allLog: { type: 'dateFile', filename: './log/all', pattern: '-yyyy-MM-dd.log', alwaysIncludePattern: true },
//所有日志记录,文件类型file 文件最大值maxLogSize 单位byte (B->KB->M) backups:备份的文件个数最大值,最新数据覆盖旧数据
allLog: { type: 'file', filename: './log/all.log', keepFileExt: true, maxLogSize: 10485760, backups: 3 },
//http请求日志 http请求日志需要app.use引用一下, 这样才会自动记录每次的请求信息
httpLog: { type: "dateFile", filename: "log/httpAccess.log", pattern: ".yyyy-MM-dd", keepFileExt: true },
//错误日志 type:过滤类型logLevelFilter,将过滤error日志写进指定文件
errorLog: { type: 'file', filename: './log/error.log' },
error: { type: "logLevelFilter", level: "error", appender: 'errorLog' }
},
//不同等级的日志追加到不同的输出位置:appenders: ['out', 'allLog'] categories 作为getLogger方法的键名对应
categories: {
//appenders:采用的appender,取上面appenders项,level:设置级别
http: { appenders: ['out', 'httpLog'], level: "debug" },
default: { appenders: ['out', 'allLog', 'error'], level: 'debug' }, //error写入时是经过筛选后留下的
}
});
//getLogger参数取categories项,为空或者其他值取default默认项
// exports.getLogger = function (name) {
// return log4js.getLogger(name || 'default')
// }
const logger = log4js.getLogger("liveMeeting");
const httpLog = log4js.getLogger('http');
const httpLogger = log4js.connectLogger(httpLog, { level: 'WARN' });
exports = module.exports = { logger, httpLogger };
http请求日志 http请求日志需要app.use引用一下, 这样才会自动记录每次的请求信息 :
global.logger = require('./config/log4js').logger;
httpLogger = require('./config/log4js').httpLogger;//这样会自动记录每次请求信息,放在其他use上面app.use(httpLogger);
logger用来记录所有手动输入的日志,如:
logger.info('test info');
logger.error('test error info ');
httpLogger用来记录每次请求日志;