搭建node服務(1):日誌處理
對於一個應用程式來說,日誌記錄是非常重要的。日誌可以幫助開發人員快速定位線上問題,定製解決方案;日誌中包含大量使用者資訊,透過日誌分析還可以獲取使用者行為、興趣偏好等資訊,透過這些資訊可以得到使用者畫像,對公司戰略的制定提供參考。本文將要介紹如何在node服務中處理日誌。
一、技術選型
選擇了3種主流的技術進行對比:
1.1 log4js
log4js是一種node日誌管理工具,可以將自定義格式的日誌輸出到各種渠道。對於控制檯的日誌輸出可以呈現彩色日誌,對於檔案方式的日誌輸出,可以根據檔案大小或者日期進行日誌切割。
熟悉java的開發人員會發現log4js與一種常用的java日誌工具log4j很像。沒錯,log4js是log4j的JavaScript版,使用方式也相似。
1.2 winston
winston也是一種非常流行的node日誌管理工具,支援多傳輸。預設輸出格式為json,也可以自定義輸出格式。如果想要對日誌進行切割還需要使用 winston-daily-rotate-file 模組。
1.3 PM2
PM2實際是node程式管理工具,具有效能監控、程式守護、負載均衡、日誌管理等功能。使用PM2進行日誌管理,只需要專案中增加console方法呼叫,無需新增額外的程式碼。要對日誌進行切割,需要使用pm2-logrotate。
由於團隊內部服務端系統很多是基於java的,這些系統大部分使用log4j生成日誌。日誌管理相關的日誌歸集系統和日誌查詢系統對log4j格式的日誌支援的更好,所以自己最終選用了log4j的JavaScript版log4js來生成日誌,下面會對log4js的基本使用進行介紹。
二、基本概念
2.1 日誌級別
log4js的預設日誌級別分為9級,按優先順序從低到高排列如下:
ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < MARK < OFF
- 當日志級別為ALL時,會輸出所有級別的日誌
- 當日志級別為OFF時,則會關閉日誌,不會有任何日誌輸出
- 使用者還可以根據自己的需要自定義日誌級別
2.2 appender
appender 主要是用來定義以怎樣的方式輸出,輸出到哪裡。可以將日誌寫入到檔案、傳送電子郵件、透過網路傳送資料等。可以透過配置物件的appenders屬性定義多個appender。
appender的常用型別有:
- console:控制檯輸出
- file:檔案輸出
- dateFile:按日期切割的檔案輸出
2.3 category
category 是日誌的型別,指定一個或者多個appender為某種型別的日誌,不同型別的日誌可以指定不同的日誌級別。可以透過配置物件的categories屬性定義多個category。必須指定default型別,用來獲取預設的Logger例項,還可以透過型別名來獲取指定型別的Logger例項。
綜上所訴,appender 定義了日誌輸出到哪裡,category 將appender 進行了分類,不同型別指定不同的日誌級別。
三、使用log4js
3.1 安裝
npm install log4js --save
或者
yarn add log4js
3.2 簡單使用
下面示例利用log4js建立日誌物件logger,透過呼叫logger.debug、logger.info、logger.warn、logger.error 等方法將日誌輸出到控制檯和日誌檔案。
- util/log4jsLogger.js
const path = require('path'); const log4js = require('log4js'); // 配置log4js log4js.configure({ appenders: { // 控制檯輸出 console: { type: 'console' }, // 日誌檔案 file: { type: 'file', filename: path.join(__dirname, '../../logs/server.log')} }, categories: { // 預設日誌 default: { appenders: [ 'file', 'console' ], level: 'debug' }, } }); // 獲取預設日誌 const logger = log4js.getLogger(); module.exports = logger;
- server.js
再透過呼叫logger. info 輸出INFO 級別的日誌,這裡web開發框架使用的Koa。
const Koa = require('koa'); const router = require('./router'); const logger = require('./util/log4jsLogger'); const port = 3000; const app = new Koa() .use(router.routes()) .use(router.allowedMethods()); app.listen(port, () => { logger.info(`Server running on port ${port}`); });
3.3 日誌格式
log4js透過layout 設定日誌格式,內建的layout有:
- basic:包含時間戳、日誌級別、日誌型別的基本日誌格式
- colored:格式與basic的一致,只是不同級別的日誌顯示不同的顏色
- dummy:只輸出第一個引數的內容,沒有時間戳、日誌級別、日誌分類等資訊
- pattern:可以自定義格式的layout
示例:
預設的日誌格式:
[2020-04-01T11:33:43.317] [INFO] default - Server running on port 3000
自定義的日誌格式:
2020-04-01 11:33:43.317 [INFO] Server running on port 3000
程式碼:
// 自定義日誌格式 const layout = { type: 'pattern', pattern: '%d{yyyy-MM-dd hh:mm:ss.SSS} [%p] %m' }; log4js.configure({ appenders: { // 控制檯輸出 console: { type: 'console' }, // 日誌檔案,透過設定layout 設定日誌格式 file: { type: 'file', filename: path.join(__dirname, '../../logs/server.log'), layout} }, categories: { // 預設日誌 default: { appenders: [ 'file', 'console' ], level: 'debug' }, } });
3.4 日誌切割
如果日誌全部輸出到一個檔案,日誌檔案會越來越大,導致日誌的備份和檢視都很不方便。透過將appender 指定為 dateFile 型別可以實現按日期將日誌進行切割。
// 日誌配置 log4js.configure({ appenders: { // 控制檯輸出 console: { type: 'console' }, // 日誌檔案 file: { type: 'dateFile', filename: path.join(__dirname, '../../logs/server.log'), // 日誌切割後檔名字尾格式 pattern: '.yyyy-MM-dd' } }, categories: { // 預設日誌 default: { appenders: [ 'file', 'console' ], level: 'debug' }, } });
假如4月1日部署的服務,日誌會輸出到service.log檔案,到4月2日會將service.log更名為server.log.2020-04-01,然後建立新的service.log檔案,新的日誌將繼續輸出到service.log檔案。
3.5 輸出多個檔案
下面示例除了將完整日誌輸出到server.log,還會將error及以上級別的日誌輸出到server-error.log。
- util/log4jsLogger.js
const path = require('path'); const log4js = require('log4js'); // 配置log4js log4js.configure({ appenders: { // 控制檯輸出 console: { type: 'console' }, // 全部日誌檔案 allFile: { type: 'file', filename: path.join(__dirname, '../../logs/server.log')}, // 錯誤日誌檔案 errorFile: { type: 'file', filename: path.join(__dirname, '../../logs/server-error.log')} }, categories: { // 預設日誌,輸出debug 及以上級別的日誌 default: { appenders: [ 'allFile', 'console' ], level: 'debug' }, // 錯誤日誌,輸出error 及以上級別的日誌 error: { appenders: [ 'errorFile' ], level: 'error' }, } }); // 獲取預設日誌 const defaultLogger = log4js.getLogger(); // 獲取錯誤級別日誌 const errorLogger = log4js.getLogger('error'); // 日誌代理,同時呼叫預設日誌和錯誤日誌 const loggerProxy = {}; const levels = log4js.levels.levels; levels.forEach(level => { const curLevel = level.levelStr.toLowerCase(); loggerProxy[curLevel] = (...params) => { defaultLogger[curLevel](...params); errorLogger[curLevel](...params); } }); module.exports = loggerProxy;
3.6 覆蓋console
由於使用log4js需要呼叫logger.debug、logger.info、logger.warn、logger.error等方法,對於已經呼叫console 方法輸出日誌的專案,全部改為呼叫logger的方法,改動起來很麻煩,可以透過覆蓋console的方法來使用log4js輸出日誌。
/** * 建立日誌代理方法 * @param logLevel 日誌級別 * @param logger 日誌物件 * @return {function} */ function createLogProxy (logLevel, logger) { return (...param) => { logger[logLevel](...param); }; } console.log = createLogProxy('debug', logger); console.info = createLogProxy('info', logger); console.warn = createLogProxy('warn', logger); console.error = createLogProxy('error', logger);
為了保證所有日誌都能輸出到日誌檔案,獲取logger 物件和覆蓋console方法要儘早執行。
四、總結
本文介紹了log4js的基本使用,並給出了常用功能的使用示例。要了解log4js的更多功能,請參考log4js的官網:。另外,本文相關的程式碼已提交到GitHub以供參考,專案地址:。
作者:劉琳
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69918724/viewspace-2687309/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- node錯誤處理與日誌
- node專案錯誤處理與日誌
- 使用Seq搭建免費的日誌服務
- 日誌服務
- 日誌伺服器搭建之多伺服器日誌轉發與格式化處理伺服器
- shell日誌顏色處理
- orbeon form 的日誌處理ORBORM
- 搭建node服務(二):操作MySQLMySql
- 搭建node服務(三):使用TypeScriptTypeScript
- centos使用node搭建https服務CentOSHTTP
- Node.js搭建Https服務Node.jsHTTP
- Node.js 服務連線 MongoDB 處理最佳實踐Node.jsMongoDB
- log4js快速寫一個Node服務訪問日誌JS
- SQLServer 2008中事務日誌已滿問題處理SQLServer
- 日誌服務之使用Nginx模式採集日誌Nginx模式
- DATAGUARD中手工處理日誌GAP
- Linux日誌服務初識Linux
- 日誌服務 HarmonyOS NEXT 日誌採集最佳實踐
- ELK 處理 Spring Boot 日誌,不錯!Spring Boot
- 如何在zuul上做日誌處理Zuul
- SpringBoot第十三篇:日誌處理Spring Boot
- 指令碼處理iOS的Crash日誌指令碼iOS
- 利用 ELK 處理 Percona 審計日誌
- 日誌服務資料匯入
- 搭建node服務(四):Decorator裝飾器
- spring cloud 服務搭建(1)SpringCloud
- 利用 FC + OSS 快速搭建 Serverless 實時按需影像處理服務Server
- Node.js 服務端圖片處理利器——sharp 進階操作指南Node.js服務端
- 基於go開發日誌處理包Go
- SQLServer資料庫日誌太大處理方式SQLServer資料庫
- DevOps雲翼日誌服務實踐dev
- 日誌服務之告警接入與管理
- 通過express快速搭建一個node服務Express
- 使用node+puppeteer+express搭建截圖服務Express
- logback下日誌輸出前處理操作——以日誌脫敏為例
- 『無為則無心』Python日誌 — 67、logging日誌模組處理流程Python
- 『學了就忘』Linux日誌管理 — 91、日誌服務rsyslogd說明Linux
- Node.js 系列 - 搭建路由 & 處理表單提交Node.js路由