之前在《使用AOP統(tǒng)一處理Web請求日志》一文中介紹了如何使用AOP統(tǒng)一記錄web請求日志?;舅悸肥峭ㄟ^aop去切web層的controller實現(xiàn),獲取每個http的內(nèi)容并通過log4j將日志內(nèi)容寫到應用服務器的文件系統(tǒng)中。
但是當我們在集群中部署應用之后,應用請求的日志被分散記錄在了不同應用服務器的文件系統(tǒng)上,這樣分散的存儲并不利于我們對日志內(nèi)容的檢索。解決日志分散問題的方案多種多樣,本文思路以在[《使用AOP統(tǒng)一處理Web請求日志》一文的基礎之上,擴展log4j實現(xiàn)將日志寫入MongoDB。
#準備工作
可以先拿《使用AOP統(tǒng)一處理Web請求日志》的結果工程為基礎,進行后續(xù)的實驗改造。該工程實現(xiàn)了一個簡單的REST接口,一個對web層的切面,并在web層切面前后記錄http請求的日志內(nèi)容。
#通過自定義appender實現(xiàn)
思路:log4j提供的輸出器實現(xiàn)自Appender接口,要自定義appender輸出到MongoDB,只需要繼承AppenderSkeleton類,并實現(xiàn)幾個方法即可完成。
#引入mongodb的驅動
在pom.xml中引入下面依賴
<dependency>
<groupId>org.mongodb</groupId>
<artifactId>mongodb-driver</artifactId>
<version>3.2.2</version>
</dependency>
#實現(xiàn)MongoAppender
編寫MongoAppender類繼承AppenderSkeleton,實現(xiàn)如下:
public class MongoAppender extends AppenderSkeleton {
private MongoClient mongoClient;
private MongoDatabase mongoDatabase;
private MongoCollection<BasicDBObject> logsCollection;
private String connectionUrl;
private String databaseName;
private String collectionName;
@Override
protected void append(LoggingEvent loggingEvent) {
if(mongoDatabase == null) {
MongoClientURI connectionString = new MongoClientURI(connectionUrl);
mongoClient = new MongoClient(connectionString);
mongoDatabase = mongoClient.getDatabase(databaseName);
logsCollection = mongoDatabase.getCollection(collectionName, BasicDBObject.class);
}
logsCollection.insertOne((BasicDBObject) loggingEvent.getMessage());
}
@Override
public void close() {
if(mongoClient != null) {
mongoClient.close();
}
}
@Override
public boolean requiresLayout() {
return false;
}
// 省略getter和setter
}
- 定義MongoDB的配置參數(shù),可通過log4j.properties配置:
- connectionUrl:連接mongodb的串
- databaseName:數(shù)據(jù)庫名
- collectionName:集合名
- 定義MongoDB的連接和操作對象,根據(jù)log4j.properties配置的參數(shù)初始化:
- mongoClient:mongodb的連接客戶端
- mongoDatabase:記錄日志的數(shù)據(jù)庫
- logsCollection:記錄日志的集合
- 重寫append函數(shù):
- 根據(jù)log4j.properties中的配置創(chuàng)建mongodb連接
- LoggingEvent提供getMessage()函數(shù)來獲取日志消息
- 往配置的記錄日志的collection中插入日志消息
- 重寫close函數(shù):關閉mongodb的
#配置log4j.properties
設置名為mongodb的logger:
- 記錄INFO級別日志
- appender實現(xiàn)為com.didispace.log.MongoAppende
- mongodb連接地址:mongodb://localhost:27017
- mongodb數(shù)據(jù)庫名:logs
- mongodb集合名:logs_request
log4j.logger.mongodb=INFO, mongodb
# mongodb輸出
log4j.appender.mongodb=com.didispace.log.MongoAppender
log4j.appender.mongodb.connectionUrl=mongodb://localhost:27017
log4j.appender.mongodb.databaseName=logs
log4j.appender.mongodb.collectionName=logs_request
#切面中使用mongodb logger
修改后的代碼如下,主要做了以下幾點修改:
- logger取名為mongodb的
- 通過getBasicDBObject函數(shù)從HttpServletRequest和JoinPoint對象中獲取請求信息,并組裝成BasicDBObject
- getHeadersInfo函數(shù)從HttpServletRequest中獲取header信息
- 通過logger.info(),輸出BasicDBObject對象的信息到mongodb
@Aspect
@Order(1)
@Component
public class WebLogAspect {
private Logger logger = Logger.getLogger("mongodb");
@Pointcut("execution(public * com.didispace.web..*.*(..))")
public void webLog(){}
@Before("webLog()")
public void doBefore(JoinPoint joinPoint) throws Throwable {
// 獲取HttpServletRequest
ServletRequestAttributes attributes = (ServletRequestAttributes) RequestContextHolder.getRequestAttributes();
HttpServletRequest request = attributes.getRequest();
// 獲取要記錄的日志內(nèi)容
BasicDBObject logInfo = getBasicDBObject(request, joinPoint);
logger.info(logInfo);
}
private BasicDBObject getBasicDBObject(HttpServletRequest request, JoinPoint joinPoint) {
// 基本信息
BasicDBObject r = new BasicDBObject();
r.append("requestURL", request.getRequestURL().toString());
r.append("requestURI", request.getRequestURI());
r.append("queryString", request.getQueryString());
r.append("remoteAddr", request.getRemoteAddr());
r.append("remoteHost", request.getRemoteHost());
r.append("remotePort", request.getRemotePort());
r.append("localAddr", request.getLocalAddr());
r.append("localName", request.getLocalName());
r.append("method", request.getMethod());
r.append("headers", getHeadersInfo(request));
r.append("parameters", request.getParameterMap());
r.append("classMethod", joinPoint.getSignature().getDeclaringTypeName() + "." + joinPoint.getSignature().getName());
r.append("args", Arrays.toString(joinPoint.getArgs()));
return r;
}
private Map<String, String> getHeadersInfo(HttpServletRequest request) {
Map<String, String> map = new HashMap<>();
Enumeration headerNames = request.getHeaderNames();
while (headerNames.hasMoreElements()) {
String key = (String) headerNames.nextElement();
String value = request.getHeader(key);
map.put(key, value);
}
return map;
}
}
#代碼示例
本文的相關例子可以查看下面?zhèn)}庫中的chapter4-2-5
目錄: