gtxyzz

使用SeasLog打造PHP项目中的高性能日志组件

gtxyzz 运维技术 2022-11-13 430浏览 0

什么是SeasLog

SeasLog是一个C语言编写的PHP扩展,提供一组规范标准的功能函数,在PHP项目中方便、规范、高效地写日志,以及快速地读取和查询日志。

为什么使用SeasLog

无论在什么应用中,log日志都是架构中不可缺少的一个重要组成部分,它通常是系统或软件、应用的运行记录。通过log的分析,可以方便用户了解系统或软件、应用的运行情况;如果你的应用log足够丰富,也可以分析以往用户的操作行为、类型喜好、地域分布或其他更多信息;如果一个应用的log同时也分了多个级别,那么可以很轻易地分析得到该应用的健康状况,及时发现问题并快速定位、解决问题,补救损失。

我们知道,php内置了很多log函数,如error_log、syslog、file_put_content,这些函数功能强大且性能极好,但由于各种缺陷(error_log、file_put_content无错误级别、无固定格式像是信马由缰随处乱画;syslog不区分模块、而且与系统日志混合,读syslog记录会让人抓狂的。),灵活度降低了很多,很不能满足应用需求。基本上所有的开发者,都会自行设计封装log库,当然也会有很多开发者选择已有的开源日志库。

也有很多开源log类库弥补了上述缺陷,如log4php、plog、Analog等(当然也有很多应用在项目中自己开发的log类)。其中以log4php最为著名,它的设计精良、格式***、文档完善、功能强大。但是经过测试,log4php的性能非常差。

使用SeasLog打造PHP项目中的高性能日志组件

这是log4php与SeasLog的性能对比图:

设计思路

那么有没有一种log类库同时满足以下需求呢:

●分模块、分级别

●配置简单(***是勿须配置)

●日志格式清晰易读

●应用简单、性能很棒

我们知道,PSR-3标准是一个国际化的日志标准,它要求了“模块、级别、清晰、易用”等日志工作应具备的特点。因此,只要我们遵循了PSR-3标准,则我们可以完成“分模块、分级别”以及“日志格式清晰易读”的要求。

“配置简单”这个需求也很好完成。如果严格按照既定规则,其实只需要设置默认目录就可以了。

OK,现在我们只剩下“性能”这一个要求。

既然是日志,免不了会写文件,或者通过pipe通过网络传送到某个存储中心(我们暂不考虑存储中心的设计)。可以想见,假设一个请求中需要写出1000处log,那么势必会有1000次IO,这对性能将是一个很大的拖延点。一般对于处理这种多次相同的请求场景,我们要解决的其实也很简单,使用cache或buffer,把多次请求作归并,从而降低对磁盘或网络的IO,这是一个基本的思想。

SeasLog也是这么做的。设定一个buffer_size(默认100条log),使用PHP请求内存,每写一次log,塞入内存,同时buffer_size加;当buffer_size等于设置值时,则进行一次IO,同时清除buffer; 当然,如果请求结束了、或执行了die、exit或其他异常退出时,不管buffer_size有没有攒够设置值,立刻进行一次IO,同时清除buffer。

到目前为止,SeasLog的正式版本为1.1.6,采用Apache 2.0开源协议,同时可以在php.net官方,和Github库上获得它的完整代码。

Php.net http://pecl.php.net/package/seaslog

Github https://github.com/Neeke/SeasLog

目前提供了什么

●在PHP项目中便捷、规范地记录log

●可配置的默认log目录与模块

●指定log目录与获取当前配置

●初步的分析预警框架

●高效的日志缓冲、便捷的缓冲debug

●遵循 PSR-3 日志接口规范

怎么安装

获得源码后,可自行编译。

$ /path/to/phpize

$ ./configure –with-php-config=/path/to/php-config

$ make && make install

当然,使用PECL管理工具会更方便:

$ pecl install seaslog

seaslog.ini的配置

;configurationforphpSeasLogmodule
extension=seaslog.so
seaslog.default_basepath=/log/seaslog-test;默认log根目录
seaslog.default_logger=default;默认logger目录
seaslog.disting_type=1;是否以type分文件1是0否(默认)
seaslog.disting_by_hour=1;是否每小时划分一个文件1是0否(默认)
seaslog.use_buffer=1;是否启用buffer1是0否(默认)
seaslog.buffer_size=100;buffer中缓冲数量默认0(不使用buffer_size)
seaslog.level=0;记录日志级别默认0(所有日志)

seaslog.disting_type = 1 开启以type分文件,即log文件区分info\warn\erro

seaslog.disting_by_hour = 1 开启每小时划分一个文件

seaslog.use_buffer = 1 开启buffer。默认关闭。当开启此项时,日志预存于内存,当请求结束时(或异常退出时)一次写入文件。

seaslog.buffer_size = 100 设置缓冲数量为100. 默认为0,即无缓冲数量限制.当buffer_size大于0时,缓冲量达到该值则写一次文件.

seaslog.level = 3 记录的日志级别.默认为0,即所有日志均记录。当level为1时,关注debug以上级别(包括debug),以此类推。level大于8时,所有日志均不记录。#p#

默认常量有哪些

遵循PSR-3标准,SeasLog 共将日志分成8个级别

●SEASLOG_DEBUG "debug"

●SEASLOG_INFO "info"

●SEASLOG_NOTICE "notice"

●SEASLOG_WARNING "warning"

●SEASLOG_ERROR "error"

●SEASLOG_CRITICAL "critical"

●SEASLOG_ALERT "alert"

●SEASLOG_EMERGENCY "emergency"

都提供哪些方法

SeasLog 提供了这样一组函数,可以方便地获取与设置根目录、模块目录、快速写入与统计log。 相信从下述伪代码的注释中,您可以快速获取函数信息(有经验的coder,也可将下述代码保存成SeasLog.php导入你的IDE,code tips,你懂的),具体使用将紧接其后:

<?php
/**
*@authorneeke@php.net云智慧
*/

classSeasLog
{
publicfunction__construct()
{
#SeasLoginit
}

publicfunction__destruct()
{
#SeasLogdistroy
}

/**
*设置basePath
*@param$basePath
*@returnbool
*/
staticpublicfunctionsetBasePath($basePath)
{
returnTRUE;
}

/**
*获取basePath
*@returnstring
*/
staticpublicfunctiongetBasePath()
{
return'thebase_path';
}

/**
*设置模块目录
*@param$module
*@returnbool
*/
staticpublicfunctionsetLogger($module)
{
returnTRUE;
}

/**
*获取***一次设置的模块目录
*@returnstring
*/
staticpublicfunctiongetLastLogger()
{
return'thelastLogger';
}

/**
*统计所有类型(或单个类型)行数
*@paramstring$level
*@paramstring$log_path
*@paramnull$key_word
*@returnarray|long
*/
staticpublicfunctionanalyzerCount($level='all',$log_path='*',$key_word=NULL)
{
returnarray();
}

/**
*以数组形式,快速取出某类型log的各行详情
*@param$level
*@paramstring$log_path
*@paramnull$key_word
*@paramint$start
*@paramint$limit
*@returnarray
*/
staticpublicfunctionanalyzerDetail($level=SEASLOG_INFO,$log_path='*',$key_word=NULL,$start=1,$limit=20)
{
returnarray();
}

/**
*获得当前日志buffer中的内容
*@returnarray
*/
staticpublicfunctiongetBuffer()
{
returnarray();
}

/**
*记录debug日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctiondebug($message,array$content=array(),$module='')
{
#$level=SEASLOG_DEBUG
}

/**
*记录info日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctioninfo($message,array$content=array(),$module='')
{
#$level=SEASLOG_INFO
}

/**
*记录notice日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionnotice($message,array$content=array(),$module='')
{
#$level=SEASLOG_NOTICE
}

/**
*记录warning日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionwarning($message,array$content=array(),$module='')
{
#$level=SEASLOG_WARNING
}

/**
*记录error日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionerror($message,array$content=array(),$module='')
{
#$level=SEASLOG_ERROR
}

/**
*记录critical日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctioncritical($message,array$content=array(),$module='')
{
#$level=SEASLOG_CRITICAL
}

/**
*记录alert日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionalert($message,array$content=array(),$module='')
{
#$level=SEASLOG_ALERT
}

/**
*记录emergency日志
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionemergency($message,array$content=array(),$module='')
{
#$level=SEASLOG_EMERGENCY
}

/**
*通用日志方法
*@param$level
*@param$message
*@paramarray$content
*@paramstring$module
*/
staticpublicfunctionlog($level,$message,array$content=array(),$module='')
{

}
}

<!–?php

#p#

在项目中如何使用

获取与设置basePath

$basePath_1=SeasLog::getBasePath();

SeasLog::setBasePath('/log/base_test');
$basePath_2=SeasLog::getBasePath();

var_dump($basePath_1,$basePath_2);

/*
string(19)"/log/seaslog-ciogao"
string(14)"/log/base_test"
*/

直接使用 SeasLog::getBasePath(),将获取php.ini(seaslog.ini)中设置的seaslog.default_basepath 的值。

使用 SeasLog::getBasePath() 函数,将改变 seaslog_get_basepath() 的取值。

设置logger与获取lastLogger

$lastLogger_1=SeasLog::getLastLogger();

SeasLog::setLogger('testModule/app1');
$lastLogger_2=SeasLog::getLastLogger();

var_dump($lastLogger_1,$lastLogger_2);
/*
string(7)"default"
string(15)"testModule/app1"
*/

与basePath相类似的,

直接使用 SeasLog::getLastLogger(),将获取php.ini(seaslog.ini)中设置的seaslog.default_logger 的值。

使用 SeasLog::setLogger() 函数,将改变 SeasLog::getLastLogger() 的取值。

快速写入log

上面已经设置过了basePath与logger,于是log记录的目录已经产生了,

log记录目录 = basePath / logger / {fileName}.log log文件名,以 年月日 分文件,如今天是2014年02月18日期,那么 {fileName} = 20140218;

还记得 php.ini 中设置的 seaslog.disting_type 吗?

默认的 seaslog.disting_type = 0,如果今天我使用了 SeasLog ,那么将产生最终的log文件:

●LogFile = basePath / logger / 20140218.log

如果 seaslog.disting_type = 1,则最终的log文件将是这样的三个文件

●infoLogFile = basePath / logger / INFO.20140218.log
●warnLogFile = basePath / logger / WARN.20140218.log
●erroLogFile = basePath / logger / ERRO.20140218.log

于是可以这么快速地记录log:

SeasLog::debug('this is a {userName} debug',array('{userName}' => 'neeke'));
SeasLog::info('this is a info log');
SeasLog::notice('this is a notice log');
SeasLog::warning('your {website} was down,please {action} it ASAP!',array('{website}' => 'github.com','{action}' => 'rboot'));
SeasLog::error('a error log');
SeasLog::critical('some thing was critical');
SeasLog::alert('yes this is a {messageName}',array('{messageName}' => 'alertMSG'));
SeasLog::emergency('Just now, the house next door was completely burnt out! {note}',array('{note}' => 'it`s a joke'));

既然已经作为PHP的扩展存在,那么,此时可以在任何使用PHP的地方,方便地使用SeasLog来记录你的log了。

这里有一个小技巧,在一个框架controller构造方法中,或在一个Service的构造方法中,使用SeasLog::setLogger() 方法,则可以将下文中所有的log记录在同一个模块中。同时,由于SeasLog记录的log中,默认记录了进程pid,所以可以有效地通过pid,将上下文相关的日志非常快速地联系起来。

如下:

debug | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a neeke debug
info | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a info log
notice | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a notice log
warning | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | your github.com was down,please rboot it ASAP!
error | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | a error log
critical | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | some thing was critical
alert | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | yes this is a alertMSG
emergency | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | Just now, the house next door was completely burnt out! it`s a joke
debug | 6888 | 1422894820.234 | 2015:02:03 00:33:40 | this is a neeke debug
info | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | this is a info log
notice | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | this is a notice log
warning | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | your github.com was down,please rboot it ASAP!
error | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | a error log
critical | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | some thing was critical
alert | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | yes this is a alertMSG
emergency | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | Just now, the house next door was completely burnt out! it`s a joke

使用SeasLog进行健康预警

SeasLog同时也提供了一个简单的预警demo,可以通过简单的配置,完成及时发现问题并实时发送预警邮件的功能。

预警的配置

[base]
wait_analyz_log_path=/log/base_test

[fork]
;是否开启多线程1开启0关闭
fork_open=1

;线程个数
fork_count=3

[warning]
email[smtp_host]=smtp.163.com
email[smtp_port]=25
email[subject_pre]=预警邮件-
email[smtp_user]=seaslogdemo@163.com
email[smtp_pwd]=seaslog#demo
email[mail_from]=seaslogdemo@163.com
email[mail_to]=gaochitao@weiboyi.com
email[mail_cc]=ciogao@gmail.com
email[mail_bcc]=

[analyz]
;enum
;SEASLOG_DEBUG"debug"
;SEASLOG_INFO"info"
;SEASLOG_NOTICE"notice"
;SEASLOG_WARNING"warning"
;SEASLOG_ERROR"error"
;SEASLOG_CRITICAL"critical"
;SEASLOG_ALERT"alert"
;SEASLOG_EMERGENCY"emergency"

test1[module]=test/bb
test1[level]=SEASLOG_ERROR
test1[bar]=1
test1[mail_to]=gaochitao@weiboyi.com

test2[module]=222
test2[level]=SEASLOG_WARNING

test3[module]=333
test3[level]=SEASLOG_CRITICAL

test4[module]=444
test4[level]=SEASLOG_EMERGENCY

test5[module]=555
test5[level]=SEASLOG_DEBUG

crontab配置

;每天凌晨3点执行
03***/path/to/php/path/to/SeasLog/Analyzer/SeasLogAnalyzer.php

继续浏览有关 网络 的文章
发表评论