使用GoAccess作为web日志监控工具,简单方便,速度快,能够实时刷新。不仅有终端界面,也有web界面。
一.安装
GoAccess在GitHub的源码库上已经给出了多种安装方式,源码编译,apt-get,docker等,挑一种自己喜欢的就可以了。这里需要说明的是,如果想要使用某些特性如地理位置,ssl连接等的话,则需要编译安装,可以先将依赖装好,再编译安装即可。
这里以yum安装依赖,再编译源码安装为例。
1.首先安装依赖
$ sudo yum install -y ncurses-devel openssl-devel tokyocabinet-devel
libmaxminddb-devel
2.配置脚本
下载GoAccess源码,解压。执行configure配置,根据需要选用配置项,可以通过./configure --help
查看可选参数。需要处理中文字符就要--enable-utf8
;将GoAccess的WebSocket通过TLS/SSL连接的话,就要--with-openssl
;--enable-geoip
则是启用根据ip显示地理位置;GoAccess默认将数据存储在内存的Hash Table中,如果数据量太大,就需要存到硬盘,使用TokyoCabinet数据存储。为了以后扩展方便,这里先都配置上。
$ ./configure --prefix=/usr/local/goaccess \
--enable-utf8 \
--enable-geoip=mmdb \
--enable-tcb \
--with-openssl
3.编译安装
执行编译安装就很简单了。
$ sudo make && make install
另外需要说明的是,如果使用yum install goaccess
直接安装,需要先安装epel源。
- CentOS6安装epel源
$ wget https://mirrors.tuna.tsinghua.edu.cn/epel/6/x86_64/epel-release-6-8.noarch.rpm
$ sudo rpm -ivh epel-release-6-8.noarch.rpm
- CentOS7安装epel源
$ sudo yum install -y epel-release
二.启动
1.终端
最简单的使用方式就是在终端启动,只需在终端输入
$ sudo goaccess /path/to/access.log
2.web
GoAccess能够生成一个静态的html页面,在html页面中通过WebSocket与服务端建立连接,服务端监测到日志信息变化时会实时向打开的html发送WebSocket数据。更多关于WebSocket的信息,请参考我的另一篇文章:WebSocket协议。
要想在web界面查看实时日志分析,首先我们要在启动时加上--real-time-html
参数和-o /path/to/report.html
指明生成的html位置。需要地理位置功能,可以先去下个geoip数据包 https://dev.maxmind.com/geoip/geoip2/geolite2/。完整命令如下。
$ sudo goaccess /usr/local/nginx/logs/access.log \
-o /usr/local/nginx/html/report/index.html \
--geoip-database=/usr/local/goaccess/geoip/GeoLite2-City.mmdb \
--real-time-html --log-format=COMBINED --daemon
接下来需要配置Nginx访问该静态页面的路径。
location /report.html {
alias html/report/index.html;
}
浏览器访问配置的报表页面,就可以看到效果了。
三.自动更新页面数据
报表页面与GoAccess服务端通过HTTP建立连接后,后续就是WebSocket数据传输了,GoAccess默认使用了7890端口。通常情况下,服务器上的HTTP服务已经使用了80端口,并且出于安全考虑关闭其他端口,浏览器的Html页面与GoAccess就无法正常进行数据交互。这时我们可以配置Nginx反向代理并修改报表访问路径来解决此问题。
1.Nginx配置
首先配置Nginx upstream
upstream goaccess_svr {
server 127.0.0.1:7890;
}
配置代理路径
location /goaccess {
proxy_pass http://goaccess_svr;
proxy_set_header Host $http_host;
proxy_set_header X-Forwarded-Proto $scheme;
proxy_set_header X-Real-IP $remote_addr;
proxy_http_version 1.1;
proxy_set_header Upgrade $http_upgrade;
proxy_set_header Connection "upgrade";
}
2.修改报表页面
报表页面相当于一个模版文件,生成之后GoAccess就不会修改它。我们需要修改里面的与GoAccess服务端连接的URL和端口。在VIM里输入/"port"
查找URL和端口所在位置,修改url和port,这里url的path与前面的代理路径对应。
var connection = {"url": "server.example.com/goaccess","port": 80}
保存退出,重启Nginx,回到浏览器刷新,之后页面就能自动更新数据了。
参考
https://goaccess.io/
https://github.com/allinurl/goaccess
https://www.jianshu.com/p/0598c825ac54
感谢您的阅读,有任何问题请交流指正。peace~