GoAccess安装使用及在仅开放80端口的情况下实时更新

使用GoAccess作为web日志监控工具,简单方便,速度快,能够实时刷新。不仅有终端界面,也有web界面。

GoAccess 终端界面
GoAccess web界面

一.安装

GoAccess在GitHub的源码库上已经给出了多种安装方式,源码编译,apt-get,docker等,挑一种自己喜欢的就可以了。这里需要说明的是,如果想要使用某些特性如地理位置,ssl连接等的话,则需要编译安装,可以先将依赖装好,再编译安装即可。

这里以yum安装依赖,再编译源码安装为例。

1.首先安装依赖
$ sudo yum install -y ncurses-devel openssl-devel tokyocabinet-devel
 libmaxminddb-devel 
2.配置脚本

下载GoAccess源码,解压。执行configure配置,根据需要选用配置项,可以通过./configure --help查看可选参数。需要处理中文字符就要--enable-utf8;将GoAccess的WebSocket通过TLS/SSL连接的话,就要--with-openssl--enable-geoip则是启用根据ip显示地理位置;GoAccess默认将数据存储在内存的Hash Table中,如果数据量太大,就需要存到硬盘,使用TokyoCabinet数据存储。为了以后扩展方便,这里先都配置上。

$ ./configure --prefix=/usr/local/goaccess \
--enable-utf8 \
--enable-geoip=mmdb \
--enable-tcb \
--with-openssl
3.编译安装

执行编译安装就很简单了。

$ sudo make && make install

另外需要说明的是,如果使用yum install goaccess直接安装,需要先安装epel源。

  • CentOS6安装epel源
$ wget https://mirrors.tuna.tsinghua.edu.cn/epel/6/x86_64/epel-release-6-8.noarch.rpm
$ sudo rpm -ivh epel-release-6-8.noarch.rpm
  • CentOS7安装epel源
$ sudo yum install -y epel-release

二.启动

1.终端

最简单的使用方式就是在终端启动,只需在终端输入

$ sudo goaccess /path/to/access.log
2.web

GoAccess能够生成一个静态的html页面,在html页面中通过WebSocket与服务端建立连接,服务端监测到日志信息变化时会实时向打开的html发送WebSocket数据。更多关于WebSocket的信息,请参考我的另一篇文章:WebSocket协议

要想在web界面查看实时日志分析,首先我们要在启动时加上--real-time-html参数和-o /path/to/report.html指明生成的html位置。需要地理位置功能,可以先去下个geoip数据包 https://dev.maxmind.com/geoip/geoip2/geolite2/。完整命令如下。

$ sudo goaccess /usr/local/nginx/logs/access.log \
-o /usr/local/nginx/html/report/index.html \
--geoip-database=/usr/local/goaccess/geoip/GeoLite2-City.mmdb \
--real-time-html --log-format=COMBINED --daemon

接下来需要配置Nginx访问该静态页面的路径。

location /report.html {
    alias html/report/index.html;
}

浏览器访问配置的报表页面,就可以看到效果了。

三.自动更新页面数据

报表页面与GoAccess服务端通过HTTP建立连接后,后续就是WebSocket数据传输了,GoAccess默认使用了7890端口。通常情况下,服务器上的HTTP服务已经使用了80端口,并且出于安全考虑关闭其他端口,浏览器的Html页面与GoAccess就无法正常进行数据交互。这时我们可以配置Nginx反向代理并修改报表访问路径来解决此问题。

1.Nginx配置

首先配置Nginx upstream

upstream goaccess_svr {
    server 127.0.0.1:7890;  
}

配置代理路径

location /goaccess {
    proxy_pass http://goaccess_svr;
    proxy_set_header Host $http_host;
    proxy_set_header X-Forwarded-Proto $scheme;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_http_version 1.1;
    proxy_set_header Upgrade $http_upgrade;
    proxy_set_header Connection "upgrade";
}
2.修改报表页面

报表页面相当于一个模版文件,生成之后GoAccess就不会修改它。我们需要修改里面的与GoAccess服务端连接的URL和端口。在VIM里输入/"port"查找URL和端口所在位置,修改url和port,这里url的path与前面的代理路径对应。

var connection = {"url": "server.example.com/goaccess","port": 80}

保存退出,重启Nginx,回到浏览器刷新,之后页面就能自动更新数据了。

参考

https://goaccess.io/
https://github.com/allinurl/goaccess
https://www.jianshu.com/p/0598c825ac54

感谢您的阅读,有任何问题请交流指正。peace~

推荐阅读更多精彩内容