goaccess日志分析工具

参考文档

  https://github.com/allinurl/goaccess

  https://blog.csdn.net/ytulnj/article/details/85125760?utm_medium=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7EBlogCommendFromMachineLearnPai2%7Edefault-1.control&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7EBlogCommendFromMachineLearnPai2%7Edefault-1.control

  https://www.jianshu.com/p/b134995ae16c?utm_campaign=maleskine&utm_content=note&utm_medium=seo_notes&utm_source=recommendation

 

安装

#为方便最终日志统计时显示IP地理位置,需要安装依赖项GeoIP-devel:
yum install GeoIP-devel.x86_64
#安装ncurses-devel开发库:
yum install ncurses-devel
#安装tokyocabinet-devel开发库:
yum install tokyocabinet-devel
#安装openssl-devel开发库:
yum install openssl-devel

官网下载最新安装包

  https://github.com/allinurl/goaccess

  解压

  

./configure --enable-utf8 --enable-geoip=legacy

configure: error: 
*** Missing development files for the GeoIP library
或者是这个错误
Missing development files for libmaxminddb library

原因: 未安装地理数据库导致的
解决:
wget https://github.com/maxmind/geoip-api-c/releases/download/v1.6.11/GeoIP-1.6.11.tar.gz

tar -xzvf GeoIP-1.6.11.tar.gz

./configure

make && make install 


make && make install

 

goaccess -V  #查看是否安装成功

whereis GeoIP #搜索位置
#为nginx添加模块http_geoip_module
#找到nginx的源码
echo /usr/local/lib > /etc/ld.so.conf.d/geoip.conf
 ./configure --prefix=/usr/local/nginx --with-http_geoip_module && make && make install #重新编译并安装新模块
nginx -V #查看是否安装成功显示新模块
nginx -s reload

 

nginx.conf日志配置修改
http {
    include       mime.types;
    default_type  application/octet-stream;

    log_format  main  $remote_addr - $remote_user [$time_local] "$request" 
                      $status $body_bytes_sent "$http_referer" 
                      "$http_user_agent" "$http_x_forwarded_for";
    #access_log  logs/access.log  main;
}

goaccess.conf修改
whereis goaccess
vi xxx/goaccess.conf
添加:
date-format %d/%b/%Y
time-format %H:%M:%S
log-format %h %^[%d:%t %^] "%r" %s %b

 



 

goaccess -f /home/logs/xxx.access.log -o /usr/local/nginx/html/report.html -p /usr/local/etc/goaccess/goaccess.conf  --real-time-html --daemon
--daemonize参数是为了后台执行,执行这个的前提是有--real-time-html    
这个参数。
--real-time-html    实时更新
如果我们是https的还需要添加--ssl-cert=crt文件目录 --ssl-key=key文件目录这两个参数才可以实现wss

-f <input-file> : 需要解析的日志文件
-a --agent-list : 在host模块是不是能点击IP出现这个IP的user-agentlist,就是出现如图的功能

-o --output-format=csv|json 输出为csv或者json形式

-p --conf-file=<filename>
指定配置文件,如果你有配置文件,配置文件中又恰巧设置了log-format和date,那么你就不会被强制进入到format对话框了。如果你没有设置的话,默认使用~/.goacessrc。

--real-os
展示真实的操作系统。在Operation System模块中,是否展示更详细的操作系统信息。

 

注意:在使用--real-time-html可能不能实时刷新,是因为没有开端口号,可能是防火墙,默认socket连接使用7890端口,所以要保证端口号与外网畅通

 

goaccess日志分析工具

上一篇:【WEB安全】Fastjson反序列化(上)


下一篇:pymysql-python连接mysql数据库