构建AWStats日志分析系统

需求描述

管理员搭建完服务器，要对网站的性能做后期的不断的分析和调整，以至达到最完美的状态。针对服务器每天的日志访问量、高峰时间、压力等等是通过日志信息系统分析。如果事前没有预估，没有给定足相应的cpu、内存。假如有一天突然高发值，服务器会直接崩溃。通过观察日志，以便在以后工作调整中提出整改方案。

简介

在httpd服务器的访问日志文件access_log中，记录了大量的客户机访问信息,通过分析这些信息,可以及时了解Web站点的访问情况，通过AWStats日志分析系统,以完成自动化的日志分析与统计工作。通过AWStats日志分析系统可用来分析Apache、 Samba、Vsftpd、IIs等服务器的访问日志信息。

功能描述

  • 访问量，访问次数，页面浏览量，点击数，数据流量等
  • 精确到每月、每日、每小时的数据
  • 访问者国家
  • 访问者IP
  • Robots/Spiders的统计
  • 访客持续时间
  • 对不同Files type的统计信息
  • Pages-URL的统计
  • 访客操作系统浏览器等信息
  • 其它信息（搜索关键字等等）

实验环境

系统环境：centos6.5
服务器IP地址：192.168.100.103
yum挂载目录：/mnt/sr0

搭建步骤

一、准备工作

1、关闭防火墙及selinux

[[email protected] ~]# chkconfig iptables off #随开机关闭iptables
[[email protected] ~]# vim /etc/sysconfig/selinux

[[email protected] ~]# reboot #重启Linux生效

二、搭建httpd服务

[[email protected] ~]# yum -y install httpd
[[email protected] ~]# vim /etc/httpd/conf/httpd.conf #修改主配置文件

编辑以下参数:

ServerName www.bt.com:80
Listen 192.168.100.103:80

[[email protected] ~]# /etc/init.d/httpd start #启动httpd服务
[[email protected] ~]# echo "<h1>Hello World</h1>" > /var/www/html/index.html #设置默认首页

三、搭建DNS服务器

1、安装bind软件包

[[email protected] ~]# cd /mnt/sr0/Packages/
[[email protected] Packages]# rpm -ivh bind-9.8.2-0.17.rc1.el6_4.6.x86_64.rpm

2、修改主配置文件named.conf

[[email protected] ~]# vim /etc/named.conf

3、创建并修改DNS正向解析文件

[[email protected] ~]# cd /var/named/
[[email protected] named]# cp -p named.localhost bt.com.zone #将模板文件改为正向解析文件进行修改
[[email protected] ~]# vim /var/named/bt.com.zone #修改正向解析文件

4、启动DNS服务器

[[email protected] ~]# /etc/init.d/named start

5、修改DNS客户机配置文件

[[email protected] ~]# echo "nameserver 192.168.100.103" >> /etc/resolv.conf

6、测试DNS解析

[[email protected] ~]# nslookup www.bt.com #nslookup 用于查询DNS的记录,查看域名解析是否正常

四、搭建AWStats日志分析系统

1、安装AWStats软件包

[[email protected] ~]# tar xvf awstats-7.6.tar.gz #解压
[[email protected] ~]# mv awstats-7.6 /usr/local/awstats #源码剪切至/usr/local下

[[email protected] ~]# cd /usr/local/awstats/tools/
[[email protected] ~]# chmod +x awstats_configure.pl #将配置脚本赋予执行权限

[[email protected] tools]# ./awstats_configure.pl #配置AWStats服务

----- AWStats awstats_configure 1.0 (build 20140126) (c) Laurent Destailleur -----
This tool will help you to configure AWStats to analyze statistics for
one web server. You can try to use it to let it do all that is possible
in AWStats setup, however following the step by step manual setup
documentation (docs/index.html) is often a better idea. Above all if:

  • You are not an administrator user,
  • You want to analyze downloaded log files without web server,
  • You want to analyze mail or ftp log files instead of web log files,
  • You need to analyze load balanced servers log files,
  • You want to ‘understand‘ all possible ways to use AWStats...
    Read the AWStats documentation (docs/index.html).

-----> Running OS detected: Linux, BSD or Unix

-----> Check for web server install

Enter full config file path of your Web server.
Example: /etc/httpd/httpd.conf #可以填写rpm包安装配置文件
Example: /usr/local/apache2/conf/httpd.conf #可以填写源码包安装的配置文件
Example: c:\Program files\apache group\apache\conf\httpd.conf #可以填写windows下安装的apache配置文件
Config file path (‘none‘ to skip web server setup):

> /etc/httpd/conf/httpd.conf #填写网站服务器的完整配置文件路径。我的路径是/etc/httpd/conf/httpd.conf

-----> Check and complete web server config file ‘/usr/local/httpd/conf/httpd.conf‘
Warning: You Apache config file contains directives to write ‘common‘ log files
This means that some features can‘t work (os, browsers and keywords detection).

Do you want me to setup Apache to write ‘combined‘ log files [y/N] ? y #将日志格式转换成combined，显示更为详细

Add ‘Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"‘
Add ‘Alias /awstatscss "/usr/local/awstats/wwwroot/css/"‘
Add ‘Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"‘
Add ‘ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"‘
Add ‘<Directory>‘ directive
AWStats directives added to Apache config file.

-----> Update model config file ‘/usr/local/awstats/wwwroot/cgi-bin/awstats.model.conf‘
File awstats.model.conf updated.

-----> Need to create a new config file ?

Do you want me to build a new AWStats config/profile file (required if first install) [y/N] ? y #是否需要创建AWStats的配置文件，当然"y"

-----> Define config file name to create
What is the name of your web site or profile analysis ?
Example: www.mysite.com
Example: demo
Your web site, virtual server or profile name:

> www.bt.com #绑定网站域名，虚拟主机名或者自定义配置名，可以同时支持多个站点进行观测。我这里填写的是www.bt.com

-----> Define config file path
In which directory do you plan to store your config file(s) ?
Default: /etc/awstats
Directory path to store config file(s) (Enter for default):

> #定义配置文件路径，直接点击回车默认是在/etc/awstats目录下

-----> Create config file ‘/etc/awstats/awstats.www.bt.com.conf‘
Config file /etc/awstats/awstats.www.bt.com.conf created.

-----> Restart Web server with ‘/sbin/service httpd restart‘

-----> Add update process inside a scheduler
Sorry, configure.pl does not support automatic add to cron yet.
You can do it manually by adding the following command to your cron:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.bt.com
Or if you have several config files and prefer having only one command:
/usr/local/awstats/tools/awstats_updateall.pl now

Press ENTER to continue... #直接点击回车跳过

A SIMPLE config file has been created: /etc/awstats/awstats.www.bt.com.conf
You should have a look inside to check and change manually main parameters.
You can then manually update your statistics for ‘www.bt.com‘ with command:
\> perl awstats.pl -update -config=www.bt.com
You can also read your statistics for ‘www.bt.com‘ with URL:

> http://localhost/awstats/awstats.pl?config=www.bt.com #注意访问awstats的URL

Press ENTER to finish… #点击回车结束

2、删除httpd日志

[[email protected] ~]# cd /var/log/httpd/
[[email protected] logs]# rm -rf *_log #之前日志格式是common，现在使用awstats改为了combined
[[email protected] logs]# service httpd restart #重启服务，使配置文件中修改的日志格式生效

3、修改awstats配置文件

[[email protected] ~]# vim /etc/awstats/awstats.www.bt.com.conf

修改以下参数：

LogFile="/var/log/httpd/access_log" #指定httpd服务的访问日志文件的位置
DirData="/var/lib/awstats" #awstats统计的所有数据存放的位置，没有存在需要手工建立
Lang="cn" #中文语言
LevelForWormsDetection=2?? #日志等级，不对警告日志进行统计

[[email protected] ~]# mkdir /var/lib/awstats #创建awstats统计数据存放目录

4、采集数据

[[email protected] ~]# cd /usr/local/awstats/tools/
[[email protected] tools]# chmod +x awstats_updateall.pl #将awstats工具目录下所有命令赋予执行权限

[[email protected] tools]# ./awstats_updateall.pl now #数据采集完成

5、访问awstats

6、引入周期性计划任务

[[email protected] tools]# crontab -e #编辑周期性任务计划

/5 * /usr/local/awstats/tools/awstats_updateall.pl now #每隔五分钟采集一次数据

7、设置网页自动跳转

[[email protected] ~]# vim /var/www/html/abc.html #创建跳转页面

<html>
??<head>
???<meta http-equiv=refresh content="0;http://www.bt.com/awstats/awstats.pl?config=www.bt.com"&gt;
??</head>
?<body></body>
</html>

8、再次测试访问

9、设置awstats网页访问认证

[[email protected] ~]# vim /etc/httpd/conf/httpd.conf

10、登录访问

原文地址：http://blog.51cto.com/11905606/2157439

时间： 2024-09-27 05:27:23

构建AWStats日志分析系统的相关文章

AWStats日志分析系统

部署AWStats日志分析系统 AWStats可以为Apache,samba,vsftpd,IIS等服务进行日志分析 这里我们对Apache网站进行日志分析 安装AWStats软件包 为要统计的站点建立配置文件 进入交互式操作 之后的几步都是按Enter键 画箭头上方的路径是我们配置为之后,要访问的AWStats日志分析系统的页面. 修改站点统计配置文件      (指定日志路径) 需添加                       (统计数据的目录) 可以查找到 创建目录 更新所有的站点 创建

Web服务之部署AWStats日志分析系统

AWStats是使用Perl语言开发的一款开源日志分析系统,不仅可以用来分析Apache网站日志,也可以用来分析Samba.Vsftpd.IIS等服务的日志信息.结合crond等任务计划服务,可以对不断增长的日志内容定期进行分析 部署AWStats分析系统 ? ? AWStats的软件包可以从官网上下载 1. 安装AWStats软件包 ? ? 安装非常简单,只需将软件包解压到httpd服务器的/usr/local/目录下即可 2. 为统计的站点建立配置文件 ? ? AWStats系统支持统计多个

部署AWStats日志分析系统与优化（附安装包）

介绍 AWStats是使用Perl语言开发的一款开源日志分析系统,可以分析apache,samba,vsftpd,iis等服务的日志信息,结合crond等计划任务,可以对不断增长的日志内容定期进行分析. 它可以帮助我们直观的图形化的,图形化的!看到原本繁杂的日志文件.这篇文章就使用一个简单的apache服务来演示如何部署AWStats日志分析系统. 环境 VMware Workstation 14 pro 测试机型 redhat6.5 IP:192.168.10.100 win10 IP:192

AWStats 日志分析系统（含源码包）

前言 在上一篇文章中写了关于httpd的一些简介.配置.那么我们应该知道,HTTP服务器的访问量非常庞大,在它的访问日志文件access_log 中,记录了很多很多客户的访问信息,维护的管理人员会通过分析这些信息,可以及时的了解Web的访问情况,比如每天或特定时间段的访问IP数量.点击量大的页面.那么就是因为访问量太多,信息量太大,所以导致管理员不方便与管理,分析.AWStats日志分析系统就诞生,下面介绍一下AWStats分析系统 有兴趣的朋友可以看看上一篇的httpd简介与配置. AWSta

Apache配置与应用——AWStats日志分析系统（实战！）

AWStats日志分析系统 Perl语言开发的一款开源日志分析系统 可用来分析Apache,Samba,Vsftpd,IIS等服务器的访问日志 信息结合crond等计划任务服务,可对日志内容定期进行分析 环境 一台Linux服务主机(192.168.13.132) 一台win7测试pc机 1,yum安装http和bind服务 [[email protected] ~]# yum install httpd bind -y 2,配置DNS配置文件 [[email protected] ~]# vi

Linux下安装部署AWStats日志分析系统实例

AWStats是使用Perl语言开发的一款开放性日志分析系统,可分析Apache网站服务器的访问日志,还可以用来分析Samba.Vsftpd.IIS等日志信息.       此文章主要讲解如何在linux系统下安装部署关于对Apache网站服务站日志分析的AWStats. 实验步骤一,安装部署AWStats分析软件. 一,安装AWStats软件包. 直接将其解压到/usr/local/awstats目录下即可完成安装. 使用命令:mkdir -p /usr/local/awstats tar z

Linux环境下安装部署AWStats日志分析系统实例

AWStats是使用Perl语言开发的一款开放性日志分析系统,可分析Apache网站服务器的访问日志,还可以用来分析Samba.Vsftpd.IIS等日志信息.       此文章主要讲解如何在linux系统下安装部署关于对Apache网站服务站日志分析的AWStats. 实验步骤一,安装部署AWStats分析软件. 一,安装AWStats软件包. 直接将其解压到/usr/local/awstats目录下即可完成安装. 使用命令:mkdir -p /usr/local/awstats tar z

部署Awstats日志分析系统

知识部分·什么是AWStats:AWStats分析系统是使用Perl语言开发的一款开源日志分析系统.可用于分析Apache.Samba.Vsftpd.IIS等服务的日志信息.也可以结合crond等计划任务,不断对增长的日志进行定期分析.操作步骤1.解压软件包,并将文件移动到/usr/local下2.为要统计的站点建立配置文件.首先切换到../awstats/tools下,授予awstats_configure.pl一个可执行的权限,然后执行该文件.3.在该位置添加apache的配置文件4.继续,

在Linux系统上部署AWStats日志分析系统

AWStats是使用Perl语言开发的一款开源日志分析系统,它不仅可用来分析Apache网站服务器的访问日志,也可用来分析Samba Vsftpd IIS等服务的日志信息.综合crond等计划任务服务,可以对不断增长的日志内容定期进行分析. 实验环境:一台Linux6.5虚拟机,IP地址为192.168.100.222 一台windows虚拟机,地址为192.168.100.30 AWStats软件包链接:https://pan.baidu.com/s/1HWLiZuVEl9JSPGzPqT8O