nginx+awstats安装过程

awstats来来回回也装了好多遍了,每次都是现装现查,隐约的记得整个配置比较麻烦,中间有几个需要特别注意的地方,又记不得那些需要特殊对待,只能边找资料边回忆,最终还是搞出来了,在此分享给大家。

首先去官网下载最新的安装包。

wget http://jaist.dl.sourceforge.net/project/awstats/AWStats/7.3/awstats-7.3.zip
unzip awstats-7.3.zip
cd awstats-7.3

查看下配置结构

[root@localhost awstats-7.3]# ls
docs  README.TXT  tools  wwwroot
[root@localhost awstats-7.3]# tree -d
.
├── docs
│   ├── images
│   └── scripts
├── tools
│   ├── nginx
│   ├── webmin
│   └── xslt
└── wwwroot
    ├── cgi-bin
    │   ├── lang
    │   │   ├── tooltips_f
    │   │   ├── tooltips_m
    │   │   └── tooltips_w
    │   ├── lib
    │   └── plugins
    │       └── example
    ├── classes
    │   └── src
    ├── css
    ├── icon
    │   ├── browser
    │   ├── clock
    │   ├── cpu
    │   ├── flags
    │   ├── mime
    │   ├── os
    │   └── other
    └── js

28 directories
[root@localhost awstats-7.3]#     

进入tools目录找到awstats_configure.pl 文件并且运行,它是一个向导,可以根据它的指示创建一个配置文件。 

-----> Check for web server install

Enter full config file path of your Web server.
Example: /etc/httpd/httpd.conf
Example: /usr/local/apache2/conf/httpd.conf
Example: c:\Program files\apache group\apache\conf\httpd.conf
Config file path ('none' to skip web server setup):
#> none  #因为我们这里用的是 Nginx,所以写 none,跳过。
Your web server config file(s) could not be found.
You will need to setup your web server manually to declare AWStats
script as a CGI, if you want to build reports dynamically.
See AWStats setup documentation (file docs/index.html)

-----> Update model config file '/usr/local/awstats/wwwroot/cgi-bin/awstats.model.conf'
  File awstats.model.conf updated.

-----> Need to create a new config file ?
Do you want me to build a new AWStats config/profile
file (required if first install) [y/N] ?
#> y	#y 创建一个新的统计配置
-----> Define config file name to create
What is the name of your web site or profile analysis ?
Example: www.mysite.com
Example: demo
Your web site, virtual server or profile name:
#> www.moabc.net		#统计网站的域名 例:www.xxx.com
-----> Define config file path
----> Add update process inside a scheduler
Sorry, configure.pl does not support automatic add to cron yet.
You can do it manually by adding the following command to your cron:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.moabc.net  
               #回头把该命令填入crontab 按指定时间执行
Or if you have several config files and prefer having only one command:
/usr/local/awstats/tools/awstats_updateall.pl now
Press ENTER to continue...		回车继续

A SIMPLE config file has been created: /etc/awstats/awstats.www.moabc.net.conf  
            #新配置文件所在的路径
You should have a look inside to check and change manually main parameters.
You can then manually update your statistics for 'www.moabc.net' with command:
> perl awstats.pl -update -config=www.moabc.net
You can also build static report pages for 'www.moabc.net' with command:
> perl awstats.pl -output=pagetype -config=www.moabc.net

Press ENTER to finish...
In which directory do you plan to store your config file(s) ? Default: /etc/awstats Directory path to store config file(s) (Enter for default): #>

回车完成向导,接下来修改 www.xxx.com 的统计配置.

一般情况这个文件的位置是/etc/awstats目录下,文件名为awstats.www.xxx.com.conf。

这里面主要修改几个地方

LogFile="/var/log/httpd/mylog.log"

改为

LogFile="/opt/nginx/logs/access_%YYYY-0%MM-0%DD-0.log

然后保存,后续需要修改的地方咱们一会再说。

接下来就可以生产txt文件了,运行命令

[root@localhost wwwroot]# cd /home/awstats-7.3/wwwroot/cgi-bin/
[root@localhost cgi-bin]# ls
awdownloadcsv.pl awredir.pl awstats-fcgi.php awstats.model.conf awstats.pl lang lib plugins
[root@localhost cgi-bin]# ./awstats.pl -update -config=www.megaunity.com
Create/Update database for config "/etc/awstats/awstats.www.megaunity.com.conf" by AWStats version 7.3 (build 20140126)
From data in log file "/home/log/nginx/access_20140714.log"...
Phase 1 : First bypass old records, searching new record...
Direct access after last parsed record (after line 220965)
Jumped lines in file: 220965
Found 220965 already parsed records.
Parsed lines in file: 0
Found 0 dropped records,
Found 0 comments,
Found 0 blank records,
Found 0 corrupted records,
Found 0 old records,
Found 0 new qualified records.
[root@localhost cgi-bin]#



可以看到我是通过awstats.pl文件生产的数据文件,该文件位置在/var/lib/awstats下面。

[root@localhost cgi-bin]# ls /var/lib/awstats/
awstats072014.www.megaunity.com.txt

这个awstats072014.www.xxx.com.txt就是生产的数据库文件,但是咱们怎么能浏览浏览它呢,我通过很多博客的文章来搭建这个nginx环境下使用awstats,但是我浏览的所有博客都是通过awstats安装目录下一个自带的perl文件awstats_buildstaticpages.pl来生成静态页面浏览,每个博客都互相抄袭,都说nginx对perl支持不好。其实“当年”搭建awstats的前辈可能确实遇到了nginx对perl支持不好的问题,但是这么多年过去了,软件一直在不断更新,awstats已经可以像在apache下那样直接浏览url:http://awstats.cs.yilian.cc/cgi-bin/awstats.pl?config=www.xxx.com。

这是什么?打开看一下?

[root@localhost awstats-7.3]# cat tools/nginx/awstats-nginx.conf 
server {
        listen 127.0.0.1:80;
        server_name localhost;
        access_log /var/log/nginx/localhost.access_log main;
        error_log /var/log/nginx/localhost.error_log info;
        root /var/www/localhost/htdocs;
        index index.html;

        # Restrict access
        #auth_basic "Restricted";
        #auth_basic_user_file /etc/awstats/htpasswd;


        # Static awstats files: HTML files stored in DOCUMENT_ROOT/awstats/
        location /awstats/classes/ {
                alias /usr/share/awstats/wwwroot/classes/;
        }

        location /awstats/css/ {
                alias /usr/share/awstats/wwwroot/css/;
        }

        location /awstats/icon/ {
                alias /usr/share/awstats/wwwroot/icon/;
        }

        location /awstats-icon/ {
        alias /usr/share/awstats/wwwroot/icon/;
    }

        location /awstats/js/ {
                alias /usr/share/awstats/wwwroot/js/;
        }

        # Dynamic stats.
        location ~ ^/cgi-bin/(awredir|awstats)\.pl {
                gzip off;
                fastcgi_pass 127.0.0.1:9000;
                fastcgi_param SCRIPT_FILENAME /usr/share/awstats/wwwroot/cgi-bin/fcgi.php;
                fastcgi_param X_SCRIPT_FILENAME /usr/share/awstats/wwwroot$fastcgi_script_name;
                fastcgi_param X_SCRIPT_NAME $fastcgi_script_name;
                include fastcgi_params;
        }
}
[root@localhost awstats-7.3]# cat tools/nginx/awstats-fcgi.php 
<?php
$descriptorspec = array(
        0 => array('pipe', 'r'),  // stdin is a pipe that the child will read from
        1 => array('pipe', 'w'),  // stdout is a pipe that the child will write to
        2 => array('pipe', 'w')   // stderr is a file to write to
);

$newenv = $_SERVER;
$newenv['SCRIPT_FILENAME'] = $_SERVER['X_SCRIPT_FILENAME'];
$newenv['SCRIPT_NAME'] = $_SERVER['X_SCRIPT_NAME'];

if (is_executable($_SERVER['X_SCRIPT_FILENAME'])) {
        $process = proc_open($_SERVER['X_SCRIPT_FILENAME'], $descriptorspec, $pipes, NULL, $newenv);

        if (is_resource($process)) {
                fclose($pipes[0]);
                $head = fgets($pipes[1]);

                while (strcmp($head, "\n")) {
                        header($head);
                        $head = fgets($pipes[1]);
                }

                fpassthru($pipes[1]);
                fclose($pipes[1]);
                fclose($pipes[2]);

                $return_value = proc_close($process);
        } else {
                header('Status: 500 Internal Server Error');
                echo('Internal Server Error');
        }
} else {
        header('Status: 404 Page Not Found');
        echo('Page Not Found');
}

我看到了一个php文件和一个nginx配置文件,不用说,很明显是模板。我想如果不支持为什么要给模板呢。我打开了配置文件看了一下,发现awstats把fcgi给了9000端口,这不就是php-fpm么?我突然觉的,是不是nginx不能像apache那样直接处理perl但是他能处理php啊,这个php文件就应该就是实现了awstats.pl一样的功能。

修改了fastcgi_param SCRIPT_FILENAME上下两行的awstats-fcgi.php的位置,并把它拷贝到cgi-bin/目录下,配置文件复制到相应的nginx配置文件目录下。重载nginx,访问下试试。

你会发现可以通过http://awstats.cs.yilian.cc/cgi-bin/awstats.pl?config=www.xxx.com这种形式正常访问了对不对。

 配置文件的调整

以往我们都是通过awstats_configure.pl想到去创建配置文件,殊不知我们可以通过模板文件去拷贝然后使用include来引出模板配置文件,如我的配置文件如下

[root@localhost awstats]# ls
awstats.www.xxx.com.conf  awstats.www.xxx.com.conf  awstats.xxx.cc.conf  common.conf

common.conf就是我的模板文件。

[root@localhost awstats]# cat awstats.www.xxx.com.conf 
Include "common.conf"
LogFile="/home/log/nginx/access_%YYYY-0%MM-0%DD-24.log"
SiteDomain="www.xxx.com"  
DirData="/var/lib/awstats"  
[root@localhost awstats]# 

这样方便管理 每个配置文件也不大。

修改模板配置,是awstats中文乱码恢复。

通过网上的文章介绍需要修改配置文件选项:#LoadPlugin="decodeutfkeys",打开该选项取消注释。

但是会发生报错:

Error: Plugin load for plugin 'decodeutfkeys' failed with return code: Error: Can't locate URI/Escape.pm in @INC (@INC contains: /etc/perl /usr/local/lib/perl/5.10.1 /usr/local/share/perl/5.10.1 /usr/lib/perl5 /usr/share/perl5 /usr/lib/perl/5.10 /usr/share/perl/5.10 /usr/local/lib/site_perl . /usr/share/awstats/lib /usr/share/awstats/plugins) at (eval 3) line 1.
Setup ('/etc/awstats/awstats.bbsnuaa.conf' file, web server or permissions) may be wrong.
Check config file, permissions and AWStats documentation (in 'docs' directory).
wget http://search.cpan.org/CPAN/authors/id/G/GA/GAAS/URI-1.36.tar.gz

解压缩文件
tar zxvf URI-1.36.tar.gz

进入解压缩后目录
cd  URI-1.36

然后 perl Makefile.PL
make
make install

报错继续,然后使用另一种方法

安装URI/Escape模块

一种是通过perl shell网络安装:

[root@localhost cgi-bin]# perl -MCPAN -e 'install Encode'
Can't locate CPAN.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /usr/lib64/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib64/perl5 /usr/share/perl5 .).
BEGIN failed--compilation aborted.

缺少CPNA,然后下载CPNA 

wget http://www.cpan.org/authors/id/A/AN/ANDK/CPAN-1.9600.tar.gz

tar -zxvf CPAN-1.9600.tar.gz       

cd CPAN-1.9600 

perl Makefile.PL 

[root@localhost URI-1.60]# perl Makefile.PL
Can't locate ExtUtils/MakeMaker.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /usr/lib64/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib64/perl5 /usr/share/perl5 .) at Makefile.PL line 2.

还是报错,前前后后发现这个perl太费劲了,少了好多东西,没办法只好一个个安装。

yum install perl-Time-HiRes    

最后执行以下三部恢复。

perl -MCPAN -e 'install Encode'
perl -MCPAN -e 'install URI::Escape'

root@server ~]# perl -MCPAN -e shell

>install URI::Escape
解决乱码问题。

 

安装QQ纯真地址库

通过车东的博客学习到了安装QQ地址库的方法,但是安装过程相当惨烈啊。

安装如下:

把 qqhostinfo.pm,QQWry.dat,qqwry.pl三个文件拷贝到/home/awstats-7.3/wwwroot/cgi-bin/plugins下面
然后修改qqwry.pl文件,把里面的路径修改正确。
 my $ipfile="${DIR}/plugins/qqwry.dat"
注意${DIR}指定路径是什么,对应了的安装路径。
然后再执行 vim  defualt.conf(之前的模板配置文件)
添加:LoadPlugin="qqhostinfo"

到此QQ地址库算是安装完成了。

安装国家地理插件

1 因为我之前安装过,所以我就之前现在配置文件添加了插件信息。
2 所以我还是直接修改模板配置文件default.conf添加插件信息
3 LoadPlugin="geoip GEOIP_STANDARD /home/awstats-7.3/wwwroot/cgi-bin/GeoIP.dat"
4 LoadPlugin="geoip_city_maxmind GEOIP_STANDARD /home/awstats-7.3/wwwroot/cgi-bin/GeoLiteCity.dat"
5 这里我参考了http://blog.csdn.net/kumu_linux/article/details/8146958的博客
需要的安装包如下:
wget  http://geolite.maxmind.com/download/geoip/database/GeoLiteCity.dat.gz
wget  http://geolite.maxmind.com/download/geoip/database/GeoLiteCountry/GeoIP.dat.gz
然后把两个文件移入/home/awstats-7.3/wwwroot/cgi-bin目录中gunzip解压即可。

GeoIP安装步骤如下:

先下载GeoIP C库:

去https://www.maxmind.com/download/geoip/api/c/下载GeoIP-1.4.8.tar.gz 

# tar xf GeoIP-1.4.8.tar.gz 

cd进入解压目录,执行如下操作安装

# ./configure ; make && make install 

接下来下载GeoIP perl库:

去https://www.maxmind.com/download/geoip/api/perl/下载Geo-IP-1.40.tar.gz 

# tar xf Geo-IP-1.40.tar.gz 

cd 进入解压目录,执行如下操作安装

perl Makefile.PL LIBS='-L/usr/local/lib' 

//这里必需使用这种方法安装,笔者尝试把/usr/local/lib加入/etc/ld.so.conf.d/geoip.conf并执行ldconfig,单独执行perl Makefile.PL还是发现不了GeoIP的C库,所以只能以perl Makefile.PL LIBS='-L/usr/local/lib' 这种方式执行

# make && make install

 rm -rf /var/lib/awstats/* #删除旧的统计数据

/usr/local/awstats/tools/awstats_updateall.pl now

重新生成数据即可,查看监控页面就可以获取来访者的国家和地区了

 

这里面主要容易犯的错误就是发现不了GeoIP的C库,啥事GEOIP的C库 就是之前安装的GeoIP-1.4.8.tar.gz 这个东西,这个东西安装之后你会发现如下目录里面会多出东西

1 [root@localhost plugins]# ls /usr/local/lib/
2 libGeoIP.a  libGeoIP.la  libGeoIP.so  libGeoIP.so.1  libGeoIP.so.1.4.8  libGeoIPUpdate.a  libGeoIPUpdate.la  libGeoIPUpdate.so  libGeoIPUpdate.so.0  libGeoIPUpdate.so.0.0.0
3 [root@localhost plugins]# 
4 这些文件就是正确安装了C库出来的东西,如果没有 那么说明你C库安装不成功 ,建议查看是不是服务器少了支持perl的包,或者gcc这些基础的东西。

 

  参考文档:http://blog.csdn.net/kumu_linux/article/details/8146958

       http://www.chedong.com/tech/awstats.html

posted @ 2014-07-21 10:50 死侍 阅读(...) 评论(...) 编辑 收藏