Awstats permet de générer des statistiques pour son serveur. Voici de jolis screenshots de ses capacités.

Nous supposons Apache déjà installé et fonctionnel

Paquets nécessaires

awstats            # Paquet principal
libmldbm-perl      # pour le plugin hashfiles
libnet-xwhois-perl # pour le plugin HostInfo
libgeo-ipfree-perl # pour le plugin geoipfree

L'installation se fait dans

/usr/share/awstats/

AWStats est un script CGI, son exécutable est :

/usr/lib/cgi-bin/awstats.pl

Il(s) se trouve(nt) dans :

/etc/awstats/

Il faut en mettre un par site :

sudo cp awstats.conf awstats.ma_machine.mon_domaine.mon_pays.conf

où 'ma_machine.mon_domaine.mon_pays' correspond à l'url de la machine qui permettra de consulter les statistiques avec un navigateur à l'adresse : http://ma_machine.mon_domaine.mon_pays/cgi-bin/awstats.pl

Réglez ce(s) fichier(s) de configuration(s) avec notamment dans le cas d'un serveur web apache :

LogType=W
LogFormat=1
LogFile="/var/log/apache2/access.log" pour apache2
SiteDomain="ma_machine.mon_domaine.mon_pays"

Voir les explications contenues dans le fichier pour les autres options

sudo /usr/lib/cgi-bin/awstats.pl -config=ma_machine.mon_domaine.mon_pays –update

... quelques instants plus tard, si tout va bien ...

Update for config "/etc/awstats/awstats.stats.ma_machine.mon_domaine.mon_pays.conf"
With data in log file "/var/log/apache/access.log"...
Phase 1 : First bypass old records, searching new record...
Searching new records from beginning of log file...
Phase 2 : Now process new records (Flush history on disk after 20000 hosts)...
Jumped lines in file: 0
Parsed lines in file: 34782
 Found 40 dropped records,
 Found 0 corrupted records,
 Found 0 old records,
 Found 34742 new qualified records.

cd /var/log/apache*

for i in access.log.*.gz; do
    zcat $i | /usr/lib/cgi-bin/awstats.pl -config=ma_machine.mon_domaine.mon_pays -update;
done

/var/lib/awstats/awstats052007.ma_machine.mon_domaine.mon_pays.txt

Il y a un fichier par mois et par site

Créez le fichier : /etc/apache2/sites-available/awstats le remplir avec :

Alias /awstatsclasses "/usr/share/awstats/classes/"
Alias /awstatscss "/usr/share/awstats/css/"
Alias /awstats-icon "/usr/share/awstats/icon/"

ScriptAlias /stats /usr/lib/cgi-bin/awstats.pl

# mêmes paramètres que dans awstats.*.conf
<Directory /usr/lib/cgi-bin/>
  DirectoryIndex awstats.pl
  UseCanonicalName off
#  AuthName "Statistiques awstats"
#  AuthType Basic
#  Require valid-user
#  AuthUserFile /che/min/.passwdstats
  Options +ExecCGI
  AllowOverride None
  Order allow,deny
  Allow from all
</Directory>

créez un lien symbolique dans /etc/apache2/sites-enabled vers ce fichier

Ou directement en ligne de commande

a2ensite awstats

Ajustez la gestion des droits d'accès selon votre besoin de confidentialité

http://ma_machine.mon_domaine.mon_pays/cgi-bin/awstats.pl

et même si tout va bien :

http://ma_machine.mon_domaine.mon_pays/stats/

Tous les mois sur le site de MaxMind une base GeoIP gratuite est fournie.

Ce fichier va permettre d'effectuer la correspondance entre les adresses IP et les pays correspondants. Un domaine en .com par exemple peut se trouver en France, en Australie ou au Zimbabwe. Ce traitement va nous permettre de différencier les origines des internautes et d'affecter le nombre de pages et de hits aux pays correspondants. En résumé, il faut installer la base GeoIP, le programme PurePerl, modifier le fichier de configuration du site et le plugin geoip.

• Récuperer la base GeoIp à l'adresse suivante http://www.maxmind.com/download/geoip/database/. Vous pourrez téléchargez cette base tous les mois, car MaxMind la met à jour mensuellement.

• Placez le fichier dans le fichier /usr/share/awstats/lib/, puis dézippez le avec la commande gunzip GeoIP.dat.gz

• Ensuite, il vous faut récupérer le fichier PurePerl.pm que vous trouverez à l'adresse http://www.maxmind.com/download/geoip/api/pureperl/. Vous devrez désarchiver le fichier (version actuelle: Geo-IP-PurePerl-1.18.tar.gz) avec la commande tar xzf Geo-IP-PurePerl-1.18.tar.gz

• Copiez le fichier PurePerl.pm qui se trouve le répertoire /lib/Geo/Ip dans le répertoire /usr/share/awstats/lib/

• Modifiez le fichier PurePerl.pm aux alentours de la ligne 135 (Fonction: sub new) en indiquant le chemin absolu d'accès à la base GeoIP.dat (/usr/share/awstats/lib/)

• Modifiez le fichier geoip.pm dans le répertoire /usr/share/awstats/plugins, aux alentours de la ligne 20 (Entête de la fonction: # ENTER HERE THE USE COMMAND FOR ALL REQUIRED PERL MODULES). Afin de lui indiquer le chemin absolu du fichier /usr/share/awstats/lib/PurePerl.pm

• Ensuite, il ne vous reste plus qu'à ajouter le code suivant à la fin de votre fichier de configuration de votre site :

# Plugin: GeoIP
# Perl modules required: Geo::IP or Geo::IP::PurePerl (from Maxmind)
# Country chart is built from an Internet IP-Country database.
# This plugin is useless for intranet only log files.
# Note: You must choose between using this plugin (need Perl Geo::IP module 
# from Maxmind, database more up to date) or the GeoIPfree plugin (need
# Perl Geo::IPfree module, database less up to date).
# This plugin reduces AWStats speed of 8% !
#
LoadPlugin="geoip GEOIP_STANDARD /usr/share/awstats/lib/GeoIP.dat"

Si vous avez beaucoup de fichiers téléchargés sur votre site, ce plugin vous indiquera les 20 fichiers les plus téléchargés. Pour l'installer, il vous suffit d'ajouter ce bout de code à la fin de votre fichier de configuration de votre site :

#-----------------------------------------------------------------------------
# EXTRA SECTIONS
#-----------------------------------------------------------------------------

# Affichage du Top 20 des Téléchargements
ExtraSectionName1="Téléchargements (Top 20)"
ExtraSectionCodeFilter1="200 304"
ExtraSectionCondition1="URL,(.*((\.doc)|(\.exe)|(\.msi)|(\.pdf)|(\.rtf)|(\.swf)|(\.txt)|(\.vbs)|(\.xls)|(\.zip)))"
ExtraSectionFirstColumnTitle1="Téléchargements"
ExtraSectionFirstColumnValues1="URL,(.*)"
ExtraSectionFirstColumnFormat1="%s"
ExtraSectionStatTypes1=HBL
ExtraSectionAddAverageRow15=0
ExtraSectionAddSumRow1=1
MaxNbOfExtra1=20
MinHitExtra1=1

Vous allez devoir créer un fichier de config pour chaque serveur

 cd /etc/awstats/
 cp awstats.conf awstats.ftp.conf

Editez le fichier /etc/awstats/awstats.ftp.conf

Changez les variables suivantes

 LogFile="/var/log/xferlog" 
 LogType=F 
 LogFormat="%time1 %host %logname %method %url %code %bytesd" 
 LogSeparator="\t"  

Editez ensuite le fichier: /etc/proftpd/proftp.conf

Ajoutez les lignes suivantes au fichier (à la suite des commandes identiques existants déja).

 LogFormat awstats "%t %h %u %m %f %s %b"     
     #TRES IMPORTANT
     # Remplacez tous les espaces par des tabulations dans la ligne du dessus

 ExtendedLog /var/log/xferlog read,write awstats     
     # Peu fréquent
     # Si vous utilisez les virtual hosts vous devriez peut être placer cette directive dans le bon "contexte"  
 TransferLog none     
     # Si vous utilisez les virtual hosts vous devriez peut être placer cette directive dans le bon "contexte"  

Supprimez /var/log/xferlog et redémarrez votre serveur:

 rm /var/log/xferlog && /etc/init.d/proftpd restart

Créez un peu de trafique sur votre logiciel ftp, en téléchargeant un fichier par exemple.
Puis executez la commande:

 /usr/lib/cgi-bin/awstats.pl -config=ftp ?update

Tout devrait bien s'être déroulé.
Si vous avez un message qui vous dit qu'il y a des corrupted records, faites bien attentions à la note concernant les tabulations, c'est source d'erreur !

Voila, votre serveur proftpd est maintenant monitoré.

je vous invite à lire l'article suivant pour plus d'options:
FAQ-COM090 : SETUP FOR FTP SERVER LOG FILES (proftpd, vsftpd, ...) http://awstats.sourceforge.net/docs/awstats_faq.html#FTP

Le cron de awstats se trouve ici:

/etc/cron.d/awstats

Il est généré par défaut et ressemble à ça :

0,10,20,30,40,50 * * * * www-data [ -x /usr/lib/cgi-bin/awstats.pl -a -f /etc/awstats/awstats.conf -a -r /var/log/apache/access.log ] && /usr/lib/cgi-bin/aws
tats.pl -config=awstats -update >/dev/null

En détail ça donne:

0,10,20,30,40,50 * * * *

Exécutez le cron toutes les dix minutes

www-data

avec l'utilisateur www-data

[ -x /usr/lib/cgi-bin/awstats.pl
  -a -f /etc/awstats/awstats.conf
  -a -r /var/log/apache/access.log ]

faites des vérifications sur Des fichiers. man test pour en savoir plus.

&& /usr/lib/cgi-bin/awstats.pl -config=awstats -update

Exécutez cette commande si les vérifications sont OK

>/dev/null

Ne pas loguer le résultat de la commande.

A configurer en fonction de sa config mais, on peut habilement le changer par :

0 * * * * root /usr/lib/cgi-bin/awstats.pl -config=ma_machine.mon_domaine.mon_pays -update >/dev/null

Contrib: rapidos

Allez dans le répertoire /etc/cron.daily et créez un nouveau fichier:

 emacs /etc/cron.daily/awstats

Copiez le script shell ci-dessous dans le fichier nouvellement créé.

 #!/bin/bash
 # Chemin de l'application awstats
 AWS=/usr/local/awstats/wwwroot/cgi-bin/awstats.pl 
 # Vos domaines
 # Exemple: DOMAINS="www.monsite.com ftp"
 DOMAINS="ma_machine.mon_domaine.mon_pays ftp"
 # Petite boucle qui va bien
 for d in ${DOMAINS}
 do
    ${AWS} -update -config=${d}
 done

Vous n'avez qu'a modifier le contenu de la variable domaines en fonctions de vos domaines.
Tous les jours le systeme se chargera de générer des statsitiques pour vous

Lors de la rotation des logs d'apaches, on peut inscrire des bouts de scripts dans le logrotate.

Des scripts Adblock un peu trop virulents, blacklistent complètement awstats. Ne pas passer trois heures à se demander ce qui se passe (comme moi), alors qu'il suffit de désactiver Adblock.

Pour analyser les logs de chaque vhost, apache doit être configuré. Voici donc un exemple de configuration de vhost:

<VirtualHost 212.11.36.52>
		ServerAdmin email@site.com
		DocumentRoot /var/www/site.com/www
		ServerName www.site.com
		ErrorLog /var/www/site.com/logs/www.error.log
		CustomLog /var/www/site.com/logs/www.access.log combined
</VirtualHost>

• Piwik - une jolie alternative a Awstats.

• http://ernest.tuxicity.net/index.php?choix=Apache&tuto=awstats-debian
• http://pwet.fr/blog/statistiques_web_avec_awstats_sous_ubuntu_en_mode_cgi
• http://www.petersblog.org/node/697
• site officiel
• Baudelet fr