Qu’est ce que Awstats ? C’est un analyseur de fichiers logs générés par apache. Il permet de créer des statistiques pour son serveur ou domaines (en configuration multisite).

Il permet d’afficher sous forme de tableau/graphiques le nombre de visites, de visiteurs uniques, de pages, de hits, de transfert, par domaine/pays, hôte, heure, navigateur, OS, …

Le fonctionnement est simple : un script CGI (

awstats.pl) génère les stats à partir des fichiers log apache et les affiche sur une interface web.

Il peut être lancé grâce à des scripts CGI ou en ligne de commande.

AWStats est un logiciel libre sous licence GPL.

Vous pouvez voir ici de jolis screenshots de ses capacités.

Installation

Il faut évidemment avoir un serveur apache déja fonctionnel

Les paquets que nous allons installer sont :

awstats            # Paquet principal
libmldbm-perl      # pour le plugin hashfiles
libnet-xwhois-perl # pour le plugin HostInfo
libgeo-ipfree-perl # pour le plugin geoipfree

Ou plus simple il suffit de copier dans votre console :

apt-get install awstats libmldm-perl libnet-xwhois-perl libgeo-ipfree-perl

L’installation se fait dans

/usr/share/awstats/

Le script CGI se trouve dans :

/usr/lib/cgi-bin/awstats.pl

Configuration

Les fichiers de configuration se trouvent dans :

/etc/awstats/

Le fichier par défaut est : awstats.hostname.conf

il faut en avoir un par site et les renomer sous la forme :

awstats.www.monsite.com.conf

Maintenant éditez le fichier de config et remplacer  les paramètres suivants :

Copiez le script cgi dans le dossier /cgi-bin/ de votre site :

cp /usr/lib/cgi-bin/awstats.pl /var/www/monsite/cgi-bin/

Copiez le contenu awstat

cp -r /usr/share/awstats/ /var/www/monsite/awstats/

Tester l’analyse des logs

Maintenant il nous reste à modifier les Vhost de notre site

d’abord créez un alias pour apache :

Automatiser la mise à jour des stats

Editez la crontab pour mettre à jour les stats automatiquement chaque nuit :

et voilà !

Serveur FTP

ProFTPd est un serveur FTP libre très puissant, bien documenté avec une configuration simple d’accès, possédant une syntaxe proche de celle d’Apache.

Proftpd

Installation

apt-get install proftpd

Configuration

Edition de la configuration :

vi /etc/proftpd/proftpd.conf

Nous allons modifier les options suivantes :

UseIPv6 off

Ne pas utiliser IPv6 si ce n’est pas nécessaire

DefaultRoot ~

Le répertoire de destination par défaut des utilisateurs est leur propre home directory.

IdentLookups off

Désactive l’identification distante

RootLogin off

Ne pas permettre à root de s’identifier pour des raisons de sécurité

ServerIdent on « FTP Server ready. »

Message minimaliste affiché à la connexion

ShowSymlinks off

Ne pas afficher les liens symboliques

AllowStoreRestart on

Autoriser la reprise d’un upload de fichier (resuming)

AllowRetrieveRestart on

Autoriser la reprise d’un téléchargement de fichier

Si vous ne parvenez pas à vous connecter, une parade consiste à désactiver le module sql postgres, en commentant avec # la ligne correspondante dans le fichier /etc/proftpd/modules.conf :

vi /etc/proftpd/modules.conf

# LoadModule mod_sql_postgres.c

Redémarrer le tout :

/etc/init.d/proftpd restart

Proftpd-mysql

Par défaut, les comptes FTP sont ceux des utilisateurs de la machine. Dans le cas d’un serveur d’hébergement, il peut être intéressant de gérer les utilisateurs et groupes indépendamment. Le module proftpd-mysql permet de stocker ces informations dynamiquement dans une base de données MySQL.

Si vous utilisez un panel d’administration (tel que DTC), cette étape est facultative, car elle sera gérée par le panel lui-même (le tutoriel prend donc fin ici).

Proftpd-mysql s’installe grâce à APT et au paquet du même nom :

apt-get install proftpd-mysql

Il faut ensuite créer la structure de la base de données. Connectez-vous en root pour définir les droits d’accès :

CREATE DATABASE `proftpd`;

GRANT SELECT, INSERT, UPDATE, DELETE ON proftpd.* TO 'proftpd'@'localhost'
IDENTIFIED BY motdepasse_proftpd;
FLUSH PRIVILEGES;

Puis mettre en place les tables :

USE proftpd;

CREATE TABLE `ftpgroup` (
`groupname` varchar(16) NOT NULL default '',
`gid` smallint(6) NOT NULL default '5500',
`members` varchar(16) NOT NULL default '',
KEY `groupname` (`groupname`)
) TYPE=MyISAM COMMENT='Table des groupes ProFTPD';

CREATE TABLE `ftpquotalimits` (
`name` varchar(30) default NULL,
`quota_type` enum('user','group','class','all') NOT NULL default 'user',
`par_session` enum('false','true') NOT NULL default 'false',
`limit_type` enum('soft','hard') NOT NULL default 'soft',
`bytes_up_limit` float NOT NULL default '0',
`bytes_down_limit` float NOT NULL default '0',
`bytes_transfer_limit` float NOT NULL default '0',
`files_up_limit` int(10) unsigned NOT NULL default '0',
`files_down_limit` int(10) unsigned NOT NULL default '0',
`files_transfer_limit` int(10) unsigned NOT NULL default '0'
) TYPE=MyISAM COMMENT='Table des quotas ProFTPD';

CREATE TABLE `ftpquotatotal` (
`name` varchar(30) NOT NULL default '',
`quota_type` enum('user','group','class','all') NOT NULL default 'user',
`bytes_up_total` float NOT NULL default '0',
`bytes_down_total` float NOT NULL default '0',
`bytes_transfer_total` float NOT NULL default '0',
`files_up_total` int(10) unsigned NOT NULL default '0',
`files_down_total` int(10) unsigned NOT NULL default '0',
`files_transfer_total` int(10) unsigned NOT NULL default '0'
) TYPE=MyISAM COMMENT='Table des compteurs des quotas ProFTPD';

CREATE TABLE `ftpuser` (
`id` int(10) unsigned NOT NULL auto_increment,
`userid` varchar(32) NOT NULL default '',
`passwd` varchar(32) NOT NULL default '',
`uid` smallint(6) NOT NULL default '5500',
`gid` smallint(6) NOT NULL default '5500',
`homedir` varchar(255) NOT NULL default '',
`shell` varchar(16) NOT NULL default '/bin/false',
`count` int(11) NOT NULL default '0',
`accessed` datetime NOT NULL default '0000-00-00 00:00:00',
`modified` datetime NOT NULL default '0000-00-00 00:00:00',
`LoginAllowed` enum('true','false') NOT NULL default 'true',
PRIMARY KEY (`id`)
) TYPE=MyISAM COMMENT='Table des utlisateurs ProFTPD'

Editez /etc/proftpd/proftpd.conf pour activer le support MySQL en vérifiant les identifiants de connexion :

# Cryptage
SQLAuthTypes Crypt
SQLAuthenticate users* groups*

# Identifiants de connexion
SQLConnectInfo proftpd@localhost proftpd motdepasse_proftpd

# Colonnes utilisées pour les utilisateurs
SQLUserInfo ftpuser userid passwd uid gid homedir shell
SQLUserWhereClause "LoginAllowed = 'true'"

# Colonnes utilisées pour les groupes
SQLGroupInfo ftpgroup groupname gid members

# Créer le répertoire home par défaut
SQLHomedirOnDemand on

# Mise à jour des compteurs de connexion
SQLLog PASS updatecount
SQLNamedQuery updatecount UPDATE "count=count+1, accessed=now() WHERE userid='%u'" ftpuser

# Mise à jour des compteurs de trafic
SQLLog STOR,DELE modified
SQLNamedQuery modified UPDATE "modified=now() WHERE userid='%u'" ftpuser

# Quota
QuotaEngine on
QuotaDirectoryTally on
QuotaDisplayUnits Mb
QuotaShowQuotas on

# Requêtes SQL relatives aux quotas

SQLNamedQuery get-quota-limit SELECT "name, quota_type, par_session, limit_type, bytes_up_limit, bytes_down_limit, bytes_transfer_limit, files_up_limit, files_down_limit, files_transfer_limit FROM ftpquotalimits WHERE name = '%{0}' AND quota_type = '%{1}'"

SQLNamedQuery get-quota-tally SELECT "name, quota_type, bytes_up_total, bytes_down_total, bytes_transfer_total, files_up_total, files_down_total, files_transfer_total FROM ftpquotatotal WHERE name = '%{0}' AND quota_type = '%{1}'"

SQLNamedQuery update-quota-tally UPDATE "bytes_up_total = bytes_up_total + %{0}, bytes_down_total = bytes_down_total + %{1}, bytes_transfer_total = bytes_transfer_total + %{2}, files_up_total = files_up_total + %{3}, files_down_total = files_down_total + %{4}, files_transfer_total = files_transfer_total + %{5} WHERE name = '%{6}' AND quota_type = '%{7}'" ftpquotatotal

SQLNamedQuery insert-quota-tally INSERT "%{0}, %{1}, %{2}, %{3}, %{4}, %{5}, %{6}, %{7}" ftpquotatotal

QuotaLimitTable sql:/get-quota-limit
QuotaTallyTable sql:/get-quota-tally/update-quota-tally/insert-quota-tally;

Redémarrez le service :

/etc/init.d/proftpd restart

La gestion des utilisateurs dans ces tables étant relativement explicite d’après leur structure, celle-ci ne sera pas développée pour le moment. Reportez-vous à la Documentation Ubuntu Francophone si nécessaire.

Ajoutez un enregistrement dans la table ftpuser pour chaque utilisateur, le mot de passe étant encrypté par la fonction mysql ENCRYPT.
Ajoutez un enregistrement dans la table ftpgroup pour chaque groupe. Le champ members contenant les logins (en texte) des membres de ce groupe.

MySQL

MySQL est le serveur de bases de données le plus répandu pour les serveurs web. Il allie une grande souplesse d’utilisation et de nombreuses fonctionnalités, tandis que sa mise en œuvre reste simple.

Installation

Grâce à APT nous installons les paquets correspondants :

apt-get install mysql-server mysql-client libmysqlclient15-dev mysql-common

Configuration

La configuration de base est stockée dans /etc/mysql/my.cnf

vi /etc/mysql/my.cnf

Voici quelques options intéressantes à modifier par défaut

language = /usr/share/mysql/french

Choisir la langue par défaut pour les messages du serveur (français)

key_buffer = 32M

Taille du cache des index

query_cache_limit = 2M

Taille limite du cache par requête

query_cache_size = 32M

Taille totale du cache des requêtes

#log_bin = /var/log/mysql/mysql-bin.log
#expire_logs_days = 10

Désactiver le log binaire en commentant ces deux lignes grâce à # (le log binaire n’est utile que dans le cas de réplications avec serveurs maître-esclave)

log_slow_queries = /var/log/mysql/mysql-slow.log

Mettre en log les requêtes lentes (utile pour les repérer et les optimiser)

long_query_time = 2

Durée (en secondes) à partir de laquelle une requête est considérée comme lente

[mysqld]

default-character-set = utf8

Jeu de caractères par défaut pour le serveur

default-collation = utf8_general_ci

Collation du jeu de caractères

[client]

default-character-set = utf8

Jeu de caractères par défaut pour le client

N’oubliez pas de recharger le serveur suite à ces modifications :

/etc/init.d/mysql reload

Optimisation

Si vous désirez optimiser cette configuration (après l’avoir exploitée, les statistiques n’étant pas représentatives au départ), faites appel à MySQLTuner. Il s’agit d’un script écrit en Perl qui ne modifiera pas votre configuration mais vous proposera des améliorations.

wget http://mysqltuner.com/mysqltuner.pl
chmod +x mysqltuner.pl
./mysqltuner.pl

Sécurisation

Il est facile de mettre en place quelques règles simples pour sécuriser le serveur, grâce au script :

mysql_secure_installation

Et en répondant à quelques questions :

Set root password ? Y

Permet de modifier le mot de passe root (de mysql)

Remove anonymous users ? Y

Retire les accès anonymes

Disallow root login remotely ? Y

Retire l’accès root distant (recommandé)

Remove test database and access to it ? Y

Retire la base test et ses accès

Reload privilege tables now ? Y

Recharge les privilèges suite aux modifications

Connexion

Vous pourrez vous connecter en ligne de commande grâce au client :

mysql -ulogin -pmotdepasse

Ou bien en utilisant un client graphique, voire aussi phpMyAdmin (installation par défaut : apt-get install phpmyadmin puis éditez config.inc.php ou recopiez-le à partir de config.sample.inc.php)

Cet espace, résultat de mon envie de partager, sera, j’espère,  un lieu où vous vous plaîrez. Comme vous pouvez le constater, le site est tout frais. Il en résulte que des erreurs peuvent subsister par endroit. Si vous en découvrez, n’hésitez pas à me les signaler.
Sans plus tarder, je vous laisse découvrir d’autres billets