Semaine 6 · Laboratoire

Varnish
devant Apache

Une nouvelle instance, une cache en avant du web, et des chiffres qui fondent : le laboratoire 2 de l'Application distribuée.

420-5A4-MT · Acte 5 · Le cache
Laboratoire Cache · Entreprise

Cornucopia · Encyclopédie Bio & Recettes

La ferme maraîchère de Flora et Hazel publie un grand catalogue interactif de recettes de saison et de fiches de culture bio.
Projet de la Ferme

Accueillir des centaines de milliers de visiteurs sur 500 fiches conseils avec photos et instructions de préparation.

Laboratoire Cache · Achalandage

Rush 500 000 vis/j : Varnish devant WordPress !

Sur le terrain

Niveau de Fréquentation

500 000 visiteurs par jour

⚠️ SURCHARGE INTENSIVE DU SERVEUR !

Le serveur PHP/MySQL recalcule des milliers de fois par minute exactement la même page HTML pour des visiteurs différents !

ANALYSE

Rapport du terrain

Le Problème Système

Temps de réponse de 2.5 secondes par page, processeur du serveur web à 100 % d'utilisation constante.

✅ Solution trouvée

Déployer Varnish HTTP Cache devant le site de Cornucopia pour servir les pages enregistrées en mémoire vive en 2 millisecondes !

Laboratoire Cache · Mission

La mission du jour

À la fin de la séance, vous aurez :

Point de départ : l'archive version 2.0 du cours, restaurée sur une instance tout-en-un neuve, wordpressmysql2 (référence : 192.168.56.2). Ni votre infrastructure du module 1, ni un WordPress neuf. Sa base de données vit encore avec elle : la séparation viendra la semaine prochaine, derrière Varnish, sans que le cache s'en aperçoive. Minimum 2 commits pertinents en classe cette semaine.

Laboratoire Cache · Devis

Varnish : la cache en avant

5 points Git : /votre-depot/cache/

Partez de l'archive version 2.0 du cours, restaurée sur une instance tout-en-un (wordpressmysql2), puis :

Mesures : test de charge BRUTAL avec JMeter, captures top à 10 et 60 secondes à chaque partie (performances_partie_2_10secondes.png, performances_partie_2_60secondes.png, de même pour 1 et 1b), tableau rempli (id par instance, temps moyen JMeter).

Barème : guide d'installation (2), fichiers de configuration (1,5, dont 0,5 pour les caches d'exécution), tableau rempli (1, dont 0,5 pour la ligne 1b), captures d'écran (0,5).

Minimum 2 commits pertinents en classe durant la semaine 6; le reste avant le cours de la semaine 7. Ce laboratoire doit être entièrement terminé pour le début de la semaine 7.

Laboratoire Cache · Topologie

Varnish

Topologie : un client 192.168.56.30 accède au serveur VARNISH 192.168.56.30, qui met en cache la seule machine virtuelle WORDPRESS-MYSQL 192.168.56.2 hébergeant Apache, WordPress et MySQL
Laboratoire Cache · Consignes

Varnish

La mise en place

  • Ajouter le service suivant à votre ensemble de serveurs existants avec les mêmes caractéristiques précédentes :
  • Un serveur qui offre le service de cache Varnish en avant de votre serveur HTTP (apache).
  • Modifier l'URL d'accès de WordPress pour utiliser l'IP du serveur varnish.

Le test de charge BRUTAL

  • Faire un test de charge BRUTAL avec JMeter pour documenter les performances de votre ensemble de serveurs actuel.
  • Faire une seule capture d'écran statique de la commande top exécutée en ssh de tous les serveurs actifs après environ 10 secondes de test (performances_partie_3_10secondes.png).
  • La même chose après environ 60 secondes de test (performances_partie_3_60secondes.png).
  • Noter dans un tableau la valeur idle du processeur (id) pour chaque serveur.
  • Noter dans un tableau la valeur moyenne (temps moyen de réponse) indiquée par JMeter.
Laboratoire Cache · Point de départ

📦 Livraison de la version 2.0

Le département de développement vient de vous livrer la nouvelle itération du site de Cornucopia, avec le guide des semis devenu viral. En tant qu'architecte de l'infrastructure, votre mission est de déployer cette version précise sur vos nouveaux serveurs.

⚠ Directive stricte de déploiement : pour réussir ce laboratoire, partez de la bonne fondation.

❌ N'utilisez pas votre conteneur ni votre infrastructure du module 1 : l'ancienne architecture est obsolète.

❌ Ne faites pas une installation neuve de WordPress : vous n'auriez ni la bonne base de données ni les bons réglages.

✅ Téléchargez l'archive officielle du cours : c'est cette version exacte qui est certifiée pour le déploiement distribué de ce module.

⬇ sauvegarde-cornucopia-semis.zip (45 Mo)

Dedans : README.md (les valeurs à connaître), fichiers-wordpress/ et base-de-donnees.sql.

Laboratoire Cache · Partie 1 · Étape A

Le tout-en-un reçoit les fichiers

Une instance neuve selon votre infrastructure : wordpressmysql2 (référence : 192.168.56.2), Apache, PHP et MySQL (MariaDB) sur la même machine.

sudo apt update
sudo apt install apache2 mariadb-server php libapache2-mod-php php-mysql unzip
wget https://evolutif.projet.autos/laboratoire/horizontal/caches/sauvegarde-cornucopia-semis.zip
unzip sauvegarde-cornucopia-semis.zip -d cornucopia
sudo rm /var/www/html/index.html
sudo cp -a cornucopia/fichiers-wordpress/. /var/www/html/
sudo chown -R www-data:www-data /var/www/html
Laboratoire Cache · Partie 1 · Étape B

La base revient, le site change d'adresse

Les valeurs viennent du README de l'archive : base cornucopia, utilisateur flora, mot de passe potager-2026. Puis on repointe le site vers votre instance.

sudo mysql -e "CREATE DATABASE cornucopia; CREATE USER 'flora'@'localhost' IDENTIFIED BY 'potager-2026'; GRANT ALL ON cornucopia.* TO 'flora'@'localhost';"
sudo mysql cornucopia < cornucopia/base-de-donnees.sql
sudo mysql cornucopia -e "UPDATE wp_options SET option_value='http://192.168.56.2' WHERE option_name IN ('siteurl','home');
UPDATE wp_posts SET post_content = REPLACE(post_content, 'https://cornucopia.projet.autos', 'http://192.168.56.2');
UPDATE wp_posts SET guid = REPLACE(guid, 'https://cornucopia.projet.autos', 'http://192.168.56.2');"
Laboratoire Cache · Partie 1 · Étape C

Les liens permanents

# les adresses des articles passent par le .htaccess de WordPress
sudo a2enmod rewrite
sudo nano /etc/apache2/apache2.conf
# le bloc existe deja : seule la ligne AllowOverride change (None devient All)
<Directory /var/www/>
Options Indexes FollowSymLinks
AllowOverride All
Require all granted
</Directory>
sudo systemctl restart apache2.service
Laboratoire Cache · Partie 1 · Étape D 📖 Guide JMeter1 · Construire4 · Brutaliser

La mesure de départ

secondes / serveurTOUT-EN-UNtemps moyen de réponse (seconde)
10 secondes
60 secondes
Laboratoire Cache · Partie 1b · Étape A 📖 Guide caches web1 · OPcache3 · Memcached

Les caches d'exécution : le serveur

Sur le même tout-en-un, avant Varnish : on mesure ce que les caches d'exécution rapportent seuls. Le détail est dans le guide Caches web.

# OPcache : regler, dans /etc/php/VERSION/apache2/php.ini
opcache.enable=1 opcache.memory_consumption=128 opcache.revalidate_freq=2
# le cache d'objets : le service Memcached et son extension PHP
sudo apt install memcached php-memcached
sudo systemctl restart apache2.service
# Memcached ecoute sur 127.0.0.1, port 11211 :
sudo netstat -tulpn | grep memcached
Laboratoire Cache · Partie 1b · Étape B 📖 Guide caches web3 · Memcached2 · APCu

WordPress se branche sur Memcached

L'extension W3 Total Cache relie WordPress à Memcached. Entrez dans le tableau de bord avec le compte agence, le seul administrateur : flora et hazel sont auteures et ne peuvent pas installer d'extension. Les menus de l'extension sont en anglais :

N'activez que le cache d'objets. Le cache de pages (« Page Cache ») reste éteint : servir des pages toutes prêtes, c'est le métier de Varnish à la partie 2. Sinon la mesure 1b mélange les deux.

Laboratoire Cache · Partie 1b · Étape C 📖 Guide caches web5 · Mesurer📖 Guide JMeter4 · Brutaliser

La preuve, puis la mesure

# avant, puis apres avoir visite quelques pages du site
echo stats | nc 127.0.0.1 11211 | grep -E 'get_hits|curr_items'
secondes / serveurTOUT-EN-UNtemps moyen de réponse (seconde)
10 secondes
60 secondes
Laboratoire Cache · Partie 2 · Étape 1 📖 Guide Varnish1 · Installation

La nouvelle instance et Varnish

# une instance varnish30 selon votre infrastructure (reference : 192.168.56.30)
sudo apt update
sudo apt install varnish net-tools
sudo netstat -tulpn | grep varnishd
# varnishd ecoute pour l'instant sur son port par defaut (6081)

Rappel clonage : nouvelle adresse MAC, nouveau nom d'hôte (varnish30), nouvelle adresse IP. Un clone qui garde l'identité de son parent sème le chaos sur le réseau.

Laboratoire Cache · Partie 2 · Étape 2 📖 Guide Varnish2.1 · Port 80

Varnish prend le port 80

sudo systemctl edit varnish.service
[Service]
ExecStart=
ExecStart=/usr/sbin/varnishd -j unix,user=vcache -F -a ADRESSE_DE_VARNISH30:80 -T localhost:6082 -f /etc/varnish/default.vcl -S /etc/varnish/secret
sudo systemctl daemon-reload
sudo systemctl restart varnish.service

Le pare-feu de varnish30 s'ouvre au strict nécessaire : le port 80 pour les visiteurs, le 22 pour vous. La procédure est à l'étape suivante.

Laboratoire Cache · Partie 2 · Étape 2 · Suite 📖 Guide Varnish2.3 · Pare-feu

Le pare-feu de varnish30

Ubuntu fournit ufw. On ouvre d'abord la porte de l'administration, ensuite celle des visiteurs, et seulement alors on active le pare-feu.

# 1. SSH d'abord : sinon l'activation vous met dehors
sudo ufw allow 22/tcp
# 2. HTTP pour les visiteurs
sudo ufw allow 80/tcp
# 3. tout le reste est refuse a l'entree
sudo ufw enable
sudo ufw status verbose
Status: active
Default: deny (incoming), allow (outgoing), disabled (routed)
22/tcp ALLOW IN Anywhere
80/tcp ALLOW IN Anywhere
Laboratoire Cache · Partie 2 · Étape 3 📖 Guide Varnish2.2 · Backend2.3 · Apache

Le backend, et Apache qui se replie

# sur varnish30 : declarer le fournisseur
sudo nano /etc/varnish/default.vcl
backend default { .host = "ADRESSE_DU_TOUT_EN_UN"; .port = "80"; }
# sur wordpressmysql2 (le tout-en-un) : ecouter seulement sur sa propre adresse
sudo nano /etc/apache2/ports.conf
# la ligne Listen 80 devient :
Listen ADRESSE_DU_TOUT_EN_UN:80
sudo nano /etc/apache2/sites-enabled/000-default.conf
<VirtualHost ADRESSE_DU_TOUT_EN_UN:80>
sudo systemctl restart apache2.service
Laboratoire Cache · Partie 2 · Étape 4 📖 Guide Varnish6 · URL de WordPress

WordPress déménage officiellement

sudo varnishstat -1 | grep -i cache
MAIN.cache_hit 412
MAIN.cache_miss 37
Laboratoire Cache · Partie 2 · Étape 5 📖 Guide JMeter4 · Brutaliser📖 Guide Varnish3 · Tester4 · Journaux

La preuve par les chiffres

secondes / serveurTOUT-EN-UNVARNISHtemps moyen de réponse (seconde)
10 secondes
60 secondes
Laboratoire Cache · Barème

Varnish

Dans Git : /votre-depot/cache/
  • (2 points) sa version de son guide d'installation
  • (1 point) les fichiers de configurations utilisés
  • (1 point) le tableau rempli
  • (1 point) les captures d'écran

Un minimum de 2 commits pertinents doit être effectué en classe durant la semaine 2, les autres devant être complétés avant le cours de la semaine 3. Ce laboratoire doit être entièrement terminé pour le début de la semaine 3.

Laboratoire Cache · Avant de partir

Livrables et devoir

La semaine prochaine, l'acte 6 : les Guildes ouvrent - profils de membres et points calculés en temps réel, du contenu personnalisé que la cache ne peut pas servir. On sépare la base de données du web, chacun sa machine, et on mesure le gain.