UnPeuPlus[FeedShow RSS reader]

L’impact de Twitter sur l’hébergement d’un blog

Date: Friday, 20 Nov 2009 09:21

Ce blog a un trafic raisonnable (~1000 visiteurs uniques par jour) et avec mes quelques réglages une part de serveur Gandi devrait suffire.
Pourtant, ce n’était pas le cas (plantages réguliers)

J’ai donc essayé de piger pourquoi, jusqu’à changer la distrib Linux Gandi pour une Debian (pour être certain de bien comprendre les réglages que je faisais)
Malgré le passage à 2 parts Gandi, sur une Debian (avec le blog en memcache) je continuais à avoir des plantages liés à la charge…

Voici un graph avec la journée d’hier (1200 visites) :

1 – Ce tweet + une quinzaine de ReTweet
2 – Ce tweet avec là aussi un certain nombre de ReTweet (surtout que Korben est très actif dans le domaine lié au billet)
3 – Ce tweet + quelques ReTweet.
Je pense que le trafic en fin d’aprem est issu des personnes qui lisent ce blog via les flux RSS.

Twitter est donc une superbe source de trafic, mais son défaut vient du fait que l’afflux se fait de manière très brutale (vive le web temps réel )
Le serveur ne doit donc plus encaisser un trafic lissé sur une journée mais des rush successifs.

Cela pose un problème pour le système de sondes Gandi : le déclenchement de parts supplémentaires se fait automatiquement au bout de 20 min de surcharge serveur, ce qui est trop long pour ce type de phénomènes.

En ce qui concerne mes plantages, le problème venait du plugin WP pour récupérer les tweets commentant les billets :
- Le temps d’accéder au search de Twitter, Apache poirotait.
- Pendant ce temps les nouveaux visiteurs déclenchaient cette même recherche (car le résultat n’était pas encore arrivé)
- a chaque nouveau tweet/RT la page était mise à jour et donc le cache détruit -> montée en charge soudaine.

Depuis que je l’ai supprimé, avec 2 parts Gandi tout roule (j’ai eu un court timout MySQL hier mais rien de méchant)