Vie de ViaBloga

par BaB le Lundi 21/04/2008 à 09:42

Si tout à fait et ce matin c'est (c'était) flagrant...
Mais il doit y avoir tellement de facteurs qui entrent en ligne de compte :-)

---

par Caroline le Lundi 21/04/2008 à 10:36

Chez moi aussi c'est lent ce matin, et ça bloque parfois (proxy error...).

---

par Stephane le Lundi 21/04/2008 à 11:00

Je regarde.

---

Pas de ralentissement, non ... c'est pire ... par labosonic le Lundi 21/04/2008 à 16:17

Critico-Blog est complétement en rade, lui (depuis dimanche minuit) et montrait des signes inquiétants de ralentissement depuis samedi (Message 502 Bad Gateway dès qu'on valide un article) et si j'en crois le seul moyen que j'ai d'avoir des infos sur le blog actuellement (la liste des widgets que j'ai créé), sa structure mot-clés est partie en sucettes.
Merci de corriger tout ça au plus vite.

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 17:13

J'ai remis la structure des mots-clés. Par contre les commandes dynamiques sont trop gourmandes (beaucoup de commandes avec beaucoup d'articles), du coup la page prend beaucoup de temps à générer, et au bout d'un moment ça timeout, d'où le proxy error. Il va falloir qu'on trouve un moyen d'optimiser ça pour que ça aille beaucoup plus vite. On devrait au moins pouvoir cacher le résultat de toutes les commandes qui n'ont pas de random.

---

Re: Pas de ralentissement, non ... c'est pire ... par labosonic le Lundi 21/04/2008 à 19:30

Histoire qu'il n'y ait pas de malentendu entre nous, peux-tu préciser à quelles commandes dynamiques tu fais allusion ?

- Est-ce que ce sont les commandes qui sont inclues dans le design des colonnes (4 fois Afficher l'image du dernier article publié, Afficher un nuage de mot-clés, Afficher les trois articles les plus lus et une image ) ?
- Est-ce qu'il y a trop d'articles sur la page principale ?
- Est-ce que ce sont les moteurs de recherche dynamiques ?

- D'autres choses comme celles-ci, celles-là ou ce mini-portail ?

Si je n'ai pas vraiment d'idée de ce qui cloche je peux difficilement être d'accord avec ton idée de cacher le résultat des commandes qui n'ont pas de random.

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 19:39

Je ne sais pas encore quelles commandes posent problème, je suis en train de regarder. Tout ce que je peux te dire pour l'instant c'est qu'il faut environ 5 secondes pour générer ta page d'index, et que passer ton site du serveur 1 au serveur 2 a fait passer la charge de 10 à 2 sur le serveur 1. C'est certainement à cause des commandes d'affichage des articles, mais je ne sais pas encore lesquelles. Leur provenance n'entre pas en compte (qu'elles soient dans un bloc ou dans le sommaire des articles). Mettre moins d'articles arrangera les choses s'il y a des commandes dans le sommaire des articles, sinon quasiment pas. Je suis en train d'analyser tes commandes pour voir si on peut les exécuter plus vite.

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 20:15

En fait le problème c'est qu'il y a 133 commandes executées sur ta page d'accueil. Je ne sais pas si c'est normal (bug de mon coté) et voulu (bug de ton coté), mais c'est ça qui prend un paquet de temps.

Voici le détail du temps passé (en secondes) par commande sur la page d'accueil :

 0.06576 [ [afficher les articles] ].[ [Dasola] ].total
 0.069726        [ [afficher les articles] ].[ [The never ending blog] ].total
 0.071655        [ [afficher les articles] ].[ [Valunivers] ].total
 0.067555        [ [afficher les articles] ].[ [Cahier Critique] ].total
 0.067551        [ [afficher les articles] ].[ [Glop ou Pas Glop] ].total
 0.065964        [ [afficher les articles] ].[ [Playlist Society] ].total
 0.064998        [ [afficher les articles] ].[ [Mickaël] ].total
 0.065561        [ [afficher les articles] ].[ [L'oreille en feu] ].total
 0.065697        [ [afficher les articles] ].[ [Mythologies] ].total
 0.065873        [ [afficher les articles] ].[ [Goin' to the movies] ].total
 0.065811        [ [afficher les articles] ].[ [Les yeux sur l'écran] ].total
 0.066042        [ [afficher les articles] ].[ [Berceuse électrique] ].total
 0.066881        [ [afficher les articles] ].[ [Les bouquins de maman] ].total
 0.065864        [ [afficher les articles] ].[ [Moisson Noire] ].total
 0.06639 [ [afficher les articles] ].[ [Lire, écouter, voir] ].total
 0.06584 [ [afficher les articles] ].[ [Art-Rock] ].total
 0.065934        [ [afficher les articles] ].[ [Le Génépi et l'Argousier] ].total
 0.065597        [ [afficher les articles] ].[ [Le Golb] ].total
 0.066142        [ [afficher les articles] ].[ [Itinéraire(s)] ].total
 0.065494        [ [afficher les articles] ].[ [A la poursuite du vent)] ].total
 0.066653        [ [afficher les articles] ].[ [Culturopoing] ].total
 0.061507        [ [afficher les articles] ].[ [BMR & MAM] ].total
 0.065923        [ [afficher les articles] ].[ [Loisirs & Co] ].total
 0.065422        [ [afficher les articles] ].[ [Lectures en série] ].total
 0.067964        [ [afficher les articles] ].[ [Cinéfilms] ].total
 0.066567        [ [afficher les articles] ].[ [La plume et l'image] ].total
 0.067573        [ [afficher les articles] ].[ [Le soupir des cacahuètes] ].total
 0.065649        [ [afficher les articles] ].[ [Thé toi et lis] ].total
 0.065323        [ [afficher les articles] ].[ [In The Mood for Deauville] ].total
 0.065385        [ [afficher les articles] ].[ [Acide Critique] ].total
 0.065459        [ [afficher les articles] ].[ [CinéFeed] ].total
 0.06832 [ [afficher les articles] ].[ [Rob Gordon] ].total
 0.069465        [ [afficher les articles] ].[ [Uniko] ].total
 0.0723819999999999      [ [afficher les articles] ].[ [Volovent] ].total
 0.069354        [ [afficher les articles] ].[ [Asiaphilie] ].total
 0.068615        [ [afficher les articles] ].[ [Book Marteens] ].total
 0.068479        [ [afficher les articles] ].[ [Antigone] ].total
 0.068487        [ [afficher les articles] ].[ [Uziblog] ].total
 0.089843        [ [afficher les articles] ].[ [Mes Lectures] ].total
 0.094942        [ [afficher les articles] ].[ [De livre en livre] ].total
 0.071829        [ [afficher les articles] ].[ [Blog Culturel] ].total
 0.069701        [ [afficher les articles] ].[ [Suny] ].total
 0.094011        [ [afficher les articles] ].[ [Devotionall] ].total
 0.072847        [ [afficher les articles] ].[ [Monde Virtuel] ].total
 0.074815        [ [afficher les articles] ].[ [Les toiles roses] ].total
 0.076446        [ [afficher les articles] ].[ [Cinematique] ].total
 0.072721        [ [afficher les articles] ].[ [Blog à lire] ].total
 0.071651        [ [afficher les articles] ].[ [Laterna Magica] ].total
 0.073391        [ [afficher les articles] ].[ [NeVerMinD tHe bLoGs] ].total
 0.074825        [ [afficher les articles] ].[ [Lectures et autres] ].total
 0.073475        [ [afficher les articles] ].[ [Une toile pour deux] ].total
 0.07305 [ [afficher les articles] ].[ [Blogobook] ].total
 0.072924        [ [afficher les articles] ].[ [Psykokwak] ].total
 0.074512        [ [afficher les articles] ].[ [Bons Livres Bons Amis] ].total
 0.139504        [ [afficher les articles] ].[ [Enlivrez-vous] ].total
 0.0706  [ [afficher les articles] ].[ [Croytaque] ].total
 0.06893 [ [afficher les articles] ].[ [Chez Lo] ].total
 0.134131        [ [afficher les articles] ].[ [CinémaniaC] ].total
 0.125828        [ [afficher les articles] ].[ [Cinemapolis] ].total
 0.117233        [ [afficher les articles] ].[ [Cinéniavlys] ].total
 0.072092        [ [afficher les articles] ].[ [Un jour Un CD] ].total
 0.134907        [ [afficher les articles] ].[ [Cinéphile] ].total
 0.069646        [ [afficher les articles] ].[ [Cécilialit] ].total
 0.069329        [ [afficher les articles] ].[ [Culturofil] ].total
 0.070488        [ [afficher les articles] ].[ [Conduite en état livresque] ].total
 0.069459        [ [afficher les articles] ].[ [Critiques clunysiennes] ].total
 0.165669        [ [afficher les articles] ].[ [S.pt.mbr sans.] ].total
 0.112522        [ [afficher les articles] ].[ [Des pas perdus] ].total
 0.09543 [ [afficher les articles] ].[ [Dr Orlof] ].total
 0.089997        [ [afficher les articles] ].[ [Et Action !] ].total
 0.091454        [ [afficher les articles] ].[ [Faut pas pousser Mémé dans les orties !] ].total
 0.070358        [ [afficher les articles] ].[ [Florinette] ].total
 0.07142 [ [afficher les articles] ].[ [Eireann] ].total
 0.067831        [ [afficher les articles] ].[ [GTO Touch] ].total
 0.0718  [ [afficher les articles] ].[ [In the mood for cinéma] ].total
 0.139137        [ [afficher les articles] ].[ [In the mood for Cannes] ].total
 0.093282        [ [afficher les articles] ].[ [Inisfree] ].total
 0.104383        [ [afficher les articles] ].[ [Hispaniola] ].total
 0.118957        [ [afficher les articles] ].[ [Jane Doe] ].total
 0.095468        [ [afficher les articles] ].[ [Labosonic] ].total
 0.114347        [ [afficher les articles] ].[ [La cave du Dr Orlof] ].total
 0.089434        [ [afficher les articles] ].[ [Les irréductibles] ].total
 0.089917        [ [afficher les articles] ].[ [Les nouveaux cinéphiles] ].total
 0.068932        [ [afficher les articles] ].[ [L'ouvreuse] ].total
 0.071046        [ [afficher les articles] ].[ [Majanissa] ].total
 0.069318        [ [afficher les articles] ].[ [Mariedéblog] ].total
 0.071891        [ [afficher les articles] ].[ [Marque Page] ].total
 0.073548        [ [afficher les articles] ].[ [Matière focale] ].total
 0.067524        [ [afficher les articles] ].[ [Fanyoun] ].total
 0.070261        [ [afficher les articles] ].[ [Systool] ].total
 0.070137        [ [afficher les articles] ].[ [Le bal des vauriens] ].total
 0.06977 [ [afficher les articles] ].[ [Mireldar] ].total
 0.069906        [ [afficher les articles] ].[ [Mon festival du cinéma] ].total
 0.074124        [ [afficher les articles] ].[ [Mots z'et rêves] ].total
 0.186316        [ [afficher les articles] ].[ [Norman Bates] ].total
 0.067987        [ [afficher les articles] ].[ [Neil] ].total
 0.08997 [ [afficher les articles] ].[ [Omega Blue] ].total
 0.089336        [ [afficher les articles] ].[ [Peyomedia] ].total
 0.089777        [ [afficher les articles] ].[ [Planet Gong] ].total
 0.092123        [ [afficher les articles] ].[ [Sirensorrento] ].total
 0.090468        [ [afficher les articles] ].[ [Sylvanito] ].total
 0.114695        [ [afficher les articles] ].[ [Through my eyes] ].total
 0.088135        [ [afficher les articles] ].[ [Traou] ].total
 0.087821        [ [afficher les articles] ].[ [Unplugged Café] ].total
 0.088862        [ [afficher les articles] ].[ [Vins de Loire] ].total
 0.088773        [ [afficher les articles] ].[ [Xav-B.log] ].total
 0.066372        [ [afficher les articles] ].[ [Yves Duel] ].total
 0.065073        [ [afficher les articles] ].[ [Imaginari] ].total
 0.064468        [ [afficher les articles] ].[ [Ciné Addict] ].total
 0.066229        [ [afficher les articles] ].[ [Cosmopolitan Stories] ].total
 0.070781        [ [afficher les articles] ].[ [Lu sur le lu] ].total
 0.071428        [ [afficher les articles] ].[ [In vivo] ].total
 0.066302        [ [afficher les articles] ].[ [Chtif] ].total
 0.063658        [ [afficher les articles] ].[ [Pavillon des fous] ].total
 0.064865        [ [afficher les articles] ].[ [Lunar Caustic] ].total
 0.069092        [ [afficher les articles] ].[ [Classe ou Crasse - Chroniques pop rock] ].total
 0.06468 [ [afficher les articles] ].[ [Da Pingui] ].total
 0.069566        [ [afficher les articles] ].[ [Ombres et lumières] ].total
 0.07047 [ [afficher les articles] ].[ [Sur l'octuple sentier] ].total
 0.064397        [ [afficher les articles] ].[ [film] ].total
 0.069167        [ [afficher les articles] ].[ [DVD] ].total
 0.070677        [ [afficher les articles] ].[ [livre] ].total
 0.072945        [ [afficher les articles] ].[ [musique] ].total
 0.068849        [ [afficher les articles] ].[ [DVD] ].total
 0.080229        [ [afficher les articles] ].[ [DVD] ].1.images
 0.065102        [ [afficher les articles] ].[ [musique] ].total
 0.07501 [ [afficher les articles] ].[ [musique] ].1.images
 0.067766        [ [afficher les articles] ].[ [film] ].total
 0.074088        [ [afficher les articles] ].[ [film] ].1.images
 0.072229        [ [afficher les articles] ].[ [livre] ].total
 0.101135        [ [afficher les articles] ].[ [livre] ].1.images
 0.105907        [ [afficher les articles] ].[ [jours:14] ].lectures.1.images
 0.103871        [ [afficher les articles] ].[ [jours:14] ].lectures.3

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 20:33

Un peu plus tôt, j'ai optimisé les requêtes .total (de l'ordre de 20% de temps gagné), le temps indiqué dans le commentaire ci-dessus prend déjà en compte l'optimisation.

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 20:37

Une solution relativement simple et efficace, ca serait de cacher les requetes .total, ou toutes les requetes qui ne génèrent pas un résultat aléatoire. Je tente ça un peu plus tard.

---

Re: Pas de ralentissement, non ... c'est pire ... par labosonic le Lundi 21/04/2008 à 23:09

J'ai viré mon javascript qui totalise le nombre des critiques recensées ce qui enlève 115 requêtes d'un coup.

---

Re: Pas de ralentissement, non ... c'est pire ... par Stephane le Lundi 21/04/2008 à 23:42

Ah, je me demandais d'où venaient toutes ces requêtes.

J'ai mis en place un système de cache pour les commandes non aléatoires, tes pages sont 15 fois plus rapides à générer. Plus besoin d'attendre 5 à 10 secondes pour avoir la première page. Le résultat des commandes est caché pendant 5 à 6 minutes. Je teste ça sur le serveur 2, si tout va bien, je généraliserai à tous les serveurs.

(merci cependant de ne pas rajouter les 115 requêtes !)

---

status par Stephane le Lundi 21/04/2008 à 17:18

Sujet: ralentissements et problème d'accès

De: Stéphane Gigandet <biz@joueb.com>

Date: Mon, 21 Apr 2008 17:09:42 +0200

Pour :: maintenance@viabloga.com

Bonjour,

Comme vous l'avez sans doute remarqué, le serveur 1 de ViaBloga (qui héberge la majorité des sites) a du mal à suivre la charge aujourd'hui.
Je suis en train de faire des changements pour que la situation retourne à la normale. (bloqué des spammeurs chinois qui ont envoyé des dizaines de milliers de requêtes, transféré le site le plus gourmand (10% du traffic) sur le serveur 2, désactivé une fonction non-essentielle temporairement etc.)
D'autres changement sont en cours.

Merci,

Stéphane

---