Depuis le début de la semaine, j'ai mis en veille les nouveaux développements pour optimiser Vefblog au niveau de la rapidité.

Le résultat : même les pages les plus longues à charger sont devenues très rapides. Il y a aussi quelques changements visibles :

 

Changement dans les pages 

• Les pages qui permettent de suivre les discussions ou les nouveaux articles, se limitent aux articles et commentaires de moins de 35 jours (ce qui devrait être suffisant).
  Sont concernés :  les réponses aux articles et aux commentaires en page d'accueil, les communautés des favoris dans la page d'accueil et dans le blog, les derniers commentaires dans le blog.
  Pour les réponses, sont concernés les réponses de moins de 35 jours aux articles ou commentaires de moins de 35 jours aussi. Ca fait une petite limitation, mais ne même temps on considère que au bout de 35 jours une discussion n'est plus active.. et vous pouvez toujours recevoir vos commentaires par email pour être sûrs de ne pas en rater.
  D'ailleurs, les titres "derniers commentaires" sont devenus "commentaires récents" dans les blogs aussi.
• Dans les blogs, j'ai remanié la communauté des favoris : par défaut, seuls les articles s'affichent ; un lien permet d'avoir aussi les commentaires sur une autre page.
• Pour toutes les communautés de favoris : les blogs restreints ne sont plus affichés. En effet, sinon il suffit de mettre un blog protégé en favori, pour pouvoir le lire !
• Dans les statistiques, elles aussi beaucoup plus rapides, les courbe des commentaires par mois affiche le nombre de commentaires chaque mois, et non  la moyene journalière (rien à voir avec l'optimisation, mais je trouvais ca logique).
• Toujours dans les statistiques, les jours ou les mois vides sont complétés avec la valeur 0, alors que avant, ils n'étaient pas pris en compte.

Quelques autres petites améliorations ont été faites sur certaines pages (marges, formulations ou autres).

 

Nettoyage des blogs et auteurs supprimés

Les pseudos des auteurs et des blogs effacés ou bannis depuis plus de 35 jours, sont maintenant définitivement libérés et réutilisables. 

Une trace des blogs effacés est pourtant gardée au cas improbable où la justice le réclamerait, comme la loi française le demande. 

 

Le cas de la recherche de texte dans les articles et commentaires 

Quand Vefblog lance une recherche pour la première fois depuis un bout de temps, la recherche est longue à se faire (chargement de l'index de textes). Au bout de quelques recherches, celles ci redeviennent rapides. A ma connaissance,c'est le seul point gris (pas noir, quand même) encore restant.

 

Techniquement ?

 La plupart des changements concernent la base de donnée de Vefblog , sous mysql. Les tables étaient bien indexées pour assurer tous les calculs spéciaux, mais du coup les index devenaient gros et devaient souvent être lus du disque dur (et non du cache en RAM).

 Techniquement, j'ai supprimé plusieurs des index des grosses tables de la base de données, en ne laissant que ceux nécessaires pour tous les éléments ; et j'ai créé des tables bien indexés mais légères, pour toutes les opérations coûteuses qui ne concernent que les éléments récents. Pour les statistiques, une table par mois mise à jour régulièrement, permet de nettoyer la table des statistiques journalières et de simplifier les calculs de façon transparante.

De plus, l'utilisation sur le nouveau serveur de mysql en version 5, m'a permis de commencer à utiliser des triggers afin de m'assurer que des elements "fantômes" ne polluent plus la base. 

Pour les recherches de texte, les index fulltext sont sur des tables séparées que celles des articles et commentaires, afin de ne pas prendre en compte les effacés ou les brouillons, et de ne contenir que le texte "pur" et non html. Malgré cela, l'utilisation de tels index reste couteuse à l'insertion et à la lecture. 

Salut,

 

Le changement de serveur a commencé à 00h05, et a fini vers 00h20. Le temps d'attendre la propagation du changement d'adresse, vers 00h30 quelques-un peuvent déjà accéder de nouveau.

 

Je m'occupe maintenant de transférer les stats de visite de hier, et de relancer les tâches régulières, et tout sera bon ! 

 

Pour certains, il se peut que le de domaine fr.vefblog.net soit passé mais pas le nom vefbog.net ; si c'est le cas il en résulte tout un tas de bus apparants sur les blogs. Attendez quelques minutes, et redémarrez votre navigateur.

Demain matin, il n'y aura plus ce problème de nulle part. 

Ce soir vers minuit, Vefblog changera de serveur pour une machine plus puissante (avec deux disques durs pour accélerer les accès aux disques).

 

Pendant l'opération, qui prendra environ une heure, tout sera inaccessible : l'accueil et les blogs ; un message d'erreur unique apparaitra à la place.

 

Vous pourrez juste aller sur le forum pendant ce temps. 

Quelques perturbations ce soir : j'ai en effet mis à jour le php5 du serveur (auparavant, un backport, dorénavant la dernière version compilée)

Tout est revenu apparamment, sauf

• la prise en charge des jpeg qui passe maintenant par ImageMagick le temps de régler ce problème (ca se voit sur les miniatures qui ne sont plus carrées)
• la gestion des calendriers : on ne peut plus ecrire un article quand le calendrier est activé
  

Le but était de pouvoir charger des extensions pecl, et notamment la gestion de cache APC qui est maintenant en place pour l'accueil : la rapidité s'en trouve boostée !

EDIT 22:05 : calendriers OK, gestion des jpeg par lGD ok

Pour ceux qui comprennent : vefblog tourne maintenant en php 5.2 (auparavant: 4.3).

C'est plus moderne et plus compatible avec des librairies récentes. Normalement, ca ne devrait pas engendrer de bugs.
Normalement.