posté le dimanche 30 mars 2008 à 21:41

Modularité et file d'attente pour les photos et podcasts

Rien de vraiment nouveau, si ce n'est au niveau technique.  Ca concerne toutes les images, fichiers sons et vidéos chargés dans les blogs. Voici de nouveau un article destiné aux gens interessés par cet aspect.

 

Déjà, tout le processus est devenu modulaire. Chaque opération : retouche, et insertion dans la base de donnée,  peut être fait soit par une fonction locale, soit par un webservice sur un autre serveur.

 

Ensuite, les fichiers sont immédiatement envoyés sur un autre serveur (images1.vefblog.net en ce moment) qui s'occupe d'afficher toutes les images dans les navigateurs. Pour la suppression, c'est la même chose ; tout est géré grâce à des services web. Cette syncronisation en temps réel (mais sans attente du client) évite en plus de coûteuses syncronisations totales chaque nuit. En cas d'erreurs, des ficheirs log permettent de retenter ces opérations plus tard.

 

Enfin, un service résident (un démon, souvenez vous) gère maintenant la file d'attente de retouche des fichiers. Cela signifie que quand il est lancé, deux fichiers ne peuvent pas être traités en même temps ce qui évite des surcharges du serveur à cause de ça. Par contre, le service commence par les fichiers de plus petite taille, et met les plus gros à la fin.

Si vous chargez une petite photo, vous attendrez que la place se libère puis votre photo sera traitée ; à priori ca ne changera pas beaucoup de avant - sauf si le serveur était déjà en train de retoucher une grosse vidéo par exemple, auquel cas vous attendrez un peu.

Par contre si vous chargez un gros fichier, vous attendrez qu'il n'y ait aucun plus petit fichier que le vôtre à traiter. En théorie, en heure d'affluence le temps peut donc être repoussé mais la plupart du temps ca ne changera pas grand chose.

 

C'était devenu necéssaire avec l'autorisation des gros fichiers images, son et vidéo (20Mo pour le moment). En plus, je saurais quand la file d'attente devient grosse, et quand il y aura trop de fichier à traiter nous prendrons un nouveau serveur rien que pour ca, grâce à cette nouvelle modularité...

 

Quelques shémas des différentes possibilités de cette nouvelle modularité : 

 

 

Ancien système 

 

Ancien système

 

 

 Système avec services Web et syncronisation

 

Système modulaire avec services Web

 

 

 

Avec le service de gestion des files d'attente

 

Services web, et service résident d’agencement


 

 

 

 

 

 

 


Commentaires

   finit   fermer
 

Legolas  le 30-03-2008 à 23:01:10

discussion à continuer sur le forum. Parlons ici de l'article..
http://forum.vefblog.net/viewtopic.php?p=13700#13700

aurore  le 30-03-2008 à 22:54:38  (site perso)

j'allais en parler sur le forum, sur le nouveau skin, les polices sont bizarres (hachées) avec Orange..
compris pour les photos..

Legolas  le 30-03-2008 à 21:53:52

rien à voir effectivement. Mais rien n'a chargé avec les caractères ; es tu sûre de n'avoir pas changé les réglages de ton blog ? Est-ce que ca le fait sur tous les blogs ? Est-ce que je peux avoir un exmple (lien) ?

mailes  le 30-03-2008 à 21:49:19  (site perso)

j'ai une petite question, rien a voir avec l'article désolé.. mais pourquoi tout les caractères gras dans blogs sont devenus "moches" depuis l'après midi?... ils n'ont plus le même aspect et sont moins lisibles!...

 
 
posté le jeudi 27 mars 2008 à 13:54

BoosterdeBlog.com : Partenariat

J'ai le plaisir de vous annoncer le partenariat exclusif de Vefblog avec le site BoosterdeBlog.com

 

 

  BoosterdeBlog.com est un site très sympa, on peut inscrire son blog pour qu'il apparaisse dans l'annuaire, on peut aussi voter pour les autres blogs. 

 

 

 

Ca fait une autre manière de rechercher des blogs à visiter, et de proposer le sien.

 

Dans Vefblog, il y a maintenant un lien à gauche sur l'accueil,  et un lien direct vers le formulaire d'inscritpion à partir de la page des statistiques, et juste après avoir créé son blog.

Sur BoosterDeBlog.com , Vefblog est proposé pour créer un nouveau blog, et l'icone est présent sur la page d'accueil. 

 


Commentaires

   finit   fermer
 

Lamia  le 03-04-2008 à 13:12:34  (site perso)

Bonjour,

Je suis tombée par hazard sur cette article du blog de VefBlog via Google (comme quoi ce VefBlog est bien référencé! Sourire)

Pour répondre à ta demande Aurore:
Il est bien évidemment normal que les utilisateurs ne puissent pas modifier automatiquement via l'interface l'âge et leur sexe pour la simple raison que si l'on n'accordé cette action, ce serait la "débandade" complète sur les profils des utilisateurs.

Ceci dit, si tu veux changer ton âge, il te suffit de contacter un des administrateurs via le formulaire de contact...

Sincèrement,
Lamia

aurore  le 31-03-2008 à 00:48:21  (site perso)

oui comme par hasard c'est le seul truc qu'on peut pas changer !

Legolas  le 30-03-2008 à 23:40:01

tu es sûre qu'on ne peut pas changer ? Dans l'édition de tes coordonnées ?

aurore  le 30-03-2008 à 23:15:58  (site perso)

j'ai inscrit mon blog de DEBATS...
mais l'âge je me suis planté..je voulais mettre 1 an, et je peux pas changer..lol

Legolas  le 30-03-2008 à 23:02:59

ben heu oui, mais comme les gens qui cliquent sur google..

aurore  le 30-03-2008 à 22:53:22  (site perso)

je vais aller voir cela, est ce que cela veut dire, si on s'inscrit, que l'on aurait des visites de n'importe qui ???

coconuts  le 30-03-2008 à 22:48:52  (site perso)

oui j avais vu du coup je m étais isncrite Clin doeil c 'est sympa :-)

Legolas  le 30-03-2008 à 22:43:36

Ils ont mis aujourd'hui la page de présentation de Vefblog pour créer un nouveau blog !

Leshaya  le 30-03-2008 à 22:24:50  (site perso)

Voilà qui est cooool!
=D

sparkle  le 27-03-2008 à 14:02:01

Coool

 
 
posté le samedi 22 mars 2008 à 18:30

Fichiers postscripts et PDF

Les fichiers postscript et PDF (portable document format) sont maintenant admis et convertis automatiquement en images pour pouvoir les intégrer à un article.

 

Toujours plus loin avec VEF ;) 

 


Commentaires

   finit   fermer
 
aucun commentaire
 
 
posté le jeudi 20 mars 2008 à 10:39

100 000 articles

Le nombre des 100 000 articles a été atteint hier. C'est bien sûr le nombre d'articles actuellement valides sur VEF, ou bien encore récurérables.. C'est l'occasion de quelques statistiques :

 

 

 

 

 

- le compteur interne des visites est à 142072 ; il compte tous les articles ou brouillons ayant un jour existé sur Vefblog

 

- Répartition des articles par année : 

 

2004 : 137 (68/mois)

2005: 6 959 (579/mois)

2006: 20 507 (1709/mois)

2007: 56 593 (4716/mois)

2008: 20 290 (6763/mois)

 

 - Voici les meilleurs posteurs d'articles (sur les 100 000 articles), tous blogs confondus :

aupaysdesrevesbleus     3001
sandra      2128
aurore  2001
koda    1995
Philippine      1951
loveuse_de_rock29       1533
GigietLove      1182
bernard 1123
lyly86  973
lafolle 908
candylapuce     900
tilt    868
cassanthik      832
fripouille      795
Mink    760
liloo   760
titi21  752
Legolas 741
lemondedarcadia 714
anges27 694
version5        669
AnE-So  649
Deder   642
libelules       631
Lita    622
lachieuse       565
Leshaya 563
TokioHotel85    541
Pitiponk        537
mailes  500
 

- Ceux qui ont mis le plus de photos

 koda    8317
aurore  6768
horizon97       4637
angielarousse   3620
lemondedarcadia 3050
feline  2726
Philippine      2647
HANDBALLSMEC-16 2318
lauranordh      2300
charmante_sand_belle    2110
lafolle 2031
Leshaya 1935
GigietLove      1928
zozo13  1903
titi21  1867
yayy2   1832
AnE-So  1745
lyly86  1689
Esuna   1641
scofield        1630
candylapuce     1609
fripouille      1597
cristaline      1537
babyblog        1531
loveuse_de_rock29       1513
coconuts        1509
nanaca  1479
the-clara       1445
liloo   1418
supercreations  1402
 

Prochaines stats, pour les 3000 blogs actifs ? 

 

 


Commentaires

   finit   fermer
 

legolas  le 24-03-2008 à 01:09:42  (site perso)

tiens, PapaBob, ca faisait longtemps Clin doeil

papabob  le 23-03-2008 à 23:43:14  (site perso)

Dayday et piti Clin doeil

Amusant en effet !

tilt  le 22-03-2008 à 18:45:16  (site perso)

Roh bah c'est fou l'évolution!

Contente d'être dans le "top" des plus gros posteurs Langue c'est ça de raconter son inintéressante vie à tort et à travers Langue

liloo  le 20-03-2008 à 22:44:06  (site perso)

Sympa d'avoir tous ces chiffres!

Pitiponk  le 20-03-2008 à 18:49:12  (site perso)

Ah j'y suis quand même, de justesse. Je pensais pas ^^
Longue vie à Vef !

coconuts  le 20-03-2008 à 11:08:41  (site perso)

quoi y en a qui postent plus que aurore ça existe hihi héhé on voit qu en 2007 y a eu une vague aufienne :-)))

aurore  le 20-03-2008 à 10:45:17  (site perso)

Moi je dis "BRAVO" !!!... Je suis pas mal placée !, ça va me BOSSTER pour la journée ! VIVE VEF !! trop mignon le petit VEF en or qui tourne quand on charge !!

édité le 20-03-2008 à 10:45:41

 
 
posté le mercredi 19 mars 2008 à 22:56

SIGPIPE

Plusieures heures à chercher pourquoi l'appel write() faisait parfois planter le service des stats écrit en langage C. J'ai du éxécuter le programme avec gdb pour comprendre ce qui se passait.

 

Parce que il faut d'abord faire ignorer le signal SIGPIPE pour avoir une chance de traiter l'erreur générée par write() ou send(), et de fermer la connection. Sinon, le programme plante sans mot dire.

 

Au début, éxecuter : 

 

signal (SIGPIPE, SIG_IGN);

 

 

A encadrer.. 

 

Sinon, la bonne nouvelle c'est que ce service qui gère toutes le comptage des visites en temps réel, tient le choc même avec plusieurs millions de visites et de blogs (dans ce cas il prend 250Mo de RAM, mais reste très disponible et rapide). Je viens de simuler ca sur mon PC..

 

Bon, un article pas pour tout le monde, mais je vais essayer de temps en temps de faire ici des articles techniques sur mon expérience grâce à Vefblog. 

En tout cas, celui-ci peut dépanner du monde.. 

 


Commentaires

   finit   fermer
 

coconuts  le 19-03-2008 à 23:27:04  (site perso)

ah ça me servira plus tard quand j aurais mieux appris ^^et donc ça devrait ne plus planter là 8-)

 
 
 

Ajouter un commentaire

Merci de laisser un commentaire sur ce blog !
Attention : pas de demande autre que le sujet de l'article svp..
Les commentaires sont modérés, cela veut dire que un modérateur doit les accepter avant qu'ils n'apparaissent.
Pseudo : Réserve ton pseudo ici
Email :
Site :
Commentaire :

Smileys

 
 
 
Rappel article