Open Time

…et aucun ne tombera dans l’eau !

Je me suis un peu amusé depuis hier avec un logiciel que j’ai trouvé au hasard de mes pérégrinations virtuelles. Gource est son nom. Il permet de représenter sous forme visuelle, et très graphique vous verrez, l’activité d’un dépôt Git, Mercurial, Bazaar, SVN (subversion) ou encore CVS. Un dépôt, pour mes lecteurs les plus ignorants des choses qui concernent le développement logiciel — mais on peut tout aussi bien s’en servir pour autre chose —, permet d’enregistrer toutes les versions successives des fichiers constituant un projet. Cela permet de revenir facilement en arrière en cas de problème, de gérer plusieurs versions concurrentes, d’avoir la dernière version permanente d’un logiciel, etc, etc. Bref, du petit lait pour tous les développeurs qui l’utilisent quotidiennement.

Je disais donc que je m’étais un peu amusé hier, avec le dépôt officiel de Dotclear 2, un peu de titraille et un soupçon de musique. Voilà le résultat une fois passé entre les mains de Gource, iMovie (un logiciel de montage vidéo d’Apple) et ffmpeg (un convertisseur vidéo), toute la vie du dépôt condensée en 4 minutes :

Pour les ceussent qui voudraient faire pareil, je vais vous indiquer rapidement comment obtenir le (presque) même résultat. Mes propos concerneront un système Mac OS X, facilement adaptable à un système Linux, quand à ceux qui utilisent Windows, j’ai cru lire qu’il était aussi possible de faire de même, seules les procédures peuvent varier légèrement.

Préalable

Pour installer tous les logiciels nécessaires (Gource et éventuellement Subversion et ffmpeg), j’ai choisi d’utiliser MacPort. Ce système permet de récupérer sur des dépôts externes des packages configurés pour tourner sur Mac. À noter que MacPort ne remplacera pas ce qui existe déjà nativement avec Mac OS X. Je vous laisse le soin de consulter la documentation d’installation de MacPort et vous attends sagement avant de continuer mon explication…

Petite notre à l’intention de ceux qui ont déjà MacPort installé sur leur machine. Pensez lancer les deux commandes suivantes afin d’être sûr d’avoir la dernière version de l’index des dépôts et que les modules déjà installés soient à jour :

sudo port -v selfupdate
sudo port upgrade outdated

… que vous soyez prêt pour la suite.

Installation

D’abord Gource lui-même :

sudo port install gource

Ensuite ffmpeg si vous souhaitez créer des fichiers vidéo avec la sortie générée par Gource :

sudo port install ffmpeg

Puis Subversion dans le cas qui nous concerne, puisque le dépôt de Dotclear utilise ce logiciel :

sudo port install subversion

Enfin, récupérez le script python pour convertir les fichiers log générés par SVN afin qu’ils soient lisibles par Gource. Décompressez l’archive pour en extraire le script. Vous aurez besoin de la version 2.5 (à minima) de python pour le faire tourner.

Génération du fichier log nécessaire à Gource

Nous avons dorénavant tout les logiciels nécessaires. Il faut maintenant générer le fichier qui servira d’entrée à Gource.

Tout d’abord, se positionner dans un répertoire correspondant à une working copy du dépôt :

cd ~/Documents/Projets/my-project

Ensuite récupérer le fichier log complet, puis le convertir dans le format idoine à l’aide des commandes suivantes :

svn log --verbose --xml > ~/Documents/my-project.log
python  ~/Shell/svn-gource.py --filter-dirs ~/Documents/my-project.log > ~/Documents/my-project-gource.log

Admiration du résultat

Il vous reste maintenant à lancer Gource pour admirer le résultat :

gource --log-format custom ~/Documents/my-project-gource.log

Vous devriez avoir une fenêtre dans laquelle vous pouvez utiliser les touches suivantes :

• V : pour basculer entre la vue générale et la vue focalisée l’activité en cours du dépôt ;
• Tab : sert à passer à l’utilisateur suivant ;
• + et - : pour accélérer et ralentir la vitesse de défilement ;
• Espace : pour mettre en pause et redémarrer ;
• Esc : pour mettre fin à l’affichage.

Si vous déplacez votre souris vers le bas de l’affichage vous verrez apparaître un guide temporel qui vous permet de vous positionner à une date précise. D’autre part, les défilements de la molette de la souris — ou la commande équivalente sur le trackpad — permet de zoomer et de dézoomer.

Création d’une vidéo

Si vous souhaitez obtenir un fichier vidéo de l’affichage il faut alors modifier légèrement la commande pour lancer Gource, afin de renvoyer sa sortie vers ffmeg pour qu’il en produise un fichier vidéo.

Exemple pour un fichier MP4 :

gource --stop-at-end --disable-progress --log-format custom ~/Documents/my-project-gource.log --output-ppm-stream - | ffmpeg -y -b 3000K -r 60 -vpre libx264-default -f image2pipe -vcodec ppm -i - -vcodec libx264 ~/Documents/my-project-gource.mp4

Autre exemple pour un fichier FLV :

gource --stop-at-end --disable-progress --log-format custom ~/Documents/my-project-gource.log --output-ppm-stream - | ffmpeg -y -b 3000K -r 60 -f image2pipe -vcodec ppm -i - -vcodec flv ~/Documents/my-project-gource.flv

Pour information, j’ai utilisé les deux commandes suivantes pour générer une version MP4 et une version FLV :

gource --log-format custom --stop-at-end -s 0.05 --hide filenames,dirnames --date-format "%d/%m/%Y" -1280x720 ~/Documents/my-project-gource.log --disable-progress --output-ppm-stream - | ffmpeg -y -b 3000K -r 30 -vpre libx264-default -f image2pipe -vcodec ppm -i - -vcodec libx264 ~/Documents/my-project-gource.mp4

et

gource --log-format custom --stop-at-end -s 0.05 --hide filenames,dirnames --date-format "%d/%m/%Y" -1280x720 ~/Documents/my-project-gource.log --disable-progress --output-ppm-stream - | ffmpeg -y -b 3000K -r 30 -f image2pipe -vcodec ppm -i - -vcodec flv ~/Documents/my-project-gource.flv

À noter (options supplémentaires ou différentes de la commande présentée en exemple au début de ce chapitre) :

• -s 0.05 permet de spécifier la durée en secondes d’une journée d’activité sur le dépôt ;
• --hide filenames,dirnames permet de masquer les noms des fichiers et des répertoires ;
• --date-format "%d/%m/%Y" permet de spécifier le format d’affichage de la date ;
• -1280x720 spécifie les dimensions de la vidéo, ici au format HD 16/9e recommandé pour une mise en ligne sur YouTube par exemple ;

et pour ffmpeg :

• -r 30 pour spécifier le nombre d’images par secondes de la séquence vidéo produite.

Pour obtenir le détail des options possibles :

man gource
man ffmpeg

Voili, voilà, vous savez tout ou presque pour faire de même sur vos dépôts préférés :-)

Depuis quelques semaines, deux ou trois, ce blog et le photoblog associé reçoivent environ un millier au moins de spams chaque jour, parfois le double. L’avantage de l’installation multiblog de Dotclear fait que sans sortir de l’administration je peux vérifier qu’il n’y a pas de faux positifs — comprendre des commentaires ou des rétroliens considérés comme des spams alors qu’ils sont tout à fait légitimes — régulièrement sur chacun d’entre eux. Pas de problème à évoquer ici, la collection de filtres installés et configurés fait qu’aucun n’a réussi à passer au travers des mailles du filet. Tout va bien donc, l’antispam est efficace.

Cela dit, un millier de spams tous les jours, sur un serveur que je partage avec d’autres, ça utilise des ressources, ça occupe le processeur, ça prend de la place dans la base de données — même si j’ai programmé la suppression des spams au bout de 7 jours, le temps de vérifier qu’ils sont tous susceptibles de suppression —, ça stresse le serveur, ça fait de la bande passante en moins pour les copains, etc.

J’ai commencé par regarder attentivement la liste des adresses IP d’origine de ces volées de spams. Curieusement, ou pas d’ailleurs, le flot de spams commence assez tôt le matin pour s’arrêter ensuite en milieu de matinée, puis une seconde vague arrive parfois en fin d’après-midi et dure jusque tard dans la soirée. J’ai dressé une liste des schémas d’adresse mais leur nombre m’a vite fait comprendre qu’il serait vain de vouloir en dresser une liste à peu près exhaustive afin de les filtrer avant la connexion via quelques instructions judicieusement choisies dans le fichier .htaccess. Ce n’est donc pas de ce côté qu’il fallait agir.

Je suis alors retourné voir la liste des derniers spams arrivés avant-hier et j’ai constaté deux choses. La première c’est que la majorité des spams sont des rétroliens — j’évalue à moins de 1% la quantité de commentaires parmi eux. La deuxième c’est que quasiment tous les spams — je mets quasiment pour être prudent mais pour l’instant c’est 100% d’entre eux — en rétrolien le sont sur des billets anciens, vieux de plus d’un mois au moins.

Fort de ces constatations j’ai donc décidé de fermer les rétroliens sur les billets au bout de 7 jours, et j’ai laissé par contre les commentaires ouverts ad vitam aeternam, ceux-ci ne présentant pas de danger particulier. C’est très facile à faire, un simple chiffre à préciser dans les paramètres du blog du tableau de bord de Dotclear 2. Depuis j’ai environ 1 spam — je mets environ pour être prudent mais pour l’instant c’est vraiment un seul — tous les matins, en commentaire bien sûr, et plus aucun rétrolien. CQFD.

L’avantage de ce réglage est que du coup les spams n’arrivent pas jusqu’à la base de données, ils sont bloqués avant de pouvoir être soumis, ce qui libère d’autant les ressources du serveur qui a retrouvé un poil lisse et brillant ! L’avantage est que je n’ai plus à contrôler un millier et plus de spams pour éventuellement y repérer un faux positif. L’avantage est que ça libère autant de temps pour faire autre chose, comme par exemple écrire ce billet…

L’inconvénient est que du coup personne ne peut plus rétrolier un billet écrit chez lui avec un des miens pour peu qu’il ait plus d’une semaine. Cela dit, vu les pratiques que j’observe depuis quelque temps sur internet à ce sujet, entre la disparition de l’usage des rétroliens et l’utilisation d’autres réseaux sociaux comme Twitter pour indiquer des liens, je pense que cela n’aura pas trop d’impact. Et quand bien même, si l’un d’entre vous souhaitait en faire un et qu’il se retrouve bloqué, il pourrait assez facilement me laisser un petit commentaire en ce sens ou encore m’envoyer un très gentil et poli mail pour que j’ouvre temporairement cette possibilité. Qu’il ne soit point question de mesquinerie entre gens de bonne compagnie !

Conclusion, une batterie de filtres c’est bien, un petit réglage avec, c’est mieux !

De retour après une interruption bien involontaire du serveur qui héberge ce blog et quelques autres qui a provoqué un petit délai entre la fin de cette journée passée au Tamm Bara et le petit compte-rendu que j’en fait aujourd’hui.

Dotclear Install-Party au Tamm Bara à Paris, le 29 novembre 2009.

Nous nous sommes retrouvés de 10 heures du matin à un peu plus de 18 heures le soir à répondre aux demandes des uns et des autres, à discuter de Dotclear, de photo — il y avait pas mal d’amateur plutôt éclairés dans le coin — et d’autres choses toutes aussi futiles et parfois plus sérieuses. Ahmed, notre hôte, avait préparé un couscous succulent et je crois que personne n’avait encore faim après le déjeuner !

Au menu de cette journée, en vrac, nous avons bataillé ferme avec un problème d’authentification sur un serveur, problème qui restera irrésolu encore un jour ou deux après la fin de cette install-party — d’ailleurs ce n’était pas vraiment une install-party car je crois que personne n’a installé un Dotclear tout neuf ce jour-là —, une petite série de retouches et de modification côté thème pour une autre installation — j’ai pu admirer au passage l’intégration du système 42Stores à l’administration de Dotclear —, et toujours dans le désordre, des retouches sur un thème photoblog qui avait quelques couleurs ma foi assez psychédéliques ou étranges, selon le point de vue et les goûts de chacun.

De plus les deux sessions animée par Kozlika sur les CSS ont eu beaucoup de succès, les questions restant encore nombreuses je crois, et je pense que ce sera à renouveler dès la prochaine fois vu la demande forte dans ce domaine. Après tout, l’installation d’un Dotclear devient de plus en plus triviale, par contre adapter ou même développer un thème bien à soi reste encore un exercice assez périlleux pour beaucoup d’entre nous (je ne suis pas le dernier de cette liste, bien que je fasse quelques lents progrès en la matière).

Pour finir une petite série de photos que j’ai prises à cette occasion est visible ici^[1]. Elles sont brutes de fonderie, c’est à dire non retouchées ni recadrées alors soyez indulgents :-)

En résumé je ne pensais pas qu’autant de monde viendrait ce dimanche malgré le temps maussade qui donnait plutôt envie de rester au chaud sous la couette. J’ai eu le très grand plaisir de faire la connaissance IRL (pour de vrai de vrai) avec le dernier membre de la Dream Team — fortement représentée d’ailleurs —, mirovinben, qui restait jusqu’à ce jour le seul que je n’avais jamais croisé hormis sur les sentiers numériques.

Une belle journée donc, pendant laquelle je pensais avoir un peu de temps pour continuer d’intégrer mon prochain thème — je n’ai pas modifié une ligne de quoi que ce soit ce jour-là —, ce qui ne s’est pas révélé possible. La prochaine fois, je viens incognito ;-)