Hello,
J'écris suite au message posté par Julia de CivilServant il y a plusieurs jours sur son projet de mesurer l'efficacité de notre message d'accueil. J'ai pu discuter avec elle et il apparaît que nous avons besoin de votre avis pour pouvoir continuer ce projet. Merci donc au plus de personnes possibles de répondre ;-)
Comme Julia l'avait succinctement expliqué, CivilServant aimerait mettre en place un groupe contrôle dans leur étude, c'est-à-dire des nouveaux qui ne recevraient pas de message d'accueil automatique. Ce groupe contrôle permettra à CivilServant de mesurer scientifiquement l'efficacité du message. Il s'agit d'une approche classique dans la recherche scientifique, puisque c'est le meilleur moyen de garantir une comparaison non-biaisée entre deux groupes. Ici, bien sûr, il s'agit de comparer combien de nouveaux restent sur WP avec et sans le message, et de façon plus subjective comment les nouveaux jugent leur accueil (ou non-accueil) et plus généralement quels sont leurs attentes à leurs débuts. Les résultats nous permettront de savoir rationnellement si notre message d'accueil est vraiment utile (ce que nous n'avons jamais testé), et surtout comment l'améliorer dans le cas où il n'est pas suffisamment efficace. Cette étude sera aussi utile pour tous les autres projets Wikimédia qui pourront s'inspirer de notre message s'il est prouvé efficace.
L'inconvénient du groupe contrôle, comme soulevé dans la précédente discussion, c'est que certains nouveaux ne recevront temporairement pas d'accueil automatique. J'ai discuté avec Julia sur ce point et le raisonnement est que c'est un compromis : quelques nouveaux ne sont pas accueillis sur le court terme, mais en retour nous saurons comment mieux accueillir sur le long terme. De plus, il sera toujours possible des les accueillir de façon individuelle plus tard.
Une fois que l'efficacité du message est démontrée (ou non), CivilServant envisage dans un second temps de tester d'autres messages pour optimiser l'accueil. Mais pour pouvoir faire cela, il leur faut d'abord mesurer si le message actuel est utile ou non (en gros il n'est pas utile de tester plein de messages si l'on ne sait même pas s'ils sont meilleurs que pas de message).
Pour résumer, toute le travail envisagé par CivilServant repose actuellement sur l'étude d'un groupe contrôle. Je leur ai donc recommandé, pour qu'ils ne perdent pas de temps pour rien, de d'abord vérifier s'il y a un consensus ici pour avoir le groupe contrôle, selon notre fonctionnement habituel sur WP. Il est donc important que les membres du projet s'expriment le plus largement possible ici. Bien sûr Julia et moi pouvons répondre à vos questions.
(Point annexe, CivilServant va organiser un séminaire à Berlin les 22 et 23 octobre pour discuter de leurs projets, y compris sur WP où ils collaborent avec différents projets en plus du nôtre. Ils voudraient inviter l'un d'entre nous, tous frais payé, à y participer. Si vous êtes intéressé, contactez Julia.)
