wiki

Changes

24 juillet Les tests A/B sur Canada.ca en quelques mots (view source)

Revision as of 16:16, 19 August 2024

577 bytes added ,  19 August
no edit summary
Line 8: Line 8:  
===Mises à jour===
 
===Mises à jour===
 
'''BTN'''
 
'''BTN'''
−
*Nous avons remarqué qu’IRCC avait ajouté « Se connecter » à sa page d’accueil. Bien joué! C’est agréable de voir les premiers déploiements.
  −
'''BCP'''
  −
*Merci à toutes les personnes qui ont contribué au contenu sur les vacances avec un chien pour l’Agence canadienne d’inspection des aliments.
  −
*Merci de vos contributions pour le nouveau contenu sur les feux de forêt.
  −
'''Éditeur principal'''
  −
*Le widget « Partagez cette page » a été retiré d’AEM. Nous demandons aux équipes n’utilisant pas AEM de faire de même d’ici la fin du mois, s’il vous plaît.
  −
*Justification : Nous avons examiné les statistiques, et le widget n’était presque pas utilisé. En outre, cette fonctionnalité est désormais intégrée dans de nombreux navigateurs.
  −
'''ACIA — Présentation : Leçons tirées des nouvelles exigences visant les chiens traversant la frontière'''
  −
*Une grande partie de notre travail concerne des enjeux d’importation/exportation.
  −
*Récemment, des changements ont été apportés aux conditions requises pour amener son chien aux États-Unis pendant les vacances.
  −
*Ces changements notables ont fait en sorte que nous avons dû interagir avec les médias plus qu’à l’habitude.
  −
*Observations liées à ce récent travail :
  −
*#C’est une bonne idée de rencontrer nos partenaires en début d’exercice. Nous avons rencontré le BCP, et il est bien d’avoir le soutien du Centre.
  −
*#Nous avons besoin de plus de soutien de la direction pour tirer avantage du langage clair lorsque nos communications touchent les règlements/lois.
  −
*#Nous aimerions participer aux conversations sur les listes de vérification et les modèles de communication éclairés par la conception de contenu.
  −
*#*Ce serait bien de rencontrer d’autres collègues et de discuter des enseignements tirés.
  −
*#Nous nous fions beaucoup à la conception de Canada.ca pour savoir comment organiser notre contenu.
  −
'''Éditeur principal — Migration vers une nouvelle solution de recherche'''
  −
*Recherche GC est un service de recherche commun et partagé fourni par l’Éditeur principal.
  −
*Il indexe la plupart des pages Web du GC qui sont publiquement accessibles, 4,6 millions de recherches par mois.
  −
*Nous collaborons avec les ministères pour configurer la fonction de recherche selon leurs besoins.
  −
*La nouvelle solution est maintenant en ligne, depuis le 11 juin 2024.
  −
*Le nouveau fournisseur est Coveo Solutions, une société québécoise.
  −
*L’indexation de 125 sites Web, environ 2,9 millions de pages, a été faite de toutes pièces.
  −
'''Avenir de la recherche'''
  −
*Le nouveau système constitue un point de départ à partir duquel Recherche GC pourra évoluer.
  −
*Il jette les bases pour l’apprentissage automatique et l’analytique propulsés par l’IA.
  −
'''Contribution de Coveo'''
  −
*La fonction de recherche « apprend » des interactions des utilisatrices et utilisateurs.
  −
*Par exemple, elle montrera les documents sur lesquels les personnes cliquent souvent à la suite de recherches précises; c’est un exemple d’apprentissage automatique.
  −
*Fait appel à la « réponse automatisée ».
  −
*Utilise également des extraits intelligents et copie-colle des réponses provenant de documents pertinents (ce qui est semblable à l’IA). La solution a toutefois l’avantage que ce soit le GC qui écrive les réponses, ce qui nous garantit un plus grand contrôle.
  −
*Nous pouvons exploiter les métadonnées pour améliorer les recherches; nous pouvons travailler avec vous pour déterminer la meilleure façon de les utiliser et de les rédiger.
  −
'''Questions'''
     −
'''Q ''': Comment l’extrait intelligent fonctionne-t-il?
+
* Pas de mises à jour cette semaine
   −
La fonction d’extrait intelligent analyse le code HTML de la page pour deviner quel extrait répondra le mieux à la question. Nous pouvons le personnaliser davantage et travailler avec vous pour choisir le meilleur extrait.
+
BCP
   −
'''Q :''' Comment faisons-nous pour favoriser certains termes de recherche à l’échelle de tout le GC?
+
* Campagnes — nous avons encouragé les gens à se mettre au travail le plus tôt possible pour leurs campagnes.
 +
* Consultez le [[/gc-web-comms.slack.com/archives/C018SF3J4KF/p1721760193367859|fil de discussion Slack relatif aux campagnes]] pour des conseils, comme le fait d’éviter les carrousels.
 +
* Un grand merci à l’Éditeur principal pour la nouvelle biographie du ministre MacKinnon.
 +
* Nous célébrons aujourd’hui la journée internationale des autosoins.
   −
'''R :''' Il s’agit d’une question qui n’est pas nécessairement liée au nouvel outil de recherche. Nous nous penchons sur des questions telles que l’imposition de limites de temps pour la stimulation de termes.
+
Éditeur principal
   −
BTN : Le groupe de travail sur la recherche se penchera là-dessus.
+
* Retrait de la mention du ministre Seamus O’Regan et remplacement de cette dernière par celle du nouveau ministre, Steven MacKinnon.
 +
* Nous avons supprimé d’AEM le widget « Partagez cette page ». Si vous n’utilisez pas AEM, veuillez supprimer ce widget d’ici la fin août.
   −
'''Q :''' Les métadonnées doivent-elles être visibles dans le code source? On parle des métadonnées dans AEM, mais pas dans le code source.
+
BCP — [[/impact.canada.ca/fr|Impact Canada]] — Harry MacKay
   −
'''R :''' Strictement parlant, non, elles n’ont pas à être visibles dans le code source. Il existe des façons de le faire, mais pour ce cas précis, nous devrons y regarder de plus près.
+
Les tests A/B sur Canada.ca en quelques mots
   −
'''Q :''' Pour l’instant, avons-nous à changer notre façon de travailler avec les métadonnées?
+
* Nous avons commencé en 2017
 +
* Nous comptons parmi nos partenaires :
 +
** ECCC
 +
** RNCan
 +
** ASPC, Santé Canada, etc.
 +
* Que sont les tests A/B?
 +
** La conception de nombreux sites est guidée par des principes descendants en matière d’utilisabilité, de composition, etc.
 +
** Les tests A/B permettent de tester plusieurs versions d’un même produit de manière empirique.
 +
** Les variantes sont attribuées aux sujets de manière aléatoire lorsque ceux-ci arrivent sur la page.
 +
* Points à prendre en compte pour des tests réussis :
 +
** Le BTN a fourni des renseignements précieux sur les tests A/B.
 +
** Canada.ca a pour mandat de fournir des renseignements clairs au public.
 +
** L’idéal est de réaliser des tests A/B axés sur un seul élément à la fois.
 +
* Exemples de tests A/B sur Canada.ca
 +
** Prenons l’exemple d’un test sur le site de l’ARC : le fait de rendre l’élément sur lequel il fallait cliquer plus proéminent a permis d’augmenter de 20 % l’aboutissement au résultat visé.
 +
** Le Bureau de la dirigeante principale de l’accessibilité a réalisé des tests similaires dans lesquels le fait que le bouton était cliquable était mis plus en évidence, ce qui a conduit à des résultats favorables.
   −
'''R :''' Non, pour l’instant, vous n’avez rien à changer.
+
* Considérations en matière d’efficacité statistique
 +
** Vous devez vous assurer d’avoir assez de trafic sur votre page pour obtenir des résultats significatifs.
 +
** La taille de l’échantillon dépend du nombre de vues sur la page.
 +
** Pour faire augmenter le nombre de visiteurs et de visiteuses, votre seule possibilité est de faire durer le test plus longtemps.
 +
** Il est donc crucial de connaître le nombre moyen de visiteurs et visiteuses par jour pour votre page.
 +
*** Liste de contrôle relative à l’efficacité statistique
 +
**** Nombre moyen de visiteurs quotidiens et visiteuses quotidiennes — analytique de Canada.ca
 +
**** Taux de référence en matière de comportement cible
 +
**** Ampleur attendue de l’effet de la manipulation pendant les tests.
 +
** Adobe fournit un outil permettant d’estimer le nombre de visiteurs et visiteuses dont vous aurez besoin pour un taux d’amélioration et un taux de conversion de référence donnés.
 +
* Nous utilisons [[/business.adobe.com/ca fr/products/target/adobe-target.html|Adobe Target]] pour nos tests A/B, l’accès à ce logiciel est géré par l’Éditeur principal
 +
** Page GCpédia d’Adobe Target : [[/www.gcpedia.gc.ca/wiki/Adobe Target User Guide|https://www.gcpedia.gc.ca/wiki/Adobe_Target_User_Guide]]
   −
'''Q :''' Pouvons-nous obtenir un accès en lecture seule aux tableaux de bord?
+
Considérations en matière de protection de la vie privée et d’éthique
   −
'''R :''' Nous disposons de données analytiques très détaillées sur les recherches. Elles sont pour l’instant uniquement accessibles par Coveo, puisque la lecture des tableaux de bord demande une certaine expertise. La situation pourrait toutefois évoluer de sorte que les ministères finissent par y avoir accès. À savoir si ce sera un accès complet ou s’il s’agira de certains indicateurs clés, nous allons en discuter.
+
* Les renseignements personnels ne sont pas recueillis
 +
* Remettez-en vous à votre propre jugement lorsque vous utilisez Adobe Target dans des environnements impliquant des renseignements protégés.
 +
* Les ministères ont pour mandat de fournir des renseignements clairs.
 +
** Ceci peut limiter les possibilités de modifier la terminologie ou le texte employés sur votre page.
 +
* Il peut être bon de soumettre vos projets à l’entité d’évaluation de l’éthique de votre ministère, si votre ministère en possède une.
 +
* Arrêtez-vous à un moment prédéterminé pour éviter des résultats biaisés.  
 +
* L’approche de l’analyse séquentielle a des règles d’arrêt prédéfinies, comme pour les essais cliniques. L’objectif est d’éviter un problème éthique : celui d’imposer aux utilisateurs et utilisatrices des versions de pages Web cruciales offrant une performance amoindrie.
   −
'''Q :''' Est-ce possible d’avoir un accès, même minime, aux tableaux bord?
+
Points à retenir
   −
'''R :''' Ça ne faisait pas partie du contrat à l’origine, mais l’intérêt à cet égard semble grand, donc nous allons en discuter.
+
* Les tests A/B constituent un outil puissant pour l’amélioration de l’utilisabilité
 +
* L’efficacité statistique est la principale préoccupation lors de la planification de votre projet
 +
** Le taux d’amélioration moyen est de 2 %. Toutes les pages Canada.ca n’ont pas le trafic suffisant pour la réalisation d’un test.
 +
* Le test est relativement peu coûteux
   −
Contribution de l’équipe d’analytique de Service Canada : Un rappel qu’il y a aussi beaucoup de données analytiques disponibles dans Adobe Analytics. Nous allons également échanger avec Coveo pour voir ce que nous pouvons rendre disponible. Il faut nous assurer que les deux systèmes d’analytique sont complémentaires pour ne pas compliquer davantage les choses.
+
QUESTIONS
 +
 
 +
Q : Comment jugez-vous ces tests en comparaison à d’autres types de tests?
 +
 
 +
R : C’est une bonne méthode une fois que le site Web a été mis en place. C’est vraiment une solution d’optimisation. Ne permet pas très bien de répondre aux questions d’accessibilité. Ces tests sont pertinents en combinaison avec d’autres types de tests pouvant être plus adaptés à une catégorie spécifique d’utilisateurs et utilisatrices ou à d’autres considérations.
 +
 
 +
Remarque : Les tests A/B sont utiles pour régler certains points comme les désaccords des client·e·s ou du cabinet ministériel.
 +
 
 +
Remarque : Nous avons récemment fait une présentation sur Adobe Target, la voici : <nowiki>https://gcxgce.sharepoint.com/:p:/t/1000163/ESGBlOV_32RNuYTcPJKTU8EBO9J9Quk0Ef9jMHej1NYSAg?e=4nGzEc</nowiki>
 +
 
 +
Remarque :
 +
 
 +
Les tests d’utilisabilité sur un prototype peuvent aussi être une solution pour les potentielles considérations éthiques mentionnées par Harry.
 +
 
 +
Prenons un exemple : si vous souhaitez tester l’incidence de la suppression d’un paragraphe de contenu entier et que vous voulez éviter que certaines personnes utilisant la page aient plus d’informations que d’autres, vous pouvez réaliser des tests d’utilisabilité au lieu d’un test A/B.
 +
 
 +
== Table ronde ==
 +
ISDE
 +
 
 +
* Rappel : nous demandons toujours aux ministères de nous communiquer les pages incluant du contenu généré à l’aide de l’IA afin que nous puissions créer le sujet secondaire — nous visons un lancement en septembre.
 +
 
 +
Contact : [[Mailto:christopher.colyer@ised-isde.gc.ca|christopher.colyer@ised-isde.gc.ca]]
Rob.boudreau
869

edits

Retrieved from "https://wiki.gccollab.ca/Special:MobileDiff/124054"