OBJECTIF I. Élaborer des méthodes d’essai détaillées et pertinentes qui génèrent des données afin de mesurer l’efficacité de la solution
Méthodes d’essai
La mesure de la solution de conception est considérée comme efficace et authentique lorsque l’élève a mis à l’essai chaque aspect du cahier des charges. Les différents tests peuvent être classés comme suit.
Évaluations par des experts
La solution est présentée à une personne considérée comme experte dans l’utilisation de produits similaires. Du temps lui est donné pour interagir avec cette solution, puis elle est interrogée sur les aspects de son efficacité. L’expert dispose de connaissances et de compétences particulières qui l’habilitent à juger de l’efficacité de la solution. L’expert peut être le client.
Essais sur le terrain
Un essai sur le terrain est un test de la performance d’une solution dans des conditions reproduisant la situation dans laquelle elle sera utilisée. Par exemple, un point d’information interactif (développé en HTML) créé pour une exposition dans un musée peut être mis à l’essai avec les visiteurs de l’exposition, sous forme d’essais auprès d’utilisateurs ou d’observations des utilisateurs.
Tests de performance
La performance d’une solution est testée dans les conditions normales de son utilisation. Différents essais permettent de recueillir des données quantitatives, notamment les suivants :
Observations des utilisateurs
La solution est présentée à l’utilisateur, qui doit réaliser une tâche sans aide ou avec une aide réduite au minimum. L’interaction de l’utilisateur avec la solution est alors observée et consignée.
Essais auprès d’utilisateurs
La solution est présentée à l’utilisateur et son mode d’utilisation lui est expliqué. Des questions sont posées à l’utilisateur au fur et à mesure qu’il interagit avec la solution ou un sondage à remplir lui est donné. Les essais auprès d’utilisateurs peuvent inclure des groupes témoins.
L’entretien ou les questions du sondage doivent être formulés de façon à obtenir des réponses qui évaluent le respect du cahier des charges par la solution.
Recueil de données
Quel que soit leur type, les données recueillies par le biais d’essais sont considérées comme des sources primaires.
Les données qualitatives se rapportent à la qualité et sont recueillies sous forme de descriptions. Ces données sont généralement subjectives et peuvent être converties en valeurs numériques. Il peut par exemple s’agir d’une déclaration comme : « J’aime la forme globale de la solution, elle est facile à prendre en main, je lui donnerais 9/10 pour le confort » ou : « La page Web a l’air d’être configurée de façon intuitive, la navigation semble facile et le recours aux espaces vides donne de la clarté. Je donnerais 8/10 à la clarté de la page. »
Différents moyens permettent d’obtenir des données qualitatives, notamment :
Les données quantitatives se rapportent à la quantité et sont recueillies sous forme de valeurs définies, à savoir des valeurs numériques. Ces données sont objectives et peuvent être mesurées. Il peut par exemple s’agir d’une déclaration comme : « Toutes les informations de la base de données doivent être accessibles en trois clics maximum » ou : « Le coût global des matériaux ne doit pas dépasser 45 € ».
Différents moyens permettent d’obtenir des données quantitatives, notamment :
Exemple 1 - Comparaison entre le produit créé et des produits disponibles sur le marché et indication des points forts et des points faibles
La mesure de la solution de conception est considérée comme efficace et authentique lorsque l’élève a mis à l’essai chaque aspect du cahier des charges. Les différents tests peuvent être classés comme suit.
Évaluations par des experts
La solution est présentée à une personne considérée comme experte dans l’utilisation de produits similaires. Du temps lui est donné pour interagir avec cette solution, puis elle est interrogée sur les aspects de son efficacité. L’expert dispose de connaissances et de compétences particulières qui l’habilitent à juger de l’efficacité de la solution. L’expert peut être le client.
Essais sur le terrain
Un essai sur le terrain est un test de la performance d’une solution dans des conditions reproduisant la situation dans laquelle elle sera utilisée. Par exemple, un point d’information interactif (développé en HTML) créé pour une exposition dans un musée peut être mis à l’essai avec les visiteurs de l’exposition, sous forme d’essais auprès d’utilisateurs ou d’observations des utilisateurs.
Tests de performance
La performance d’une solution est testée dans les conditions normales de son utilisation. Différents essais permettent de recueillir des données quantitatives, notamment les suivants :
- essais destructifs évaluant la résistance aux chocs ou l’inflammabilité ;
- essais cycliques ;
- mesure des propriétés physiques comme le poids et la taille ;
- test du temps de chargement d’une page Web ;
- facilité de navigation dans une histoire, un jeu ou un site Web interactifs.
Observations des utilisateurs
La solution est présentée à l’utilisateur, qui doit réaliser une tâche sans aide ou avec une aide réduite au minimum. L’interaction de l’utilisateur avec la solution est alors observée et consignée.
Essais auprès d’utilisateurs
La solution est présentée à l’utilisateur et son mode d’utilisation lui est expliqué. Des questions sont posées à l’utilisateur au fur et à mesure qu’il interagit avec la solution ou un sondage à remplir lui est donné. Les essais auprès d’utilisateurs peuvent inclure des groupes témoins.
L’entretien ou les questions du sondage doivent être formulés de façon à obtenir des réponses qui évaluent le respect du cahier des charges par la solution.
Recueil de données
Quel que soit leur type, les données recueillies par le biais d’essais sont considérées comme des sources primaires.
Les données qualitatives se rapportent à la qualité et sont recueillies sous forme de descriptions. Ces données sont généralement subjectives et peuvent être converties en valeurs numériques. Il peut par exemple s’agir d’une déclaration comme : « J’aime la forme globale de la solution, elle est facile à prendre en main, je lui donnerais 9/10 pour le confort » ou : « La page Web a l’air d’être configurée de façon intuitive, la navigation semble facile et le recours aux espaces vides donne de la clarté. Je donnerais 8/10 à la clarté de la page. »
Différents moyens permettent d’obtenir des données qualitatives, notamment :
- un questionnaire visant à déterminer si le public cible apprécie l’apparence d’un produit ;
- un sondage mené auprès des élèves pour déterminer quelles parties d’un jeu vidéo ils trouvent trop faciles ou trop difficiles ;
- le travail avec un jury de dégustation pour déterminer si le public cible aime le produit alimentaire goûté ;
- l’entretien avec un expert, après interaction avec la solution ;
- les essais auprès d’utilisateurs en donnant un jouet à des enfants et en observant leurs réactions pendant qu’ils jouent.
Les données quantitatives se rapportent à la quantité et sont recueillies sous forme de valeurs définies, à savoir des valeurs numériques. Ces données sont objectives et peuvent être mesurées. Il peut par exemple s’agir d’une déclaration comme : « Toutes les informations de la base de données doivent être accessibles en trois clics maximum » ou : « Le coût global des matériaux ne doit pas dépasser 45 € ».
Différents moyens permettent d’obtenir des données quantitatives, notamment :
- la mesure du temps nécessaire aux utilisateurs pour trouver certaines informations sur un site Web ;
- la prise de mesures d’un produit pour s’assurer de l’adéquation de sa taille et du respect des contraintes de poids ;
- un test bêta réalisé sur des supports interactifs pour identifier toute défaillance ;
- des tests de performance pour déterminer la résistance d’un produit ;
- la vérification de la capacité d’un système de stockage ;
- le contrôle du nombre de consultations d’un site Web sur une période donnée.
Exemple 1 - Comparaison entre le produit créé et des produits disponibles sur le marché et indication des points forts et des points faibles
Exemple 2 - Exemple de retour d’information d’utilisateurs