# Mockup 2 : TESTS Nos testeurs étant français, nous avons décidé de conduire ces tests en langue française pour faciliter la compréhension des testeurs. Nous avons décidé de poser les mêmes questions pour la première série de tests que nous avons conduits (les 3 premiers tests). Pour le 4ème et le 5ème test, c'est la version améliorée qui a été testé. ## Qualitative interview guide **Introduction** Bonjour, nous sommes une équipe de 4 étudiants de l'EM Lyon. Dans le cadre de notre cours "Designing With Web", nous avons construit le prototype d'une application mobile. C'est ce prototype que nous allons soumettre à votre test. Q1: Mais avant d'aller plus loin, comment allez vous pendant cette période inédite de confinement ? Q2:Avez-vous déjà réalisés ce genre de tests d'applications mobiles auparavant ? Q3: Peut-être, auriez-vous des questions quant au déroulement du test que nous allons vous faire passer ? **General information related to the topic** *Query the tester with general questions. Talk about his habits.* Q4: Est-ce que vous utilisez souvent des applications mobiles dans votre vie quotidienne pour vous faciliter la vie ? Si oui, quel genre d'applications utilisez-vous ? Q5: Avez-vous l'habitude de voyager et de visiter de nouvelles villes (que ce soit en France ou à l'étranger) ? Q6: Quels outils / moyens utilisez-vous généralement lorsque vous visitez une nouvelle ville que vous ne connaissez pas ? **Behavior related to particular issues** *Ask him to express himself on your application, product or service. Feel free to use the prototype for this part.* Q7: Vous est-il déjà arrivé, lorsque vous vous balladiez dans une ville, de vous demander ce qu'était le monument devant lequel vous passiez ? Son histoire, son utilité, son architechture...? Q8: Que pensez-vous du design de notre application ? Q9: Que pensez-vous de la fluidité de notre application (autrement dit, avez-vous compris facilement comment elle fonctionne)? **Constructive suggestions for improvement** *Ask him how you could improve your prototype* Q10:Avez-vous des propositions d'améliorations à nous faire pour rendre notre application plus compréhensible et facile à utiliser ? ::: --- :::warning ## TEST 1 : Béatrice Roquebert ## Pre-testing **Name:** Béatrice **Age:** Roquebert **Occupation:** Mère au foyer **Context of the meeting (where, with who, etc.):** En cette période de confinement, il est difficile de trouver des personnes inconnues à tester. Nous avons donc demandés aux membres de nos familles (en tout cas, ceux qui ont acceptés) de participer à ces tests. **Duration of the meeting:** 15 minutes ## User scenarios testing **1st instruction** (this is your first scenario): Vous êtes un étranger qui viens pour la première fois à Paris, vous souhaitez être prévenu lorsque vous passez devant un des monuments incontournables de la ville. **Observations:** Elle a réussis à prendre l'application en mains assez facilement. Elle n'a pas hésité sur les différentes pages. En l'espace de quelques secondes, elle a réussis à accomplir ce qu'on lui avait demandé. Il semble qu'elle ait bien compris le principe de l'application et qu'elle ait même trouvé ça marrant de se ballader dessus (sans même qu'on lui demande). --- **2nd instruction:** (this is your second scenario): Vous habitez à New York, vous connaissez bien la ville. Il vous arrive souvent de flâner dans votre ville que vous aimez tant. Toutefois, vous regrettez ne pas connaitre tous les "coins secrets" de la ville, vous souhaiteriez donc être prévenue lorsque vous passez devant un monument insolite. **Observations:** Même observations que précédemment, sauf que ça a été encore plus rapide à faireque précédemment. Elle nous a toutefois fait remarquer qu'il y avait une faute d'orthographe sur une page (à modifier !). ## Qualitative testing **Positive feedback:** - Application fluide, simple et très compréhensible. - Elle a compris les instructions qu'on lui a donné et a su les accomplir sans difficultés et sans poser de questions. - Application utile pour elle car si elle prévoit souvent quelques monuments à visiter dans une ville (prévu à l'avance), elle aime bien, entre ces visites, se ballader dans la ville pour découvrir des endroits moins connus et plus originaux. Et surtout, elle aime bien débattre avec sa famille de l'histoire des monuments. --- **Neutral feedback:** - Le style de l'application lui convient. Elle n'a pas de remarques particulières à faire. Sobre et efficace. --- **Negative feedback:** - Qu'il n'y ait pas encore plus d'informations sur les différents monuments (c'est normal, notre base de données est en cours de construction. Nous n'en sommes pas encore à ce stade là !). - Elle nous a proposé de modifier la première page (en metteant plusieurs photos de différent monuments plutôt qu'une seule photo d'un seul monument). --- **Learning & insights:** On retient de cet entretien que l'application est fonctionnelle et utilisables simplement pour un touriste lambda sans qu'il soit nécessaire de donner des explications sur le fonctionnement de l'application. --- **Decisions & actions:** Plusieurs choses : - modifier la première page, - compléter la base de données, - corriger la faute d'orthographe. ::: :::warning ## TEST 2 : Clémence Roquebert ## Pre-testing **Name:** Clémence **Age:** Roquebert **Occupation:** Étudiante en archéologie **Context of the meeting (where, with who, etc.):** En cette période de confinement, il est difficile de trouver des personnes inconnues à tester. Nous avons donc demandés aux membres de nos familles (en tout cas, ceux qui ont acceptés) de participer à ces tests. **Duration of the meeting:** 10 minutes ## User scenarios testing **1st instruction** (this is your first scenario): Vous êtes un étranger qui viens pour la première fois à Paris, vous souhaitez être prévenu lorsque vous passez devant un des monuments incontournables de la ville. **Observations:** Clémence a été encore plus rapide que Béatrice dans la prise en main de l'application - au point qu'elle n'a pas forcément pris le temps de lire toutes les informations que nous avons donnés-. Sinon, elle a réussis à accomplir ce qu'on lui avait demandé sans poser de questions. --- **2nd instruction:** (this is your second scenario): Vous habitez à New York, vous connaissez bien la ville. Il vous arrive souvent de flâner dans votre ville que vous aimez tant. Toutefois, vous regrettez ne pas connaitre tous les "coins secrets" de la ville, vous souhaiteriez donc être prévenue lorsque vous passez devant un monument insolite. **Observations:** Elle a remarqué également la faute d'orhtographe que nous avait présenté Béatrice. Elle s'étonne également que les monuments que nous proposons ne sont pas assez originaux (encore trop connus). ## Qualitative testing **Positive feedback:** - Application facile à comprendre et à prendre en mains. - Pas de difficultés pour s'inscrire et comprendre le fonctionnement de l'application. - En tant qu'étudiante en archéologie, elle aime bien connaitre l'histoire et l'architechture des monuments (même ceux de la ville dans laquelle elle habite). - Elle n'utilise pas d'applications jusqu'à présent quand elle visite une ville car elle n'aime pas prévoir à l'avance ce qu'elle va visiter. Notre appli pourrait donc vraiment l'intéresser ! --- **Neutral feedback:** - Pas de remarque sur le style de l'application. --- **Negative feedback:** - Trouver des monuments plus originaux et plus insolites. - La faute d'orthographe. - Peut-être sur la page qui explique que les utilisateurs recevront une notification, les options ne sont pas centrées. --- **Learning & insights:** On retient de cet entretien que l'application est facile à utiliser et compréhensible. Il faut un service parfait et pas de marge d'erreurs possibles. --- **Decisions & actions:** Plusieurs choses : - corriger la faute d'orthographe, - trouver des monuments plus originaux, - réviser la page qu'elle nous a indiqué. ::: :::warning ## TEST 3 : Aliciane Roquebert ## Pre-testing **Name:** Aliciane **Age:** Roquebert **Occupation:** Étudiante en communication **Context of the meeting (where, with who, etc.):** En cette période de confinement, il est difficile de trouver des personnes inconnues à tester. Nous avons donc demandés aux membres de nos familles (en tout cas, ceux qui ont acceptés) de participer à ces tests. **Duration of the meeting:** 10 minutes ## User scenarios testing **1st instruction** (this is your first scenario): Vous êtes un étranger qui viens pour la première fois à Paris, vous souhaitez être prévenu lorsque vous passez devant un des monuments incontournables de la ville. **Observations:** Aliciane a compris le fonctionnement de l'application globalement : elle a réussis à trouver ce qu'on lui demandait. Cependant, elle a posé une question : "je suis censé choisir une ville là ?". Elle a finalement trouver la réponse par elle-même. Elle a également un peu hésité sur les différents modes proposés(elle voulait être sûre d'avoir choisi le bon et grâce au bouton retour au mode, elle a pu vérifier que c'était le cas). --- **2nd instruction:** (this is your second scenario): Vous habitez à New York, vous connaissez bien la ville. Il vous arrive souvent de flâner dans votre ville que vous aimez tant. Toutefois, vous regrettez ne pas connaitre tous les "coins secrets" de la ville, vous souhaiteriez donc être prévenue lorsque vous passez devant un monument insolite. **Observations:** Pas d'observations particulières : elle a réussis ce qu'on lui demandait, sans hésiter cette fois et sans poser de questions. Donc, si elle a eu quelques difficultés à prendre en mains l'application au départ, elle a ensuite très rapidement compris les tenants et les aboutissants. ## Qualitative testing **Positive feedback:** - En tant qu'étudiante en communication, elle a l'habitude de faire des mockup et elle trouve celui-ci plutôt bien fait. - Elle a réussis à apprivoiser l'application par elle-même en quelques secondes (quand bien même elle a eu une petite difficulté lors de la toute première utilisation). --- **Neutral feedback:** - Informations proposés : simple et efficace. --- **Negative feedback:** - En tant qu'étudiante en communication, elle est exigente sur le design. Elle trouve que le design est peu ancien : "années 2000". - Sur la page où l'iphone reçoit la notification, revoir la notification en proposant "en savoir plus..." pour donner plus envie de cliquer dessus. --- **Learning & insights:** On retient de cet entretien que l'application est fait de telle sorte qu'elle puisse être comprise par l'utilisateur par lui-même au bout de quelques secondes. On retient aussi que le design est peut-être un peu ancien. --- **Decisions & actions:** Plusieurs choses : - revoir la notification pour l'améliorer, - essayer de retravailler le design pour le rendre plus moderne. ::: :::warning ## TEST 4 : Héloïse Roquebert Note : à la suite des 3 premiers tests, nous avons modifier notre mockup en fonction des remarques qui nous ont été faites. Les Tests 4 et 5 ont donc été fait sur la nouvelle version améliorée. ## Pre-testing **Name:** Héloïse **Age:** Roquebert **Occupation:** Lycéenne en 2nde **Context of the meeting (where, with who, etc.):** En cette période de confinement, il est difficile de trouver des personnes inconnues à tester. Nous avons donc demandés aux membres de nos familles (en tout cas, ceux qui ont acceptés) de participer à ces tests. **Duration of the meeting:** 5 minutes ## User scenarios testing **1st instruction** (this is your first scenario): Vous êtes un étranger qui viens pour la première fois à Paris, vous souhaitez être prévenu lorsque vous passez devant un des monuments incontournables de la ville. **Observations:** Héloïse a su très rapidement prendre en mains l'application sans difficultés particulières. Elle a juste hésité sur la 1ère slide où elle a voulu cliquer sur les photo plutôt que sur le bouton "choose the city". Sinon, son déplacement sur l'application était plutôt fluide. --- **2nd instruction:** (this is your second scenario): Vous habitez à New York, vous connaissez bien la ville. Il vous arrive souvent de flâner dans votre ville que vous aimez tant. Toutefois, vous regrettez ne pas connaitre tous les "coins secrets" de la ville, vous souhaiteriez donc être prévenue lorsque vous passez devant un monument insolite. **Observations:** Pas de remarques supplémentaires. Pas d'hésitations, rapide, pas de difficultés. Très bon test ! ## Qualitative testing **Positive feedback:** - En tant que fervente utilisatrice des applications mobiles, Héloïse adore tout ce qui est innovant. Cette application la tente beaucoup, notamment pour mieux connaitre sa ville dans laquelle elle adore se promener tous les jours, dès qu'elle en a l'occasion. - Héloïse n'a pas eu de difficultés pour se familiariser avec l'application. Elle estime que dès le première utilisation, on comprends très facilement comment elle fonctionne ! - Elle aime bien le design et trouve qu'il y a un bon équilibre entre texte et images. --- **Neutral feedback:** - Pas de commentaires. --- **Negative feedback:** - La première page : Héloise n'a pas compris directement qu'il fallait appuyer sur le bouton "choose the city". Elle a d'abord essayer d'appuyer sur les photos. - Ensuite, toutes les fois où nous offrons la possibilité de revenir en arrière sur l'application, Héloïse essayait d'appuyer sur la flèche, plutôt que sur le bouton. Donc, il faudrait aggrandir le bouton pour qu'il inclue la flèche. --- **Learning & insights:** On retient de cet entretien que l'application est quasiment finie. Il reste quelques derniers réglages à faire et nous serons bons. --- **Decisions & actions:** Plusieurs choses : - revoir le bouton "choose the city" sur la première page - Inclure les flèches dans les boutons (dans les pages où on propose de revenir en arrière ou d'aller en avant) ::: :::warning ## TEST 5 : Renaud Roquebert Note : à la suite des 3 premiers tests, nous avons modifier notre mockup en fonction des remarques qui nous ont été faites. Les Tests 4 et 5 ont donc été fait sur la nouvelle version améliorée. ## Pre-testing **Name:** Renaud **Age:** Roquebert **Occupation:** Avocat fiscaliste **Context of the meeting (where, with who, etc.):** En cette période de confinement, il est difficile de trouver des personnes inconnues à tester. Nous avons donc demandés aux membres de nos familles (en tout cas, ceux qui ont acceptés) de participer à ces tests. **Duration of the meeting:** 5 minutes ## User scenarios testing **1st instruction** (this is your first scenario): Vous êtes un étranger qui viens pour la première fois à Paris, vous souhaitez être prévenu lorsque vous passez devant un des monuments incontournables de la ville. **Observations:** Renaud a fait la même erreur qu'Héloïse en essayant d'appuyer sur les photos sur la première page plutôt que sur le bouton. Mais il a vite compris ce qu'il fallait faire et il a trouvé facilement ce qu'on lui demandait de faire. --- **2nd instruction:** (this is your second scenario): Vous habitez à New York, vous connaissez bien la ville. Il vous arrive souvent de flâner dans votre ville que vous aimez tant. Toutefois, vous regrettez ne pas connaitre tous les "coins secrets" de la ville, vous souhaiteriez donc être prévenue lorsque vous passez devant un monument insolite. **Observations:** Pas de remarques supplémentaires, pas de difficultés. ## Qualitative testing **Positive feedback:** - Renaud trouve l'application "facile, claire et intuitive". - Il a l'a trouve très utile et serait très enthousiasthe à l'idée de l'utiliser dans le futur. --- **Neutral feedback:** - Pas de commentaires. --- **Negative feedback:** - Globalement, les mêmes commmentaires qu'Héloïse. Rien de plus. --- **Learning & insights:** On retient de cet entretien qu'il convient de modifier les derniers petits réglages et que nous serons ensuite prêt pour la fin de cette étape. --- **Decisions & actions:** Plusieurs choses : idem qu'Héloïse : - revoir le bouton "choose the city" sur la première page - Inclure les flèches dans les boutons (dans les pages où on propose de revenir en arrière ou d'aller en avant) ::: :::success Résultat : nous avons donc modifié notre mockup suite aux commentaires fait lors des deux derniers tests. Nous estimons que nous avons terminé les mockups et nous sommes prêts à les présenter ! :::