PoC-V1 Test plan

Testdoel

Het doel van deze test is om de gerealiseerde requirements in het Backpack PoC-V1 te valideren op de functionaliteiten en de gebruiksvriendelijkheid. Ook wordt er met deze test gekeken of de flow en functionaliteiten een verbetering zijn ten opzichte van het Larawall CMS.

Testgroep

Voor deze test groep worden mensen uitgenodigd die bekend zijn met het Larawall CMS, dit zijn o.a. project managers, front-end developers en designers.

Voor het opstellen van deze test is er gebruik gemaakt van het onderzoek naar de usability test methodes die het beste aansluiten op de test doelen.

Test methodes: Link

Aanpak

De test wordt met 4 á 5 personen individueel uitgevoerd. Voor de test krijgt de tester een uitleg over het project en de test ook krijgt de tester een zip bestand toegestuurd via de mail met daarin twee afbeeldingen en een document met inloggegevens. De tester doorloopt vervolgens een aantal gegeven scenario's met opdrachten en bijbehorende vragen die ze in het PoC moeten uitvoeren. De test zal online worden uitgevoerd, daarom wordt er gevraagd of de tester zijn/haar scherm kan delen en wordt er toestemming gevraagd om de test te mogen opnemen met audio. 

Aan de tester wordt gevraagd om hardop te denken tijdens de test om de gedachtegang te kunnen volgen.

Aan het einde van de test is er een moment om feedback te geven op het systeem of om vragen te beantwoorden.

Benodigdheden:

  • Een online prototype
  • Inloggegevens
  • Online meeting
  • Screen Recorder software (bijv. OBS studio)
  • Test personen
  • Test plan

De user test

Inleiding

Tijdens deze test loop je met behulp van een aantal opdrachten door een website. Op de front-end krijg je een pagina te zien met de populairste artiesten en tracks van Spotify gebruikers die hebben ingelogd op de website. Ik wil je vragen de link die je straks krijgt te openen in een incognito browser, dit voorkomt dat je automatisch met jouw Spotify in te logt. Voordat we beginnen stuur ik je via de mail een zip bestand met  daarin twee afbeeldingen en een document met linkjes en inloggegevens. Er worden geen persoonlijke gegevens van jou gebruikt of opgeslagen tijdens deze test.

Ik wil je vragen om hardop na te denken tijdens de handelingen. Er zijn geen foute antwoorden in deze test, wanneer je feedback hebt mag dit tijdens de test of aan het einde worden gegevens. 

We beginnen eerste met het doorlopen van een aantal scenario's, daarna stel ik nog een aantal vragen waarbij je dit systeem vergelijkt met Larawall CMS.

Met toestemming wil ik graag nu beginnen met het opnemen van het scherm en geluid zodat ik later de handelingen terug kan zien en de resultaten kan verwerken.

De test

Introductie scenario 1

Opdracht 1: Open Link 1 in het document in een incognito browser.
Opdracht 2: Scroll door de pagina en beschrijf kort wat je ziet.

Scenario 1: Je bent een nieuwe gebruiker, en je wilt inloggen om jouw top15 artiesten en top15 tracks te zien. 

Opdracht 1: Login in met de Spotify inloggegeven uit het document.
Vraag 2: Wat zie je nu op de pagina? Wat is er veranderd.
Opdracht 2: Ga terug naar de home pagina.
Vraag 3: Zijn de toplijsten veranderd?

Introductie scenario 2

Opdracht 1: Open de tweede link in het document of gebruik /admin
Opdracht 2: Login in met de inloggegevens uit het document.

Scenario 2: Je bent een admin en je wilt zien welke nummers er in het systeem staan.

Opdracht 1: Ga naar de pagina waar je alle nummers kunt zien.
Vraag 2: hoeveel items/nummers staan er in de database?
Opdracht 3: Je wilt in de tabel alleen de nummers zien van 3 artiesten, deze 3 mag je zelf kiezen hoe zou jij dit doen? 
Opdracht 4: Je wilt de nummers die het oudst zijn als eerste zien hoe doe je dit?
Opdracht 5: Je wilt terug naar hoe de tabel er oorspronkelijk uitzag, hoe doe je dit?
Opdracht 6: Je wilt alleen het nummer [nummer uit database] zien hoe doe je dit?

Scenario 3: Je wilt een de profiel foto van een Artiest aanpassen.

Opdracht 1: Navigeer naar de artiestenpagina.
Opdracht 2: Verander de foto van de [artiestennaam] naar de artiestfoto1.jpg, crop hierbij de afbeelding zo dat de vier personen in het kader passen.
Vraag 3: Welke velden kan je aanpassen?

Scenario 4: Je ziet dat [artiestennaam] tussen de lijst met artiesten staat, je vindt dit deze artiest niet geschikt voor een jonge doelgroep en wilt hem niet tonen op je website.

Opdracht 1: Verberg de Artiest [artiestennaam].
> Ga terug naar het overzicht met alle artiesten.
Opdracht 2: Verwijder de eerste 10 Artiesten in de lijst uit de database.

Scenario 5: Je wilt een nieuwe gebruiker aanmaken met de rol bewerker.

Opdracht 1: maak een nieuwe gebruiker aan met de gegevens uit het document, de rol bewerker en geen extra permissie. 

Scenario 6: Je wilt jouw profiel persoonlijker maken. 

Opdracht 1: Pas jouw profiel aan naar de gegevens bij Scenario 6 met foto.

Scenario 7: Je wilt snel zien hoeveel nieuwe Spotify gebruikers er in de afgelopen 7 dagen bij zijn gekomen. 

Vraag 1: Waar kan je dit zien?
Vraag 2: Vertel wat je in de grafieken ziet.
Vraag 3: Zijn deze grafieken duidelijk?

Vragen:

Vraag 1: Vind je het style overeenkomen met de Spotify uitstraling?
Vraag 2: Wat is je algemene indruk van het CMS?
Vraag 3: Werkte de functionaliteiten zoals verwacht?
Vraag 4: Zijn er functionaliteiten die je mist?
Vraag 5: Wat is je indruk van dit CMS vergeleken met het Larawall CMS?

Ruimte voor vragen en feedback.