Prototype

Als het prototype draait, kun je de applicatie gebruiken. Het genereren van een quiz ziet er als volgt uit:

Wanneer het genereren klaar is, krijg je de resultaten te zien:

Je kunt de gegenereerde quiz exporteren naar een .csv-bestand in het juiste formaat voor Brightspace en importeren:

In Brightspace kun je deze quiz vervolgens previewen, zodat je hem ziet zoals de student hem zou zien:

Gebruikerstest

Om te testen in hoeverre het prototype goed werkt voor docenten (de UI simpel en zelfdocumenterend genoeg is, bruikbare vragen genereert en snel genoeg werkt) hebben we een gebruikerstest gedaan. Hiervoor hebben we 7 docenten, sommige op locatie (op school) en sommige remote laten testen met het prototype. Hierbij hebben we de gebruikers geinstrueerd en laten testen met eigen lesmateriaal en een zelfgekozen onderwerp.

De resultaten zijn uitgebreid uiteengezet in ons verantwoordingsdocument.

Resultaat

De resultaten van de gebruikerstest hebben we bij elkaar gevoegd en vereenvoudigd uiteengezet in een mindmap:

%%{init: {'theme':'default'}}%%
mindmap
  root((AI Quizgenerator))
    Gebruiksgemak
    ::icon(fa fa-user)
      Eenvoudig ++
      HHS huistijl ++
      Niet op de hoogte van de quiz-functie in Brightspace ++
    Functionaliteit
    ::icon(fa fa-cogs)
      Verwachtingen overtroffen +
      Graag afwisseling met meer inzichtvragen -
      Zou 1⁄3 van de vragen zo kunnen gebruiken voor de les +/-
      Nederlandse taalkwaliteit is volgende, sommige woorden werden wel letterlijk vertaald +
      Gebruik van PowerPoint-, Word- en PDF-bestanden als lesmateriaal ++
    Inzetbaarheid
    ::icon(fa fa-graduation-cap)
      Oefenapplicatie voor studenten
      Vaardigheden toetsen bij docenten
      Andere faculteiten dan de IT-afdelingen
    Innovatie
    ::icon(fa fa-magic)
      Controle over quiz/toets-samenstelling +/-
      Frontend layout overzichtelijker -
        Vraaggroepering bepalen
        Duidelijke eisen voor sleutelwoorden onderwerp
        Multiple-choice vragen als letters i.p.v. cijfers
      Vergelijking met ChatGPT, meer inzichtvragen --
      Engelstalige versie +/-
      Verwijderen en toevoegen van enkele nieuw gegenereerde vragen -
      Afbeeldingen gebruiken bij de quizgenerator --
      Validatie voor de applicatie --
        Frontend validatie
      Prompt voor hergenereren van quizvragen --
      Incorrecte true/false antwoorden corrigeren --

Onze voorstellen voor volgende ontwikkelstappen zijn te vinden in het hoofdstuk Verdere ontwikkeling.