1. DIEB14.1 Kursusgang 14 Tidsforbrug til en usability-evaluering Oversigt: Sidste kursusgang Opgaver Aktiviteter Erfaringer med tidsforbrug Instant Data Analysis

2. DIEB14.2 Kursusgang 14 Oversigt: Aktiviteter ­ Aktiviteter i usability-evalueringen Erfaringer med tidsforbrug Instant Data Analysis

3. DIEB14.3 Usability-evaluering: Aktiviteter Form: formative/summative When in development process: Exploratory Assessment Validation Comparison Participants and roles Location and equipment Determine basics Plan evaluation Prepare tests Interpret data Conduct tests Recreation of context Selection of test subjects Design of tasks Evaluation plan: Purpose Key questions User profile Participants and roles Test methods Task list Context and equipment Data to be collected Report structure Each user: Introduction Task solving Data collection Logging Debriefing Transcription of log files Data summary Data analysis Documentation (report)

4. DIEB14.4 Kursusgang 14 Oversigt: Aktiviteter Erfaringer med tidsforbrug ­ CUE-2 ­ Vores eksperimenter Instant Data Analysis

5. DIEB14.5 Erfaringer med tidsforbrug Rolf Molich: eksperimenter med usability-evalueringer Systematisk opsamling af data Tilgængelige for alle: ­ http://www.dialogdesign.dk/ cue.html

6. DIEB14.6 CUE-2: Tænke-højt kontra Heuristisk inspektion www.hotmail.com 8 laboratorier testede web- stedet ­ Professionelle firmaer ­ Forskningsmiljøer ­ Studerende Testen skulle omfatte et antal specificerede funktioner Selve udførelsen kunne tilrettelægges frit Formålet var at undersøge kvaliteten af brugbarhedstest 1 af laboratorierne indgik ikke seriøst i undersøgelsen 6 af laboratorierne baserede deres evaluering på test med brugere ­ De fandt mellem 17 og 75 problemer af forskellige kategorier 1 af laboratorierne baserede deres evaluering på en kombination af heuristisk inspektion og test med brugere ­ De fandt 150 problemer ­ De beskrives tit med formuleringen “might be a problem” ­ 107 af deres problemer findes ikke af nogen af de andre ­ De finder 19 ud af 26 “core problems” men uklart hvordan

7. DIEB14.7 CUE-2: Resultater

8. DIEB14.8 CUE-2 tal Ikke alle opsamlede systematisk data om tidsforbrug Andre tal: 100-140 timer for en total evaluering med 6-8 brugere og systematisk dataanalyse ABCDEFGHJGennemsnit Forberedelse37405710347041 Testing433691018 7229 Analyse og rapportering5647183055277644 Samlet tidsforbrug136123841305010746218112

9. DIEB14.9 Vores eksperimenter Vi har lavet et antal eksperimenter med evalueringsmetoder. I den forbindelse har vi målt tidsforbrug

10. DIEB14.10 Kursusgang 14 Oversigt: Aktiviteter Erfaringer med tidsforbrug Instant Data Analysis ­ Forskningsartikel

11. DIEB14.11 Forskningsartikel Kjeldskov, J., Skov, M. B. and Stage, J. (2004) Instant Data Analysis: Evaluating Usability in a Day. Proceedings of NordiCHI 2004, pp. 233-240. ACM. Kjeldskov, J., Skov, M. B. and Stage, J. (2007) Instant Data Analysis (IDA). Proceedings of Mause International Workshop on Review, Report and Refine Usability Evaluation Methods (R3-UEM).

12. DIEB14.12 Opsummering og næste gang Videregående om usability-evaluering Aktiviteter i evalueringen Tidsforbrug Reducering af tidsforbrug til analyse Næste gang: Tidlig usability-evaluering