Evaluating usability evaluation methods in the context of walk-up-and-use systems

Abstract

Bakgrunn ISO 9241-210:2019 er muligens den ultimate grunnsteinen i moderne brukersentrert design. Essensen til standarden er godt kjent av de aller fleste innen fagfeltet, og er tilsynelatende lettfattelig med sine fire steg. Innenfor standarden finner man blant annet brukbarhetsevaluering som et viktig prinsipp for å sikre at designløsninger dekker spesifikke brukerbehov. Gå-bort-til-og-bruk-systemer er svært enkle i form av at de er lite spesialiserte mot spesifikke brukergrupper. I denne avhandlingen blir effektiviteten til brukbarhetsevalueringsmetoder undersøkt ved å bruke slike metoder på to ulike gå-bort-og-bruk-systemer.

Mål Målet med dette prosjektet er å bidra til litteraturen med eksempler på hvordan visse evalueringsmetoder, med ISO 9241-210:2019 i grunn, fungerer i kontekst av gå-bort-og-bruk-systemer.

Prosess Projektet tar for seg to ulike gå-bort-og-bruk-systemer som begge blir evaluert ved hjelp av brukbarhetsevalueringsmetoder. Resultatene fra disse evaluteringene ligger så til grunn for å enten komme med en designanbefaling eller et forslag til nytt design. I det siste tilfellet blir redesignet evaluert på nytt. Ut i fra alle disse øvelsene blir det gjort en grundig refleksjon rundt utførelse og metodenes effektivitet i de gitte kontekstene.

Resultat Resultatet av prosjektet er dokumentasjon på hvordan de valgte brukbarhetsevalueringsmetodene fungerte i bruk på utvalgte gå-bort-og-bruk-systemer. Resultatene fra øvelsene viser at metodene fungerer utmerket til det de er ment for, men at det kan være verdifullt å se på et system i en større kontekst. I tillegg kommer det fram hvor viktig det er å gjøre et grundig arbeid i de tidligere fasene av ISO 9241-210:2019.

Background ISO 9241-210: 2019 is possibly the ultimate cornerstone of modern user-centred design. The essence of the standard is well known by most people in the field, and is seemingly easy to understand with its four steps. Usability evaluation, the third step in described in the standard, is an important basic principle to ensure that design solutions cover specified user requirements. Walk-up-and-use systems are very simplistic in that they are not specialised towards specific user groups. In this thesis, the effectiveness of usability evaluation methods is examined by using such methods on two different walk-up-and-use systems.

Goal The aim of this project is to contribute to literature with examples of how certain evaluation methods, with ISO 9241-210: 2019 as a basis, work in the context of walk-up-and-use systems.

Process The project addresses two different walk-up-and-use systems, both of which are evaluated using usability evaluation methods. The results from these evaluations then form the basis for either making a design recommendation or a redesign. In the latter case, the redesign is re-evaluated. Based on all these exercises, a thorough reflection is made on the execution and the effectiveness of the methods in the given contexts.

Result The result of the project is documentation of how the selected usability evaluation methods worked when used on selected walk-up-and-use systems. The results from the exercises show that the methods work excellently for what they are intended for, but that it can be valuable to look at a system within a larger context. In addition, it is made clear how important it is to do a thorough job in the earlier phases of ISO 9241-210: 2019.