Testowanie użyteczności – 5 użytkowników wystarcza

Powszechnym mitem testowania użyteczności witryn internetowych jest stwierdzenie, że testowanie użyteczności witryny internetowej jest rzeczą bardzo kosztowną. Wynika to faktu iż sądzi się, że:

• Testowanie musi być przeprowadzone na dużej ilości użytkowników.
• Testowanie musi być przeprowadzone na specjalnie i bardzo starannie wyselekcjonowanej grupie użytkowników, która stanowi idealna próbę grupy użytkowników docelowych.
• Testowanie wymaga dużej ilości czasu i specjalistycznego sprzętu.
• Testowanie wymaga drogich specjalistów od użyteczności serwisów internetowych.

Prace naukowe i badania guru użyteczności; zwłaszcza Steve’a Kruga i Jakoba Nielsena obalają te poglądy.

Wnioski i wyniki badań użyteczności Steve’a Kruga i Jakoba Nielsena

1. Do testowania użyteczności wystarcza nawet 5 użytkowników, ponieważ:
• już tych kilku pierwszych użytkowników wykryje najuważniejsze mankamenty użyteczności w serwisie (Nielsen i Landauer dowodzili, że 5 użytkowników znajdzie 80% wszystkich problemów, które wiążą się z użytecznością serwisu a 3 użytkowników znajdzie już 70% tych problemów)
• testowanie na niezbyt dużej licznie użytkowników pozwala na natychmiastowe przeanalizowanie wyników badania i wdrożenie w życie zmian
• najlepiej jest skupić się na najważniejszych problemach witryny, poprawić serwis i przetestować go ponownie – lepiej jest badać z mniejszą liczba grupą użytkowników ale częściej
2. Badani użytkownicy nie muszą być ściśle reprezentatywną próba grupy docelowej, ponieważ:
• generalnie wszyscy ludzie w sposób dość podobny korzystają z Internetu – wystarczy zatrudnić przeciętnych ludzi, którzy umieją korzystać z Internetu
• każdy użytkownik jest na swój sposób początkującym użytkownikiem Internetu
• nie warto tworzyć serwisu tylko dla jednej ściśle wyznaczonej grupy użytkowników
3. Testowanie wcale nie wymaga dużej ilości czasu i dużych nakładów pieniężnych, ponieważ:
• Testowanie na tylko kilku użytkownikach umożliwia szybką analizę danych
• Do rejestrowania testów wystarczy zwykła kamera i odpowiednio przygotowane do tego osoby
4. Testowanie witryny internetowej nie wymaga najlepszych (i oczywiście najdroższych) speców od użyteczności, gdyż:
• Do przeprowadzenie testów w zadowalającej formie wystarczy podstawowa i średnio zaawansowana wiedza (oczywiście zatrudnienie odpowiednich specjalistów wpłynie na lepszą jakość badania i głębszą analizę znalezionych błędów użyteczności)
• Obecnie jest dostępnych wiele materiałów na temat przeprowadzania testów użyteczności (można znaleźć wręcz przykłady gotowych scenariuszy testu użyteczności, które mogą być użyte po wprowadzeniu niedużych modyfikacji).

Rozwinięcie wyżej przedstawionych, skrótowych relacji prac Steve’a Kruga i Jakoba Nielsena można znaleźć w artykułach:

• Why You Only Need to Test With 5 Users
• How many testers are enough?
• User testing
• The cost of usability testingi oczywiście w książce Steve’a Kruga Don’t Make Me Think – link do rozdziału, który omawia kwestię “taniego testowania” witryny internetowej