USER TESTING NELLO SVILUPPO DI UN’ARCHITETTURA DELL'INFORMAZIONE:

IL CARD SORTING

by Marco Buonvinofor

about.me/mrgoodwine

@marcobuonvino

DESIGN DI UNA IA

Dove e come vanno messi i contenuti?

DESIGN DI UNA IA

Un errore comune: organizzare contenuti senza tenere conto degli utenti

DESIGN DI UNA IA

Uno strumento importante: lo user test

USER TEST - COSA SONO

User Test

• Strumenti a supporto della fase di progettazione di un sito web

• Permettono di raccogliere indicazioni da utenti reali, slegati dal progetto

• Alta qualità di risultati per costi contenuti

• Varie metodologie, adattabili al contesto d’indagine

Utente: utilizza l’interfaccia, svolge i task assegnati

Facilitatore: illustra i task, assiste l’utente, sprona il metodo thinking aloud

Osservatori: raccolgono indicazioni sui comportamenti e sui percorsi di interazione dell’utente

USER TEST - RUOLI

USABILITY LAB

Osservatori

Utente e facilitatore

con la partecipazione di:

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

- desktop

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

- desktop- mobile devices (tablet, smartphone)

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

- desktop- mobile devices (tablet, smartphone)- paper prototypes

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

• Card sorting

- desktop- mobile devices (tablet, smartphone)- paper prototypes

USER TEST - TIPOLOGIE

Test qualitativi• Svolgimento task attraverso:

Test quantitativi• Eye Tracking

• Card sorting

- desktop- mobile devices (tablet, smartphone)- paper prototypes

USER TEST - QUANTI UTENTI?

• Qualitative desktop

• Qualitative tablet

• Qualitative smartphone

• Paper prototyping

• Card sorting

x ~5 x ~15

‣ Nielsen, Why You Only Need to Test with 5 Users, Alertbox, 2000

‣ Nielsen, Card Sorting: How Many Users to Test, Alertbox, 2004‣ Nielsen, How Many Test Users in a Usability Study?, Alertbox, 2014‣ Steve Krug, Rocket Surgery Made Easy, New Riders, 2010

‣ Tullis and Wood, How Many Users Are Enough for a Card-Sorting Study?, 2004

USER TEST - QUANTI UTENTI?

Test qualitativo standard (es. desktop)

Card Sorting

‣ Nielsen, Why You Only Need to Test with 5 Users, Alertbox, 2000

‣ Nielsen, Card Sorting: How Many Users to Test, Alertbox, 2004

Numero di utenti nel test

Prob

lem

i di u

sabi

lità

risco

ntra

ti

Test qualitativo standard

Card Sorting

LO USER TEST PER LA IA

Lo user test può essere utile nella progettazione della IA?

Sì, e in particolare il Card Sorting

CARD SORTING

Utente

CARD SORTING

Utente Cards

CARD SORTING

Utente Cards

L’utente deve ordinare i foglietti in categorie, illustrando le motivazioni delle proprie scelte

CARD SORTING

Utente Cards

L’utente deve ordinare i foglietti in categorie, illustrando le motivazioni delle proprie scelte

Sorting

CARD SORTING

Foglietto: nome di un singolo elemento, prodotto o servizio, scritto su un pezzo di carta, a volte con una breve descrizione

Il numero di foglietti da ordinare può anche raggiungere diverse decine

CARD SORTING - VANTAGGI

• Early testing → maggiore velocità di preparazione, anticipando la produzione di un prototipo funzionante

• Low tech approach → maggiore concentrazione sulla rappresentazione mentale degli elementi analizzati

• Thinking Aloud: l’utente esprime ad alta voce le motivazioni dei suoi ragionamenti → più profondo insight su aspetti soggettivi

DUE TIPI DI CARD SORTING

• Card sorting aperto: metodo generativo a supporto della creazione di una architettura dell’informazione

• Card sorting chiuso: metodo valutativo a supporto di una verifica di un’architettura dell’informazione

‣ Nielsen, Card Sorting: How Many Users to Test, Alertbox, 2004

CARD SORTING APERTO O GENERATIVO

Utente

CARD SORTING APERTO O GENERATIVO

Utente Cards

CARD SORTING APERTO O GENERATIVO

L’utente è libero di ordinare i foglietti creando una propria struttura, nel modo che ritiene più opportuno

Utente Cards

CARD SORTING APERTO O GENERATIVO

L’utente è libero di ordinare i foglietti creando una propria struttura, nel modo che ritiene più opportuno

Utente Cards

Sorting

CARD SORTING APERTO O GENERATIVO (VARIANTE)

Utente Cards

CARD SORTING APERTO O GENERATIVO (VARIANTE)

L’utente può indicare l’importanza delle voci attraverso uno schema preimpostato (es. piramide)

Utente Cards

Fondamentale

Accessorio

CARD SORTING APERTO O GENERATIVO (VARIANTE)

L’utente può indicare l’importanza delle voci attraverso uno schema preimpostato (es. piramide)

Utente Cards

Fondamentale

Accessorio

CARD SORTING APERTO O GENERATIVO (VARIANTE)

L’utente può indicare l’importanza delle voci attraverso uno schema preimpostato (es. piramide)

Utente Cards

Sorting

CARD SORTING APERTO O GENERATIVO

Risultati:

• Indicazioni generate dall’utente su comprensione e ordinamento dei contenuti

• Individuazione di categorizzazioni ricorsive fra utenti

• Insight su comportamenti / atteggiamenti per una migliore comprensione delle necessità dei target e possibilità di creare personas

CARD SORTING APERTO O GENERATIVO

Quindi, il card sorting aperto:

può essere utile per la generazione e progettazione di un’architettura ancora da definire

CARD SORTING CHIUSO O VALUTATIVO

Utente

CARD SORTING CHIUSO O VALUTATIVO

UtenteCards

CARD SORTING CHIUSO O VALUTATIVO

UtenteCards

Categoria1

Categoria2

Categoria 3

Categoria 4

Categories

CARD SORTING CHIUSO O VALUTATIVO

L’utente deve ordinare i foglietti entro delle categorie predeterminate, fornite nella fase iniziale dell’intervista

UtenteCards

Categoria1

Categoria2

Categoria 3

Categoria 4

Categories

CARD SORTING CHIUSO O VALUTATIVO

L’utente deve ordinare i foglietti entro delle categorie predeterminate, fornite nella fase iniziale dell’intervista

UtenteCards

Categoria1

Categoria2

Categoria 3

Categoria 4

Sorting

Categoria1

Categoria2

Categoria 3

Categoria 4

Categories

CARD SORTING CHIUSO O VALUTATIVO

Risultati:

• Indicazioni, conferme o confutazioni riguardo l’efficacia della IA predeterminata

• Insight su comportamenti / atteggiamenti degli utenti in relazione con categorie e contenuti

CARD SORTING CHIUSO O VALUTATIVO

Quindi il card sorting chiuso:

può essere utile per valutare o testare un’architettura già definita

CASE STUDY

Card Sorting Test:

• Sito di settore Finance, area riservata

• Architettura già definita → Card sorting chiuso

• Obiettivi del test:

- Verifica efficacia IA

- Test di tre varianti di label per un nuovo servizio di cross-selling (“nomeA”, “nomeB”, “nomeC”)

con la partecipazione di:

CASE STUDY

Metodologia:

• Numero utenti intervistati: 15

• Luogo del test: Usability Lab

• 40 Foglietti e 12 categorie

con la partecipazione di:

Categoria1

Categoria2

Categoria 3

Categoria 4

CASE STUDY

Disegno sperimentale:

• Il campione è stato suddiviso in 3 gruppi

• Unica variabile fra i gruppi: il nome di una categoria, ovvero il nuovo servizio cross-selling (“nomeA”, “nomeB”, “nomeC”)

con la partecipazione di:

IA con “NomeA” IA con “NomeB” IA con “NomeC”

Gruppo 1 Gruppo 2 Gruppo 3

CASE STUDY

Risultati:

• Indicazioni su efficacia IA (confutazioni, conferme, osservazioni) per redesign

• Indicazioni su alcuni label poco comprensibili

• La variante del nome più efficace è risultata quello che ha performato meglio all’interno della IA complessiva

(ha vinto “nomeB”, che è stata adottata nella IA)

con la partecipazione di:

CARD SORTING - APERTO + CHIUSO

La soluzione ideale per uno sviluppo di una IA, in modo user-centered, sfruttando lo user testing:

Card Sorting Aperto

Definizione dei contenuti

Card Sorting Chiuso

Miglioramento IA

Prototipo IA

CARD SORTING - PRO

Early testing

• Non sono necessari prototipi o mockup

• Low-Fi approach

Versatile

• È configurabile in diversi modi

• Si ottengono insight qualitativi dagli utenti

• Si possono ricavare mappe mentali o comportamentali e spunti per personas

Almeno 15 persone anziché 5

• Reperimento più impegnativo

• Maggiori tempi pianificazione/conduzione del test

• Maggiore tempo di analisi/reporting

L’analisi è impegnativa

• ... ma esistono tool!

CARD SORTING - CONTRO

Analyzing Card Sort Results with a Spreadsheet Templateby Joe Lamantia and Joe Lamantia

Card sort analysis spreadsheetby Donna Spencer

OptimalSortUsabiliTEST

CONCLUSIONI

Per testare una IA possono essere utilizzati anche gli altri tipi di test, oltre il card sorting

Sono tutti strumenti a disposizione del designer: bisogna scegliere in base a esigenze e contesto

GRAZIE PER L’ATTENZIONE!Un grazie particolare a:

about.me/mrgoodwine

@marcobuonvino

Mind Agency http://mindagency.com

Milan UX bookclubhttp://milanuxbookclub.wordpress.com