Test moderati e non moderati: una tabella di marcia pratica per sceglierli e applicarli

La domanda arriva quasi sempre nell'ordine sbagliato: "faremo un test moderato o non moderato?". Il metodo viene scelto prima di definire cosa si vuole imparare. Il risultato è prevedibile, tempo e denaro vengono sprecati con un approccio sbagliato alla domanda.

I test moderati e non moderati sono due modi per eseguire test di usabilità, osservando persone reali che utilizzano il prodotto per scoprire dove fallisce. Entrambi funzionano. Ma hanno scopi diversi e utilizzarli al di fuori del giusto contesto spreca sforzi o produce conclusioni deboli.

Questa è una guida pratica: cos'è ciascuno, quando usare quale e come applicarlo senza commettere errori che svuotano la ricerca. Nessuna teoria oltre ciò che è necessario.

Cosa cambia tra moderato e non moderato

La differenza sta nella presenza di un facilitatore durante la prova.

Nella prova moderata un ricercatore accompagna il partecipante in tempo reale, di persona o tramite chiamata. Propone compiti, osserva e può chiedere "a cosa stai pensando adesso?" o "perché hai cliccato lì?". Si tratta di una conversazione guidata sull'utilizzo del prodotto.

Nel test non moderato il partecipante utilizza il prodotto da solo, senza che nessuno lo guardi dal vivo. Riceve compiti da uno strumento, li esegue nel suo tempo e nel suo ambiente e il sistema registra ciò che è accaduto, clic, percorsi, a volte schermo e voce. Il ricercatore poi lo analizza.

Riassumendo il compromesso centrale: moderato fornisce profondità e contesto, ma è costoso e lento; non moderato dà scala e velocità, ma perde la capacità di approfondire il momento.

Passaggio 1: definisci se la domanda è "perché" o "quanti"

Lo script inizia qui, prima di qualsiasi scelta di metodo. Qual è esattamente la domanda di ricerca?

Se la domanda riguarda la motivazione, il ragionamento, la confusione, “perché le persone abbandonano in questo passaggio?”, “cosa capiscono da questa schermata?”, ci vuole approfondimento. Devi essere in grado di porre domande in questo momento, vedere l'esitazione, comprendere il pensiero. Questo è un territorio di test moderato.

Se la domanda riguarda il comportamento su larga scala, "quale versione le persone completano più velocemente?", "dove nel flusso la maggior parte delle persone si blocca?", hai bisogno di volume. Sono necessari molti partecipanti affinché il modello sia affidabile. Questo è un territorio di test non moderato.

Confondere i due è l’errore di fondo. Usare la modalità moderata per una domanda sul volume è costoso e fornisce un campione troppo piccolo. L'utilizzo non moderato per una domanda "perché" genera dati senza la spiegazione che stavi cercando.

Step 2: quando moderato è la scelta giusta

I test moderati brillano quando il prodotto, il flusso o l'idea sono ancora nuovi e pieni di incognite.

Usalo all'inizio, quando non sai nemmeno quali sono i problemi. La conversazione in tempo reale rivela l'inaspettato: la persona capisce un concetto in un modo che non avresti mai immaginato, rimane bloccata per un motivo che non era sul tuo radar. Questo appare solo quando c'è qualcuno che capisce e chiede.

Usalo anche in flussi complessi o ad alto rischio, un processo in più fasi, una decisione importante, un pubblico specifico di cui devi comprendere in profondità il ragionamento. In un servizio pubblico utilizzato da persone con diversi livelli di familiarità digitale, ad esempio, osservare da vicino dove qualcuno si perde vale più di qualsiasi numero.

Il limite da accettare: poiché è costoso e richiede tempo, il moderato lavora con pochi partecipanti. Questo è sufficiente per scoprire i problemi, una manciata di persone già rivela la maggior parte dei principali ostacoli all'usabilità, ma non per misurare con precisione.

Passaggio 3: quando non moderato è la scelta giusta

I test non moderati brillano quando hai già ipotesi chiare e vuoi convalidarle ad alta voce e rapidamente.

Usalo per confrontare alternative: due versioni di uno schermo, due flussi di pagamento. Con molti partecipanti, il modello che funziona meglio è statisticamente più affidabile che con cinque persone.

Usalo quando hai bisogno di velocità e scalabilità. Non richiedendo programmazione e follow-up di ogni sessione, è possibile raccogliere in breve tempo le risposte di decine di persone, anche provenienti da luoghi e contesti diversi. Per un prodotto di ampia portata, ciò cattura la varietà che un moderato, limitato a pochi partecipanti, non riesce a raggiungere.

La limitazione da accettare: perdi il “perché” in tempo reale. Vedi che le persone sono bloccate a un certo punto, ma non puoi chiederti immediatamente il perché. Pertanto, compiti scritti male rovinano il test non moderato, senza qualcuno che chiarisca, qualsiasi ambiguità nelle istruzioni diventa rumore nei dati.

Passo 4: in pratica, unisci le due cose

La sceneggiatura matura non sceglie l'uno e abbandona l'altro. Combina in sequenza.

Un approccio che funziona bene: inizia con test moderati per scoprire i problemi e capire i perché in un momento di incertezza. Quindi, con le ipotesi già formate, utilizza un test non moderato per verificare su una scala se ciò che hai osservato in alcune persone è confermato in molte.

È il ciclo di apprendimento in profondità e poi conferma in ampiezza. Il moderato genera le domande giuste; il non moderato misura le risposte con fiducia. Trattarle come opzioni complementari e non concorrenti è ciò che consente di ottenere il massimo da ciascuna di esse.

Gli errori che minano qualsiasi test di usabilità

Indipendentemente dal metodo, alcuni errori mettono a repentaglio l’intera ricerca.

Il primo è reclutare le persone sbagliate. Testare con colleghi, o con persone che non rappresentano l'utente reale, genera conclusioni che non sono valide per il pubblico reale. Chiunque lo provi deve assomigliare alla persona che lo utilizza.

Il secondo è guidare il partecipante. Con moderazione è facile, senza rendersene conto, “aiutare”, indicare la strada, suggerire il clic. Questo contamina il risultato: volevi vedere se la persona poteva farlo da sola, e alla fine lo hai fatto per lei. La regola è osservare e chiedere, mai insegnare.

Il terzo è confondere l’opinione con il comportamento. Ciò che una persona dice che farebbe non è sempre quello che fa. Il test di usabilità si basa sul comportamento osservato, dove hai cliccato, dove ti sei fermato, molto più che sulla tua opinione dichiarata. "L'ho trovato facile" detto da qualcuno che ha impiegato cinque minuti e ha commesso due errori dice meno di quello che hai visto accadere.

Il metodo è il mezzo; l'apprendimento è la fine

Alla fine, moderato e non moderato sono strumenti al servizio di una cosa: prendere decisioni sui prodotti in base a come si comportano le persone reali, non a come il team immagina che si comportino.

La scelta tra i due è tecnica e pratica, dipende dalla domanda, dal momento, dal budget e dalla scala di cui hai bisogno. Ciò che non è negoziabile è fare una sorta di test. Un prodotto progettato esclusivamente con l'intuizione di chi lo costruisce porta con sé i pregiudizi di chi è troppo vicino per vedere la confusione dell'utente comune.

Testare è l'atto di umiltà che separa chi pensa di sapere cosa vuole l'utente da chi è andato a controllare. Scegliere bene il metodo significa semplicemente garantire che questa verifica valga lo sforzo.

Se stai per investire nella ricerca degli utenti e non hai ancora definito a quale domanda vuoi rispondere, vale la pena risolverlo prima di scegliere il metodo. Ho altri articoli sul blog su UX, ricerca e progettazione del prodotto che approfondiscono l'argomento.