Con la consegna degli ultimi report da parte dei partecipanti, possiamo considerare sostanzialmente conclusa l'esperienza del percorso di accompagnamento all'uso del protocollo eGLU 2.0 per test semplificati di usabilità nella PA. Un'esperienza che, a seguito di una serie di webinar, ha visto diverse PA partecipare nella progettazione, esecuzione e reporting di test con utenti. Per molti era la prima volta, e, in qualità di coordinatore del sotto gruppo di lavoro per la stesura del protocollo e di "accompagnatore" durante i 5 webinar tenuti, mi confortano sia l'interesse manifestato sia le domande ricevute.

Alcuni numeri a chiusra dell'esperienza, già postati nel gruppo chiuso, ma che è interessante far conoscere a tutta la comunità.

Alla fine 19 enti/partecipanti che hanno consegnato il report. Di questi, 6 hanno svolto il test con almeno 5 utenti e sono dunque eleggibili per... la palma del "miglior test eGLU 2.0"! Be', ok, in realtà non c'è un premio. Però le esperienze saranno le prime ad essere considerate in occasione di futuri resoconti sulle esperienze con il protocollo. Da 5 report non siamo purtroppo riusciti a determinare il numero di partecipanti. Dai dati che abbiamo il numero medio di utenti è comunque di poco sotto al 4.

I test sono stati condotti con un minimo di 3 ed un massimo di 10 task, con una media di oltre 5 task per test. Direi quindi che è un risultato molto buono.

Il tasso di successo medio è stato del 77,41%. Nielsen riporta l'88% il tasso di successo medio sul web su siti generalisti in inglese. Diciamo che siamo un po' sotto la media, ma il test serve appunto a far emergere aspetti da migliorare e a darne un'idea plastica.

La media del SUS (questionario di usabilità) è di 64, in linea con la media riportata in letteratura. Il NPS (Net Promoter Score) medio è di 2,84, sotto la media nota che è attorno al 20 (secondo fonti diverse). Diciamo che sembra che NPS sia meglio correlato al tasso di successo rispetto al SUS, nel nostro piccolo campione. A dispetto del fatto di non essere uno strumento nato per l'usabilità, NPS si correla piuttosto bene con l'usabilità.

Ancora pochi i problemi riportati nei report, circa 4 in media. Alcuni iniziano a tradurre i problemi in soluzioni, e direi dunque che siamo sulla buona strada. Invito tutti a provare a farlo: è così che i test acquistano il maggior valore.

Spero che la prima esperienza dia a tutti i partecipanti il modo di calibrare e mettere in cantiere nuovi test in futuro, fino ad una strategia di monitoraggio dell'esperienza utente sui siti vera e propria, da svolgersi (non solo attraverso i test) con una certa continuità, in modo da offrire una base di lettura della performance del vostro sito che vada oltre i dati statistici che probabilmente tutti raccogliete, ma che spesso non aiutano a farsi un'idea di cosa va e cosa non va, e soprattutto del perché. E di come reagiscono persone reali alle prese con il sito.

Questa esperienza ci servirà inoltre per la prossima revisione della procedura, che contiamo di completare per il prossimo ForumPA. Ma soprattutto mi auguro che sia un volano per continuare a fare dei test, che hanno come unico scopo il miglioramento reale dei siti della PA, ben oltre la pur necessaria aderenza a specifiche norme, che però non ci fanno capire cosa le persone capiscano del nostro sito, del nostro lavoro. Un piccolo seme per il miglioramento costante e progressivo del web pubblico in Italia.