La valutazione della User Experience della piattaforma eGLU-box PA - Forum PA 2019 - 14/16 Maggio - Roma Convention Center "La Nuvola"

Forum PA 2019 – 14/16 Maggio – Roma Convention Center “La Nuvola”

La valutazione della User Experience della
        piattaforma eGLU-box PA

Stefano Federici, Maria Laura Mele, Marco Bracalenti, Arianna Buttafuoco

Da UTAssistant
      a
 eGLU-box PA

Da UTAssistant
      a
 eGLU-box PA

Marzo 2018 - Marzo 2019

Verso eGLU-box PA 1.0

§ Fase 0. Rassegna bibliografica: misure psicofisiche per l’usabilità

  Valutazione
                    § Fase 1. eGLU-box beta con professionisti della PA
                    § Fase 2. eGLU-box beta in condizioni di laboratorio
dell’usabilità di   § Fase 3. Valutazione euristica di eGLU-box 0.1

 eGLU-box PA        § Fase 4. eGLU-box 1.0 con utenti web in remoto

FASE 1
                         § 10 Pubbliche Amministrazioni

 eGLU-box PA
                         § 5 web managers per ogni PA
                         § Website: www.sviluppoeconomico.gov.it attraverso eGLU-box PA beta
 beta version:           § Metodo: Partial Concurrent Thinking Aloud (PCTA)

PA practitioners         § 4 Scenari di uso

               RISULTATI: Alta variabilità della soddisfazione relativa all’usabilità
               percepita del tool. Indicano le principali modifiche di usabilità da
               applicare nella versione eGLU-box 1.0.

FASE 1

 eGLU-box PA
 beta version:
PA practitioners

FASE 2
                          § 30 partecipanti sperimentali + 10 soggetti di controllo
                          § Website: www.sviluppoeconomico.gov.it attraverso eGLU-box PA
 eGLU-box PA              § Metodo:
 beta version:                  § Partial Concurrent Thinking Aloud (PCTA)

laboratory test                 § Brain Computer Interface
                                § Facial recognition
                          § 4 Scenari di uso

              RISULTATI: L’utilizzo di eGLU-box PA beta non ha influito sul modo in cui gli utenti
              percepivano l’usabilità in termini di stati affettivi, che si sono dimostrati per lo più neutrali per
              tutte le sessioni di valutazione. Tuttavia, c’è una maggiore sensibilità alla durata della prova in
              utenti che hanno utilizzato eGLU-box PA per la navigazione rispetto al gruppo di controllo.

FASE 2

 eGLU-box PA
 beta version:
laboratory test

§ 5 esperti di usabilità
     FASE 3
                   § 10 euristiche di Nielsen per l’analisi delle interfacce Web
                   § Website: www.sviluppoeconomico.gov.it attraverso eGLU-box PA 0.1
                   § 6 tasks: Modulo Valutatore
eGLU-box PA 0.1:        § Creare un nuovo test di valutazione di usabilità
                        § Definire quattro compiti per l’utente
   heuristic            § Definire quali questionari somministrare
                        § Definire quali dati dell’utente registrare
                        § Esplorare i report finali
                        § Usare la funzione di Help
                   § 3 tasks: Modulo Utente
                        § Iscrizione e login
                        § Svolgere quattro compiti per l’utente
                        § Compialzione dei questionari

FASE 3
                   § I moduli del sistema hanno la stessa possibilità di
                     generare errori di usabilità

                   § La maggior parte degli errori trovati in entrambi i
eGLU-box PA 0.1:     moduli sono errori minori di usabilità (60%) legati alla
                     visibilità dello stato interno del sistema
   heuristic
                   § I problemi di usabilità maggiori (20%) sono dovuti a
                     funzioni che sono più̀ centrate sul sistema piuttosto che
                     sul modo in cui vengono presentate all’utente

FASE 3

eGLU-box PA 0.1:
   heuris9c

FASE 4

eGLU-box PA 1.0:   § 10 partecipanti in remoto

 remote online     § Website: www.sviluppoeconomico.gov.it attraverso
                     eGLU-box PA
    usability
                   § 4 Scenari d’uso
   evaluation

FASE 4

                   § Soddisfazione percepita dell’usabilità buona
eGLU-box PA 1.0:   § Nessuna problematica emersa durante il thinking aloud
                     rimanda a un problema tecnico o logico causato dalla
 remote online       piattaforma
    usability      § Il ricorso al servizio di help esterno: limiti di velocità di
                     connessione in upload e di configurazione delle
   evalua?on         periferiche esterne

                   Non è emersa nessuna delle problematiche emerse
                   nei test precedenti alla versione 0.1 della piattaforma

HCI INTERNATIONAL
2018

20th International
Conference on Human
Computer Interaction

Las Vegas – Nevada Caesars
Palace
15- 20 July, 2018

HUCAPP 2019

3rd International
Conference on Human
Computer Interaction
Theory and
Applications

Prague – Czech Republic
25- 27 February, 2019

HCI INTERNATIONAL
2019

21st International
Conference on Human
Computer Interaction

Orlando– Florida
26- 31 July, 2019

Grazie