2 (de 3). Evaluación de Usabilidad

EVALUACIÓN DE USABILIDAD

Dr. Cristian RusuPontificia Universidad Católica de Valparaíso, [email protected]

Dr. Toni GranollersU. de Lleida, Catalonia, [email protected]

How to Identify the Best Design

Problems ?

El taller “Evaluando eXperiencias y habilidades: Usabilidad, Comunicabilidad, Accesibilidad, User

eXperience, Customer eXperience” ha sido impartido por Cristian Rusu y Toni Granollers en la ciudad de Popayán-Colombia del 27 al 30 de Septiembre del 2016 durante el

11Congreso Colombiano de Computación.Este material está sujeto a la licencia Creative Commons Reconocimiento-NoComercial 4.0 Internacional License.

mailto:[email protected]


http://www.grihotools.udl.cat/mpiua/about/

http://www.grihotools.udl.cat/mpiua/about/

http://creativecommons.org/licenses/by-nc/4.0/







Usabilidad en términos de calidad del software

[ISO/IEC 9126-1:2001(E)]

2 / 36Evaluación de Usabilidad - Tutorial 11CCC

Usabilidad en términos de calidad del software: ISO/IEC 25010:2011

Quality ModelQuality In Use

Effectiveness Efficiency Satisfaction Freedom from risk

Context coverage

System/Software Product Quality

• Usefulness• Trust• Pleasure• Comfort

• Economic risk mitigation

• Health and safety risk mitigation

• Environmental risk mitigation

• Context completeness

• Flexibility

Quality in use is the degree to which a product or system can be used by specific users to meet their needs to achieve specific goals with effectiveness, efficiency, freedom from risk and satisfaction in specific contexts of use.


Usabilidad en términos de calidad del software: ISO/IEC 25010:2011

Quality Model

Quality In Use

System/Software Product QualityFunc

tional

Suitability

Performance

efficiency

Compatibility

Usability

Reliability

Security

Maintainability

Portabilit

y

• Appropriateness recognisability

• Learnability• Operability• User error• User interface

aesthetics• Accessibility

The product quality model categorizes product quality properties into eight characteristics (functional suitability, reliability, performance efficiency, usability, security, compatibility, maintainability and portability).


No confundir usabilidad con otros atributos de la interfaz de usuario (UI)

http://www.awwwards.com

The awards for design, creativity and innovation on the Internet


http://www.awwwards.com/



Índice• Evaluación de la USABILIDAD

• Métodos de evaluación por INSPECCIÓN• Métodos de evaluación por INDAGACIÓN• Métodos de evaluación por TEST• Laboratorio de Usabilidad

http://www.interaction-design.org/encyclopedia/usability_evaluation.html

http://www.grihotools.udl.cat/mpiua/fases-mpiua/evaluacion





Modelo de procesoDiseño centrado en el usuario

• Tipologías:• Automáticos/Manuales• CON/SIN usuarios• Laboratorio/In situ• Inspección/Indagación/Test





•Automáticos:• Realizar tests remotamente a través de la red de Internet. Que

son los que disponen de mecanismos (hardware y/o software) que facilitan la comprobación de los aspectos a validar.

• Los métodos automáticos resultan altamente eficientes puesto que se realizan muy rápidamente y los resultados siempre provienen de los mismos parámetros, sin apreciaciones subjetivas.

• El principal problema está en que siempre se basan en sistemas ya finalizados (o versiones preliminares de lanzamiento) y no pueden utilizarse en etapas tempranas del ciclo de vida del desarrollo.

• Solo suelen dar resultados cuantitativos

• Manuales

Evaluación. Automatización


• Automáticos

• Manuales:• Al contrario de los métodos anteriores están los métodos

que no disponen de mecanismos que automaticen su realización.

• Consumen más recursos: tiempo, evaluadores,…, pero pueden evaluar aspectos que se “salen del patrón” y pueden realizarse en cualquier etapa del desarrollo y con cualquier tipo de prototipo.

• Tienen la virtud de que aportan resultados cualitativos

Evaluación. Automatización


• CON usuarios y/o implicados• Las personas u organizaciones que serán afectadas por

el sistema y que tienen influencia directa o indirecta en los requisitos del sistema. • Recordar el módulo del Análisis de Requisitos.

• Son los métodos en los que se evalúa el sistema con la intervención directa de usuarios representativos, pudiendo también participar en las sesiones personas que sin ser usuarios finales tienen la condición de implicados del sistema.

• Estos métodos resultan muy positivos por implicar la participación de usuarios en el proceso de diseño pero dificultan, en parte, el proceso debido a que no siempre resulta fácil reclutar usuarios para este tipo de actividades.

• Métodos sin usuarios y/o implicados

Evaluación. ¿Quién interviene?


• Con usuarios y/o implicados

• Métodos SIN usuarios y/o implicados• Estos métodos los realizan solo expertos evaluadores con

la ayuda de guiones, pautas o documentos que permiten hacer un seguimiento de los que han hecho los usuarios mientras utilizaban el sistema.

• Igual que pasaba con los métodos automáticos se realizan muy rápidamente pero carecen de la realimentación que evaluar con usuarios aporta al sistema.

Evaluación. ¿Quién interviene?


Evaluación. Estilo• Laboratorio (de usabilidad)

• El objetivo del evaluador, a veces, es comprobar aspectos sin que precise la ayuda de los usuarios

• Este tipo de comprobaciones las realiza, normalmente, en su entorno de trabajo o sea en el laboratorio, dónde, puede además traer usuarios para un estudio particular

• Entorno (in situ)• Entorno natural o habitual del escenario dónde se realizan

las tareas a evaluar• Esta situación se produce cuando el evaluador realiza su

trabajo en el lugar natural dónde se realiza la escena, el lugar de trabajo habitual del usuario


• Según la forma de realización y el tipo de participantes, la evaluación de la usabilidad se clasifica de la siguiente forma:• Métodos por Inspección• Métodos por Indagación• Métodos por Test

Evaluación. Clasificación


Evaluación. Clasificación• Inspección

• El término inspección aplicado a la usabilidad aglutina un conjunto de métodos para evaluar la usabilidad en los que hay unos expertos conocidos como evaluadores que analizan y explican el grado de usabilidad de un sistema basándose en la inspección o examen de la interfaz del mismo.

• Salvo excepciones, no intervienen usuarios de forma directa.

• Existen varios métodos que se enmarcan en la clasificación de evaluación por inspección

• Principales Técnicas: • Heurística• Recorridos cognitivos• Recorrido de usabilidad plural• Revisión de Estándares


• Coste-beneficio en relación a la cantidad de evaluadores necesarios para llevar a cabo una EH.

• J. Nielsen, “How to Conduct a Heuristic Evaluation”• http://www.useit.com/papers/heuristic/heuristic_evaluation.html

Evaluación heurística. PreparaciónSelección de los evaluadores


http://www.useit.com/papers/heuristic/heuristic_evaluation.html

Evaluación heurística• Hoja de cálculo que facilita la realización de una Evaluación Heurística

• Hoja de cálculo para realizar la evaluación heurística de sitios de e-commerce

• 10 Usability Heuristics explained• http://www.slideshare.net/crafted/10-usability-

heuristics-explained


http://www.grihotools.udl.cat/mpiua/wp-content/uploads/2014/07/EvaluacionHEURISTICA.zip

http://www.grihotools.udl.cat/mpiua/wp-content/uploads/2014/07/e-commerce-heuristics.xlsx

http://www.slideshare.net/crafted/10-usability-heuristics-explained

• Indagación• Descubrir y aprender para generar ideas de diseño• De especial interés en las primeras fase del desarrollo, pues proporcionan información acerca de la usabilidad de un producto que aún no se ha empezado a fabricar.

• Principales Técnicas• Observación de campo• Focus Groups• Entrevistas• Cuestionarios• Grabación del uso (Logging)

Métodos de evaluación


Métodos de evaluación• Test

• Usuarios representativos trabajan en tareas utilizando el sistema (o el prototipo)

• Evaluadores analizan los resultados para ver como la interfaz de usuario da soporte a los usuarios con sus tareas

• Tipos• Thinking Aloud (Pensando en voz alta)• Interacción constructiva• Método del conductor• Test remoto


Laboratorio de usabilidad

…………..

Enero 2015


• Observación de la Experiencia del Usuario • Un laboratorio de usabilidad es un espacio especialmente

adaptado para la realización de pruebas de evaluación de la usabilidad

• En el se registran y analizan las interacciones que los usuarios realizan mientras utilizan el sistema o producto a analizar

• Para ello es necesario disponer de equipamiento específico • Instalaciones adecuadas a las actividades que se van a

realizar en condiciones lo menos intrusivas posibles para el usuario simular las condiciones reales de la interacción

• Software especializado• Personas bien formadas

Laboratorio de usabilidad


Laboratorio de usabilidad• Diversidad de productos y servicios

• Diversidad de usuarios finales• entre los que se pueden encontrar personas de edad

avanzada y personas con discapacidad

• Un laboratorio de usabilidad • Debe considerar también las condiciones de acceso para

personas con discapacidad, para poder llevar a cabo pruebas de usabilidad y accesibilidad que respondan a las necesidades de cualquier tipo de usuario


Laboratorio de usabilidad.Equipamiento básico

• Consisten normalmente en dos salas o habitaciones,• una es la sala de observación (para los evaluadores) y, • otra la sala de la prueba (para los usuarios)

• Ambas salas suelen estar separadas por un cristal que sólo permite ver a los usuarios desde la sala de observación, pero no desde el lado opuesto


Laboratorio de usabilidad.Equipamiento básico


Laboratorio de usabilidad. Software especializado

• El análisis resulta mucho más efectivo si se realiza con la ayuda de un software específico

• El software NO sustituye al evaluador experto


Laboratorio de usabilidad. Personas bien formadas


Laboratorio de usabilidad. Personas bien formadas

• Guidelines for Participants in a Separate Room (MORAE)• Hablar lo mínimo durante la sesión

• Los participantes deben sentirse apoyados por el evaluador a la vez que deben sentirse “como en casa”

• NO hacer comentarios a los participantes• Confidencialidad de la identidad• NO hacer cambios hasta el final de los resultados• Preparar una lista de preguntas finales para los

participantes


Evaluación con usuariosmediante Morae

Type of test

Éxito de la tarea

Encontrar un televisor LCD con la garantía más larga en el tiempo

5 de 14 (35%) participantes NO FINALIZARON la tarea

Video: El procedimiento de comparación no es claro

1.Buscar todos los televisores LCD

2.Seleccionar 2 TV a comparar

3.Escoger la opción “Comparar productos seleccionados”


?• Dónde mira el usuario ??

Eye Tracking

Eye Tracking Evaluation: https://www.youtube.com/watch?v=s-273rCl-yk


https://www.youtube.com/watch?v=s-273rCl-yk




NINGÚN usuario se dió cuenta de

la existencia de la asistenta virtual


no se dan cuenta de las

gesticulaciones que representan un

comportamiento humano de la Berta


Permite “leer” el contenido de una

página

Google es ciego !!!


http://www.nvaccess.org/

http://www.freedomscientific.com/Products/Blindness/JAWS

http://www.sun.com/usability/

Algunos laboratorios de usabilidad

http://www.oracle.com/webfolder/ux/applications/getInvolved/labTours.html


http://www.sun.com/usability/

http://www.oracle.com/webfolder/ux/applications/getInvolved/labTours.html

Algunos laboratorios de usabilidad

BBC News - How Google fine tunes its search engine

http://news.bbc.co.uk/2/hi/programmes/click_online/9751991.stm





Remote Usability testingRemote usability testing allows you to get customer insights when travel budgets are small, timeframes are tight, or test participants are hard to find

http://www.nngroup.com/articles/remote-usability-tests

http://gazept.com

http://www.userzoom.es

https://www.youtube.com/

watch?v=LRHPJmx7yKA

https://www.youtube.com/watch?v=tM2tlAi-

0lw






http://gazept.com/

http://gazept.com/

http://www.userzoom.es/

http://www.userzoom.es/

https://www.youtube.com/watch?v=LRHPJmx7yKA

https://www.youtube.com/watch?v=tM2tlAi-0lw

Gracias por su

atención !!!

Toni GranollersEscola Politècnica SuperiorUniversitat de Lleida (UdL)C/ Jaume II, 6925001 – Lleida

(+34) 973 [email protected]

@DCU_MPIUAslideshare.net/DCU_MPIUA

@



2 (de 3). Evaluación de Usabilidad

Technology

Transcript of 2 (de 3). Evaluación de Usabilidad