SIS 407 INTERACCION HUMANO COMPUTADOR ING.

GUSTAVO POQUECHOQUE
2/2018
FACULTAD DE TECNOLOGIA
PARTICIPANTES EVALUADORES:

Fecha de entrega
EVALUACION DE USABILIDAD
PARTICIPANTES EVALUADOS:

Situación propuesta:

“Una empresa de desarrollo de software está empezando a crear un Sistema Turístico para la ciudad
de Sucre, orientado sobre todo a aquellos extranjeros y connacionales con la que no están
familiarizados y es su primera visita a la ciudad.
Se ha establecido en base a encuestas y a la experiencia en turismo que tienen las instituciones los
siguientes requerimientos base.
 Los turistas deben poder acceder a opciones diversas de alojamiento junto a la opción de reserva
y pago de los mismos.
 Los turistas deben contar con la información completa de las condiciones climatológicas
presentes y pronosticadas.
 Los turistas deben poder buscar y ubicar, fácil y visualmente cualquier lugar en la ciudad según
sus necesidades.
 Los turistas deben acceder a información completa y actual sobre lugares de alimentación,
lugares turísticos, templos, reservas naturales, lugares de entretenimiento, monumentos, venta
de artesanías, etc.
 Los turistas deben tener disponibilidad permanente de la agenda sobre los eventos artísticos,
culturales, culinarios, tradicionales, etc. Que se realicen ocasionalmente en de la ciudad.
 Los turistas deben acceder a información actual sobre lugares y zonas peligrosas de la ciudad.
 Los turistas deben poder pedir ayuda inmediata o solicitar servicio médico ante cualquier
accidente o necesidad sobre su salud.
 Los turistas deben contar la información actual de los servicios de transporte urbano, como de
sus rutas, tarifas, etc.
 Los turistas cuentan con un método de protección de reportar su bienestar según ciertos
criterios, como manera de protección permanente.
 Los turistas acceden a información referencial sobre precios y tarifas de productos y servicios,
para no ser objeto de cobros excesivos.
CONSIGNA 1.- MEDIANTE LA UTILIZACION DEL MÉTODO DE RECORRIDO COGNITIVO REALIZAR LA
EVALUACION DE USABILIDAD.

PLANIFICACIÓN:

1. Nombrar un evaluador supervisor:

Nombre supervisor evaluador: …………………………………………………………………………….

2. Describir el sistema a evaluar: Realizar una descripción breve del sistema para el evaluador supervisor.

…………………………………………………………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………

3. Identificar las características de los usuarios: Definir cuáles son las características de los usuarios del
sistema, para luego proporcionar esta información al evaluador supervisor.

………………………………………………………………………………………………………………………………………………………………………
……………………………………………………………………………………………………………………………………………………………………..

4. Identificar los posibles expertos a participar en la evaluación: el evaluador supervisor identifica un

conjunto de posibles evaluadores expertos para que participen en la evaluación de usabilidad, en el
presente caso de estudio se debe listar a todos los integrantes del grupo, excepto el supervisor.

Posible Evaluador 1:……………………………………………………………………………….…………

Posible Evaluador 2:…………………………………………………………………………………….……

Posible Evaluador 3:…………………………………………………………………………………………

Posible Evaluador N:…………………………………………………………………………………………

4. Seleccionar tres expertos que van a participar en la evaluación de usabilidad: el evaluador supervisor
selecciona a tres miembros del grupo como evaluadores más indicados e indicar las razones de la elección.

Evaluador 1:……………………………………………………………………………….…………

Evaluador 2:…………………………………………………………………………………….……

Evaluador 3:…………………………………………………………………………………….……

Razones de selección:

5. Definir tareas concretas a realizar en el sistema: el evaluador supervisor define un conjunto limitado y
representativo de tareas de los usuarios, que serán realizadas por los evaluadores, según el criterio de
los expertos seleccionados, del listado general de tareas típicas que necesitan realizar los turistas, elegir
5 tareas representativas.

Tarea 1:…………………………………………………………………………………..

Tarea 2:…………………………………………………………………………………..

Tarea 3:…………………………………………………………………………………..

Tarea 4:…………………………………………………………………………………..

Tarea 5:…………………………………………………………………………………..
6. Definir la secuencia de acciones para realizar las tareas: el evaluador supervisor define la lista de
acciones para la realización de cada tarea en el sistema.

Tareas Secuencia
(Indicar el orden de realización)
Tarea 1
Tarea 2
Tarea 3
Tarea 4
Tarea 5

7. Definir un conjunto de reglas básicas a tener en cuenta durante el recorrido: el evaluador supervisor
define un conjunto de reglas para que la evaluación de usabilidad sea realizada de forma apropiada.

Regla 1 Ej: El tiempo máximo disponible para la realización de las 5 tareas es de 10 minutos
Regla 2 Ej2: Las tareas se deben relacionar con la ciudad de Sucre.
Regla 3 …
Regla 4 …

EJECUCIÓN:

8. Los evaluadores realizan las tareas siguiendo la secuencia de acciones definida: cada evaluador
experto realiza la secuencia de acciones definida para cada tarea desde la perspectiva de un usuario
“típico” del sistema, en el presente caso de estudio cada uno de los tres evaluadores debe efectuar las
cinco tareas en la secuencia determinada en su respectiva copia de prototipo y deben llenar las
siguientes tablas por cada uno de los evaluadores.

Evaluador 1

Tareas Describir Problema Sugerencia de diseño Otros comentarios

Respuesta del identificado
sistema
Tarea 1
Tarea 2
Tarea 3
Tarea 4
Tarea 5

Evaluador 2

Tareas Describir Problema Sugerencia de diseño Otros comentarios

Respuesta del identificado
sistema
Tarea 1
Tarea 2
Tarea 3
Tarea 4
Tarea 5
Evaluador 3

Tareas Describir Problema Sugerencia de diseño Otros comentarios

Respuesta del identificado
sistema
Tarea 1
Tarea 2
Tarea 3
Tarea 4
Tarea 5

9. Identificar problemas de usabilidad: los evaluadores expertos en compañía del evaluador supervisor
analizan los registros de las evaluaciones (que contienen historias de éxito, historias de fallo,
sugerencias de diseño, problemas identificados, comentarios sobre las tareas, entre otras), con el
objetivo de identificar problemas de usabilidad, en el presente caso se debe llenar las tablas por cada
uno de los evaluadores.

Evaluador 1:

N° Problemas de usabilidad identificados

1
2
3
4
…

Evaluador 2:

N° Problemas de usabilidad identificados

1
2
3
4
…

Evaluador 3:

N° Problemas de usabilidad identificados

1
2
3
4
…

10. Análisis e interpretación de la información recolectada y realización de recomendaciones para

solucionar los problemas de usabilidad: los evaluadores expertos en compañía del evaluador
 supervisor realizan contribuciones con base en el análisis e interpretación de los registros de las
evaluaciones (obtenidos en la actividad N 8) y la lista de problemas de usabilidad identificados en el
sistema (obtenida en la actividad N 9), en el presente caso se debe unificar eliminando duplicidades los
problemas y recomendaciones propuestas por los tres evaluadores.

N° Problemas de usabilidad identificados Contribuciones y recomendaciones al problema

1
2
3
4
…

CONSIGNA 2.- MEDIANTE LA UTILIZACION DEL MÉTODO DE LA EVALUACION EURISTICA REALIZAR LA

EVALUACION DE USABILIDAD, EN BASE A LAS EURISTCAS DE JACOB NIELSEN.

PLANIFICACIÓN:

1. Definir, presentar y revisar el sistema a evaluar: definir el sistema que será evaluado por el grupo de
expertos en usabilidad, en el presente caso de estudio efectuar un resumen del sistema evaluado y
elegir a un supervisor evaluador.

…………………………………………………………………………………………………………………………………………………………………
………………………………………………………………………………………………………………………………………………………………..

Supervisor evaluador:………………………………………………..

4. Identificar los posibles expertos a participar en la evaluación: el evaluador supervisor identifica un

conjunto de posibles evaluadores expertos para que participen en la evaluación de usabilidad, en el
presente caso de estudio listar a todos los integrantes del grupo evaluador.

Posible Evaluador 1:……………………………………………………………………………….…………

Posible Evaluador 2:…………………………………………………………………………………….……

Posible Evaluador 3:…………………………………………………………………………………………

Posible Evaluador N:…………………………………………………………………………………………

5. Seleccionar los expertos que van a participar en la evaluación de usabilidad: el evaluador supervisor
selecciona 3 evaluadores que tengan un nivel de experiencia bueno, cierta familiaridad con el dominio del
sistema y estén disponibles.

Evaluador 1:……………………………………………………………………………….…………

Evaluador 2:…………………………………………………………………………………….……

Evaluador 3:…………………………………………………………………………………….……

6. Identificar el conjunto de heurísticas a utilizar: el evaluador supervisor define el conjunto de heurísticas

más adecuado y específico a las características del sistema que se quiere evaluar.

Listar la heurísticas de Nielsen:

1:……………………………………………………………………………………………………………………………………
2:……………………………………………………………………………………………………………………………………

3:……………………………………………………………………………………………………………………………………

10:……………………………………………………………………………………………………………………………………

7. Elaborar el documento guía para la evaluación: el evaluador supervisor prepara el documento guía que
tendrán en cuenta los evaluadores expertos durante la evaluación de usabilidad, en el presente caso de
estudio no se efectúa.

8. Proveer a los expertos la información general del sistema y el documento guía de la evaluación, en el
presente caso de estudio no se efectúa.

9. Solucionar preguntas de los expertos: el evaluador supervisor responde a preguntas de los expertos
relacionadas con la información proporcionada, en el presente caso de estudio no se efectúa.

EJECUCIÓN.

10. Evaluación individual del sistema: cada evaluador experto inspecciona el sistema, para ello debe
establecer su propio proceso o método de inspección, proporcionar escenarios de uso cuando sea
necesario, agrupar los problemas detectados en los principios de usabilidad y anotar los elementos
positivos del sistema.

Evaluador 1

Heurística de Problemas encontrados Elementos positivos

Nielsen
1.- …. Problema 1: 1:
Problema N: N:
2.- …. Problema 1: 1:
Problema N: N:
10.- ... Problema 1: 1:
Problema N: N:

Evaluador 2

Heurística de Problemas encontrados Elementos positivos

Nielsen
1.- …. Problema 1: 1:
Problema N: N:
2.- …. Problema 1: 1:
Problema N: N:
10.- ... Problema 1: 1:
Problema N: N:

Evaluador 3

Heurística de Problemas encontrados Elementos positivos

Nielsen
1.- …. Problema 1: 1:
Problema N: N:
2.- …. Problema 1: 1:
 Problema N: N:
10.- ... Problema 1: 1:
Problema N: N:

11. Creación de una lista integrada de problemas: los evaluadores expertos en compañía del evaluador
supervisor presentan los problemas detectados en el sistema y los principios heurísticos que incumple cada
uno, con el fin de elaborar una lista integrada con los problemas de usabilidad identificados por cada
evaluador.

Heurística de Nielsen Problemas encontrados (De todos los evaluadores)

1.- …. Problema 1:
Problema N:
2.- …. Problema 1:
Problema N:
10.- ... Problema 1:
Problema N:

11. Calificación individual de los problemas de la lista integrada: cada evaluador asigna calificaciones de
severidad y frecuencia a los problemas de la lista integrada (obtenida en la actividad 11), Criticidad =
Severidad + Frecuencia. En el presente caso de estudio se califica en forma conjunta por los tres
evaluadores la severidad y la frecuencia de los problemas de la lista integrada.

Heurística de Problemas encontrados integrados Severidad Frecuencia

Nielsen
1.- …. Problema 1:………
Problema N:……..
2.- …. Problema 1:……..
Problema N:……….
10.- ... Problema 1:……..
Problema N:……

12. Promediar las calificaciones de los evaluadores: el evaluador supervisor calcula promedios de
severidad, frecuencia y criticidad para cada problema, teniendo en cuenta las calificaciones asignadas
por los evaluadores.
 Heurística de Problemas Severidad Frecuencia Criticidad
Nielsen encontrados
integrados
1.- …. Problema 1:……… Ej: 4 Ej: 10 14
Problema N:…….. Ej: 3 Ej: 25 28
Promedio (4+3)/2=3.5 (10+25)/2=17.5 (14+28)/2=21
2.- …. Problema 1:……..
Problema N:……….
Promedio
10.- ... Problema 1:……..
Problema N:……

13. Generar un ranking de problemas en orden de importancia: el evaluador supervisor, según las
calificaciones promediadas, realiza una clasificación o priorización de los problemas encontrados, según
la criticidad y severidad.

Heurística de Problemas encontrados ordenados según prioridad de criticidad Criticidad

Nielsen descendente agrupados por cada heurística
1.- …. Problema 1:………
Problema N:……..

2.- …. Problema 1:……..

Problema N:……….

10.- ... Problema 1:……..

Problema N:……

Heurística de Nielsen Promedio de Prioridad según su criticidad (Orden

Descendente)
1:
2:
3:

10:

15. Análisis e interpretación de los resultados: los evaluadores expertos interpretan los resultados
correspondientes a la cantidad de problemas identificados, los cuales están agrupados según el principio de
usabilidad que incumplen. Los evaluadores expertos en compañía del evaluador supervisor, interpretan los
resultados de las calificaciones, el ranking de problemas, para identificar los problemas críticos del sistema.

Problemas críticos del sistema

1:
2:
3:

10:
16. Realizar recomendaciones para solucionar los problemas de usabilidad: los evaluadores expertos en
compañía del evaluador supervisor, proponen soluciones o recomendaciones de diseño para solucionar los
problemas de usabilidad identificados.

Problemas críticos de usabilidad Soluciones y recomendaciones

1:
2:
3:

10:

17. Identificar elementos positivos del sistema: los evaluadores expertos en compañía del evaluador
supervisor identifican los aspectos positivos del sistema evaluado para darlos a conocer a los
desarrolladores de los sistemas, con el fin de que estos conserven esas buenas prácticas de diseño y
programación.

Aspectos positivos del sistema

1:
2:
3:

10:

CONSIGNA 3.- MEDIANTE LA UTILIZACION DEL MÉTODO DE LA EVALUACION EXPERIMENTOS FORMALES

REALIZAR LA EVALUACION DE USABILIDAD, LOGRANDO INTERACTUAR CON USUARIOS
REPRESENTATIVOS, EN ESTE CASO TURISTAS.

PLANIFICACIÓN:

1. Definir de esta lista general 6 funcionalidades del sistema sobre las cuales se desea obtener
información. También se debe elegir al evaluador supervisor que debe ser uno de los miembros del
grupo.
 Los turistas deben poder acceder a opciones diversas de alojamiento junto a la opción de
reserva y pago de los mismos.
 Los turistas deben contar con la información completa de las condiciones climatológicas
presentes y pronosticadas.
 Los turistas deben poder buscar y ubicar, fácil y visualmente cualquier lugar en la ciudad según
sus necesidades.
 Los turistas deben acceder a información completa y actual sobre lugares de alimentación,
lugares turísticos, templos, reservas naturales, lugares de entretenimiento, monumentos, venta
de artesanías, etc.
 Los turistas deben tener disponibilidad permanente de la agenda sobre los eventos artísticos,
culturales, culinarios, tradicionales, etc. Que se realicen ocasionalmente en de la ciudad.
 Los turistas deben acceder a información actual sobre lugares y zonas peligrosas de la ciudad.
 Los turistas deben poder pedir ayuda inmediata o solicitar servicio médico ante cualquier
accidente o necesidad sobre su salud.
  Los turistas deben contar la información actual de los servicios de transporte urbano, como de
sus rutas, tarifas, etc.
 Los turistas cuentan con un método de protección de reportar su bienestar según ciertos
criterios, como manera de protección permanente.
 Los turistas acceden a información referencial sobre precios y tarifas de productos y servicios,
para no ser objeto de cobros excesivos.

Supervisor evaluador:………………………………………………..

1. Definir el número de usuarios: el evaluador supervisor define el número (tamaño de la muestra) de

usuarios representativos a participar en los experimentos. Para el presente caso de estudio se debe
trabajar con por lo menos dos turistas (Extranjeros o nacionales, la premisa es que no conocen la
ciudad de Sucre).

3. Definir perfiles de usuario: el representante de la organización define los perfiles de usuario a los
cuales están dirigidas las funcionalidades a evaluar, para luego proporcionar esta información al
evaluador supervisor. Para el presente caso de estudio el perfil definido se orienta a un turista que visita
la ciudad de Sucre.

4. Seleccionar los usuarios que van a participar en los experimentos: el evaluador supervisor selecciona
los usuarios que van a participar en los experimentos, los cuales se adecuan a los perfiles de usuario
definidos.

a) Turista 1 Nombre…………………………………. Procedencia………………………….

b) Turista 2 Nombre ………………………………… Procedencia…………………………..

5. Definir el escenario en el que se van a realizar las tareas. Para el presente caso de estudio, se deja al
criterio y las posibilidades de interactuar con un turista.

6. Definir las tareas que van a realizar los usuarios durante la interacción con el sistema para las 6
funcionalidades elegidas anteriormente, pudiendo definirse más de una tarea para una funcionalidad: el
evaluador supervisor elabora una lista de tareas que serán realizadas por los usuarios, las cuales
corresponden a las funcionalidades objeto de estudio. En el presente caso de estudio se debe especificar
tareas, para situaciones reales relacionadas a las funcionalidades del sistema, llenar la tabla que sigue,
donde el contexto es Sucre.

Funcionalidades del sistema Tarea especifica

Ej: Visitar monumentos, museos y edificios
emblemáticos
Ej: Comer en restaurantes de comida típica
Ej: Asistir a actividades culturales o de
diversión.
…..
Ej: Ubicar la Casa de la libertad, ver sus horarios de
atención y su ubicación
Ej: Ubicar la ruta para las huellas de Calorko
Ej: Listar y mostrar los posibles lugares donde poder
comer mondongo
Ej: Detallar las actividades para un a fecha indicada
con toda su información
7. Elaborar los cuestionarios pre-test y post-test: el evaluador supervisor elabora los cuestionarios que se
realizan antes y después de los experimentos.

PRE TEST
Nombre : ………………………………………………….……….……………….………………
Procedencia: ……………………………………………….……….……………….…………
1. ¿Qué navegador emplea normalmente?
·Opera Explorer ·Chrome ·Safari ·Firefox ·Otro……….…
2. Usted calificaría sus conocimientos sobre sitios web como:
Novato: Conoce muy poco sobre plataformas.
Principiante: Conoce los conceptos relacionados pero no las tecnologías
Intermedio: Entiende los conceptos con respecto a alguna plataforma
Avanzado: Entiende los conceptos y los ha aplicado en alguna plataforma
Experto: Entiende y aplica conceptos y técnicas.
3. ¿Alguna vez ha participado en una prueba de usabilidad?
·Sí ·No
4. Por favor, diga tres elementos funcionales le gustaría que tuviera la un sitio de turismo
(administración de accesos, herramientas de comunicación, etc.)
………………………………………………….……….……………….………………
………………………………………….……….……………….…………..
…………….……………….……………….……………….……………….…
5. Por favor, diga tres elementos de imagen le gustaría que tuviera el sitio de turismo (colores,
distribución, ligas, menús, etc.)
………………………………………………….……….……………….………………
………………………………………….……….……………….…………..
…………….……………….……………….……………….……………….…

POST TEST (Calificar en función a la escala 1-7 , 1 totalmente de acuerdo-7 en total desacuerdo, o no
aplica)

Preguntas 1 2 3 4 5 6 7 n/a
Las imágenes de la página me parecieron atractivas

La herramienta en general me pareció útil

La selección de las opciones (menú) fue buena

EL sitio tiene un buen balance entre imágenes y

texto
Los colores me parecieron apropiados

La tipografía fue clara y entendible

La navegación en el sitio fue fácil

Hay una manera de obtener ayuda de manera

rápida
Fue una grata experiencia explorar esta
herramienta
Es fácil recordar cómo hacer las cosas

La información fue presentada de una manera

clara y entendible
 La plataforma tiene un propósito claro

Siempre tuve claro qué hacer

Siempre tuve claro para qué sirve cada opción

Los errores se corrigen de manera fácil

8. Elaborar el documento guía que será entregado a los usuarios durante la realización del experimento.

GUIA PRE TEST: Por favor, responder las siguientes preguntas

GUIA POST TEST: Para finalizar esta prueba, se le va a proporcionar un cuestionario que nos gustaría
respondiera para dar por terminada la prueba. Por favor, asigne un 1 si está totalmente en desacuerdo y
un 7 si está totalmente de acuerdo. Si siente que alguna pregunta no aplica por favor seleccione N/A

9. Decidir el medio a utilizar para el registro del experimento: el evaluador supervisor determina el medio
físico o digital a utilizar para registrar el experimento (si en la memoria, notas, grabadora o video). En el
presente caso de estudio no se aplica.

EJECUCIÓN

1. El evaluador supervisor presenta el experimento: el evaluador supervisor señala al usuario que debe
realizar las tareas indicadas.

2. El usuario realiza las tareas indicadas en el documento guía y llena el pre y post test.

3. Realizar preguntas adicionales a los usuarios: el evaluador supervisor realiza preguntas a los usuarios
(sobre por qué realizó una u otra acción, por qué tomó cierta decisión, etc.) con el fin de complementar la
información recolectada.

N° Preguntas adicionales Respuestas

4. Análisis e interpretación de los cuestionarios: los evaluadores expertos en compañía del evaluador
supervisor analizan e interpretan los resultados de los cuestionarios pre-test y/o post-test.

5. Identificar problemas de usabilidad: los evaluadores expertos en compañía del evaluador supervisor
analizan los registros de los experimentos (que contienen las acciones de los usuarios durante el tiempo
que realizan las tareas previamente definidas), con el objetivo de identificar problemas de usabilidad.

N° Problemas de usabilidad identificados

6. Realizar recomendaciones para dar solución a los problemas de usabilidad identificados: los
evaluadores expertos en compañía del evaluador supervisor, proponen soluciones o recomendaciones de
diseño para solucionar los problemas de usabilidad identificados

N° Problemas de usabilidad identificados Recomendaciones

CONSIGNA 4.- MEDIANTE LA UTILIZACION DE LA EVALUACION HEURISTICA SIRIUS, EVALUAR CON TODO
EL EQUIPO DE TRABAJO EL SISTEMA ASIGNADO, MOSTRAR EN ESTE ACAPITE LOS RESULTADOS DE
USABILIDAD.

Resultados: