11 de junio de 2013

¿Cómo presentar un informe de Usabilidad al área de Marketing? Parte 1

Luego de realizar pruebas de usabilidad viene el momento de elaborar y presentar el informe de resultados ante las áreas involucradas en un proyecto. Una de esas áreas suele ser el área de Marketing para quien el hecho de que realicemos pruebas con 5 usuarios puede resultar inaceptable. 


El modelo mental de las áreas de marketing


El argumento que solemos escuchar es que una muestra de sólo 5 usuarios (el Santo Grial de las pruebas de usabilidad según Jakob Nielsen) no puede ser representativa del universo de clientes o usuarios de un producto o servicio.

Por "representativa" las áreas de marketing entienden que la muestra debe cubrir adecuadamente las dimensiones tradicionales de relevamiento de audiencias:


  • Dimensión geográfica: país, región, ciudad. 
  • Dimensión demográfica: edad, sexo, etc.
  • Dimesión psicográfica: nivel socioeconómico, estilo de vida, etc,
  • Dimension conductual: estado de lealtad del cliente hacia la empresa, beneficios buscados, etc.


Por otro lado, los estudios de relevamiento de audiencias solicitados por las áreas de marketing son mayoritariamente de dos tipos:


  • Encuestas de opinión (en todas sus formas, presenciales, telefónicas, online, etc.)
  • Focus groups

En menor medida algunas empresas realizan estudios etnográficos que consisten en observar la conducta de los clientes durante un determinado proceso, por ejemplo, la compra mensual del supermercado o el consumo de un determinado alimento dentro de los hogares.    

El último elemento que compone lo que podríamos denominar el modelo mental de las áreas de marketing respecto a estudios de audiencias es el margen de error de los resultados que normalmente se estima cercano al 10%. 

Esto significa que si en un estudio, por ejemplo, el 50% de las personas encuestadas dicen que prefieren pagar online, esa cifra se ubicaría en realidad entre el 40 y 60% si se toma en cuenta el margen de error de la muestra (que en este ejemplo sería del 10%).


Relevamiento de la conducta vs. relevamiento del discurso


La primera distinción que debemos hacer cuando presentamos un informe de usabilidad a las áreas de marketing es que la técnica de pruebas de usabilidad no tiene como principal objetivo relevar lo que las personas dicen (nivel discursivo) acerca de un determinado producto o servicio sino cómo lo usan (nivel conductual). 

Profundizando aún más en esta distinción, las pruebas de usabilidad se enmarcan dentro de la rama de las Ciencias Sociales que se desprende de la Antropología, mientras que las encuestas y focus groups están mucho más influenciadas por la rama de la Psicología. 
  
Dentro de este marco, cuando se trata de relevar la conducta y no el discurso, las dimensiones tradicionales de segmentación de audiencias tienen una influencia sustancialmente menor para obtener información valiosa que ayude en el proceso de construcción de interafaces de usuario.

Por ejemplo, si un usuario no puede completar un proceso de registro online porque los caracteres del captcha son difíciles de leer, el hecho de que viva en Buenos Aires, Madrid o Nueva York no modificaría ese comportamiento. Tampoco que sea hombre o mujer, o que tenga determinado nivel de ingresos o educación (mientras sepa leer y escribir). 

Sin embargo (y aquí viene lo interesante) si en lugar de pedirle a la persona que complete el captcha, sólo le preguntásemos si puede hacerlo (suponiendo que sabe lo que es) nos diría sin dudarlo que sí, que lo hace todo el tiempo cuando se registra en sitios que lo solicitan. 

En el contexto de una encuesta o focus group que intenta validar la hipótesis de que los captchas no constituyen un problema para los usuarios cuando se registran en un sitio web, esta respuesta sería positiva y validaría la hipótesis. Una prueba de usabilidad, sin embargo, revelaría lo que realmente sucede.

A esto debemos agregar que es común que las personas no confiesen lo que realmente hacen ante desconocidos (quienes los entrevistan) y, en cambio, se inclinen por lo que consideran respuestas "socialmente aceptables" o más previsibles. 

En síntesis


Las técnicas tradicionalmente utilizadas por las áreas de marketing para investigación de audiencias relevan el plano discursivo (las opiniones) lo que requiere muestras grandes (más de 500 participantes) para reducir la entropía y generar información confiable. 

En la segunda parte de este artículo discutiremos los aspectos cuantitativos y la representatividad de los datos de las pruebas de usabilidad realizadas con 5 o más participantes.

         

   

10 de abril de 2013

6 reglas para neutralizar la influencia de los observadores en pruebas de usabilidad

La participación de observadores en las pruebas de usabilidad es muy importante para alinear el esfuerzo del equipo que lleva adelante un proyecto. Sin embargo, se deben respetar ciertas normas para no influenciar la conducta de los usuarios y obtener buenos resultados.     


Entre las personas que participan en una prueba de usabilidad, además del moderador, el usuario y el asistente pueden participar observadores. Salvo que se utilice una cámara gesell, los observadores pueden estar en la misma sala que el resto de las personas. Normalmente se trata de miembros del equipo del cliente, diseñadores o desarrolladores.

Es común que los observadores no conozcan la técnica de pruebas de usabilidad y sí conozcan otras técnicas como focus groups, encuestas o entrevistas cualitativas. En todas ellas, la participación de los observadores puede ser activa, situación que no debe suceder en el caso de una prueba de usabilidad. En ella, los observadores, sólo deben observar.

Es frecuente también que los observadores se sientan fuertemente tentados a intervenir durante las pruebas o lo hagan de facto, ya sea consciente o inconscientemente. En el primer caso, es probable que quieran hacer alguna aclaración o pregunta al usuario o al moderador; en el segundo, pueden realizar movimientos o gestos (comunicación no verbal) que distraigan o "comenten" las acciones o dichos del usuario. Un ejemplo de esto último, es asentir o negar con la cabeza, sonreir o hacer un gesto de desaprobación mientras el usuario realiza alguna tarea.    

Cualquiera de estas situaciones puede influir en la conducta del usuario, en el normal desarrollo de la prueba y, por lo tanto, en los resultados obtenidos.

A continuación se describen una serie de buenas prácticas para neutralizar la posible influencia de los observadores en las pruebas y la conducta de los usuarios:


  1. Antes de comenzar es necesario explicarles a los observadores cómo es la dinámica de una prueba de usabilidad y qué se espera de ellos en tanto observadores: observar la conducta del usuario y no intervenir verbalmente, salvo que el moderador lo permita.
  2. Lo ideal es que permanezcan ocultos al campo visual del usuario. Si el espacio o la disposición de la sala permite esto, tendríamos gran parte del problema resuelto, ya que neutralizaríamos la posible "comunicación no verbal" y que el usuario se sienta observado por demasiadas personas como para expresarse con naturalidad.
  3. Si los observadores se encuentran en el campo visual del usuario, es necesario advertirles de la importancia de no realizar gestos o movimientos que el usuario pueda percibir (no asentir o negar con la cabeza, tamborilear con los dedos sobre la mesa, etc.).
  4. La cantidad de observadores no debería ser mayor a dos, si permanecen fuera del campo visual del usuario, y uno si está dentro de él.     
  5. Si tienen alguna pregunta para el usuario deben hacerla al finalizar la prueba, esperando el momento en que el moderador habilite un espacio para realizarlas.
  6. Si tienen algún comentario para el moderador durante la prueba, es posible diseñar algún tipo de protocolo de comunicación, como el envío de un mensaje através de algún software (Morae, Skype, Gtalk, etc.). 
Siguiendo estas pautas se puede neutralizar fácilmente la influencia que los observadores pueden ejercer sobre los usuarios en pruebas que se realicen en una sala sin espejos unidireccionales. No obstante, es responsabilidad del moderador estar atento a cualquier aspecto dentro de la sala que pueda influenciar el comportamiento natural del usuario. En otros artículos menciono algunos de ellos así como otros aspectos a tener en cuenta: 






8 de febrero de 2013

¿Qué es necesario aprender para moderar una prueba con usuarios?

Moderar una prueba con usuarios puede parecer una tarea sencilla. Cuando se observa desde fuera, parece que el moderador está simplemente conversando con el usuario y tomando notas, y eso amigos, lo puede hacer cualquiera.

Sin embargo, conducir una prueba de usabilidad requiere el desarrollo de habilidades especiales que se deben combinar y poner en juego de manera concurrente en el transcurso de cada sesión.

Los cinco niveles de registro  


Podríamos decir que existen cinco niveles o canales sobre los que el moderador de una prueba actúa:

  1. Nivel conversacional: es un modo activo y consiste en lo que el moderador le dice al usuario. Normalmente se apoya en un guión previamente definido donde constan los escenarios que se le describen al usuario y las tareas que le pide que realice con el producto que se está probando. Se debe prestar particular atención a cómo el moderador dice lo que dice, ya que con sus palabras puede influenciar la conducta del usuario.
  2. Nivel de escucha: es un modo activo-pasivo y consiste en escuchar lo que el usuario dice y cómo lo dice. En particular es muy importante estar atentos a cómo el usuario nombra conceptos o elementos de la interfaz.
  3. Nivel observacional: es un modo pasivo y consiste en observar la conducta del usuario, lo que el usuario hace en la interfaz y también su comunicación no verbal: gestos, postura, expresiones faciales, movimientos, etc.
  4. Nivel  ambiental: el moderador es la máxima autoridad dentro de la sala en la que se realizan las pruebas, y como tal, es responsable también de crear un ambiente donde el usuario se sienta cómodo y pueda concentrarse en las tareas que se le solicitan. Esto incluye desde ofrecerle algo de beber hasta ocuparse de que los demás presentes (asistente, observador, etc.) no lo perturben o desconcentren.        
  5. Timing: es la habilidad más difícil de obtener. Consiste en saber cuándo alejarse del guión para indagar sobre algún aspecto en particular de lo que el usuario ha hecho o dicho. Qué indagar, de qué manera y hasta dónde son decisiones que debe tomar el moderador mientras transcurre la prueba..     
Cuanto mayor sea el control que se adquiera en cada uno de estos niveles, las pruebas tendrán resultados más ricos y precisos respecto a lo que sucede con los usuarios mientras utilizan un producto.

Finalmente, la única forma de dominar todos los niveles es entrenándose, lo que significa hacer cientos de pruebas de usabilidad y luego de cada una preguntarse qué se podría haber hecho mejor.