Mostrando entradas con la etiqueta Estudios de usuarios. Mostrar todas las entradas
Mostrando entradas con la etiqueta Estudios de usuarios. Mostrar todas las entradas

lunes, 5 de marzo de 2012

07.- Los estudios de usuarios. Parte3

Evaluación de la Validez y Fiabilidad del Cuestionario Diseñado

Fiabilidad: Es el grado en el que las mediciones están libres de desviaciones producidas por errores casuales.

Test Retest: Establece la capacidad que tiene el cuestionario cuando proporciona las mismas respuestas cuando se aplica al mismo usuario en distintas situaciones. Es decir la capacidad que tiene para evitar las desviaciones de las respuestas.

Validez: Es la capacidad del cuestionario para medir aquello para lo que ha sido confeccionado: Se ha de medir la validez por:
  • La validez lógica: Se relaciona con que las preguntas del formulario sirven verdaderamente para recoger la información, sobre lo que pretendemos medir. Si hay preguntas en blanco o hay respuestas de No Sabe / No Contesta, hay que sospechar de la validez lógica de ese formulario.
  • La validez de contenido: Que todos los aspectos de dimensiones de calidad estén presentes en el contenido del formulario
  • La validez consensuada: Consiste en confrontar las ideas sobre el cuestionario y pedir opinión a otros profesionales. Es mejor la participación de más de un profesional.
Métodos directos de evaluación
Permiten obtener información directa de o sobre el usuario.
  • La realización de cuestionarios y entrevistas.
  • Observación de los hábitos de búsqueda.
  • Método de consenso: La técnica Delphy y Focus Group.
  • La técnica del incidente crítico.
La Observación de los Hábitos de Búsqueda: Son métodos de investigación cualitativos. Supone cierta habilidad para detectar y estudiar los hábitos de consulta del usuario. Se debe situar a los usuarios en el contexto determinado de la búsqueda de información.
  • Parámetros: en función de lo que el investigador se acerque con los sujetos o usuarios observados.
  • Observación abierta: cuando los usuarios son conscientes de que son observados.
  • Observación encubierta: La Observación no es visible por parte del usuario. Puede romper con ciertos principios éticos; pero es la observación más válida por la veracidad de la información obtenida.
Los Métodos de Consenso:
Pretenden como último fin, llegar a un consenso entre los usuarios del centro de información para conocer sus necesidades de información.
  • La Técnica Delphy: Consiste en llegar a un acuerdo, pero mediante la obtención de un grupo de individuos de forma sistemática, “Individual” y “Anónima”. Se suele basar o combinar con los cuestionarios.
    • El cuestionario es enviado a los distintos participantes.
    • La Información obtenida se depura hasta obtener un consenso, mediante la base de información obtenida en un principio.
    • En ningún caso los participantes se reúnen cara a cara.
    • Ventajas: esta técnica hace que se puedan utilizar usuarios que se encuentren en sitios y lugares dispares; el anonimato de las respuestas, asegura cierta libertad para que el usuario aporte información veraz.
El Focus Group: Similar en la finalidad de obtener un acuerdo o consenso, pero que a diferencia de Delphy, requiere de reuniones presenciales que se basan en un guión con temas o preguntas estructuradas o de libre respuesta. Seleccionarán las ideas que consideren más importantes.
  • De esta forma los usuarios vienen con todas sus sugerencias preparadas para el debate o tormenta de ideas, donde las mismas serán bien explicadas y establecerán una gradación que les permitirá asegurar o diferenciar las principales y establecer dicha gradación o escala de las mismas.
  • Se puede volver a Reunir al grupo donde se tomarán en cuenta las valoraciones.
  • El Resultado es la elaboración de un informe que refleje el consenso mayoritario.
  • Ventajas: Implicación de los Usuarios. Aunque supone más tiempo, los resultados son más precisos y positivos y se ve recompensados porque utilizan con mayor eficiencia la unidad de información y documentación.
La Técnica del Incidente Crítico: Entendemos por Incidente crítico, cualquier observación, que sea susceptible de adjetivarse Crítica, porque el resultado sea muy exitoso o rotundamente fracasado. Ejemplo: Experiencia de Búsqueda de Información.
  • Se auxilia de otras técnicas como micro-estudios de usuarios. Pequeñas entrevistas y cuestionarios para recoger información sobre esos incidentes críticos.
  • Situamos al usuario en situaciones concretas y recientes.
  • Ante esto, se realiza la inferencia y obtención de la información pertinente.
Métodos Indirectos
Permiten obtener información sin tener que consultar directamente a los usuarios. Se Basan en el análisis de Documentos.
  • Que bien generan los usuarios en el acto de sus ejercicios.
  • Que bien utilizan para citar o referenciar.
  • En el análisis de los documentos que nos han consultado o pedido.
    • Citas // Documentos Utilizados.
    • Referencias // Referencias Bibliográficas.
  • Análisis de Peticiones de Documentos: Es el método más empleado en la práctica profesional, de cara al desarrollo de la colección desde el punto de vista temático.

lunes, 27 de febrero de 2012

06.- Los estudios de usuarios. Parte2

Etapa de Diseño y Construcción de Cuestionarios
  • Identificación de la lista de las dimensiones o características de calidad: 
  • Es el conjunto de aspectos que determinan el grado de satisfacción de los usuarios respecto al sistema de información y documentación. Definir lo que espera el usuario de los servicios del centro y qué cuestiones le harán sentirse satisfecho. En este sentido es una mezcla de características del sistema y necesidades de los usuarios, desideratas, etc.
     
  • Definir estas dimensiones, características o factores de calidad, ha centrado la atención de varios autores.
    • TESSIER: Publica un artículo “Special Libraries” donde determina una relación de dimensiones, cantidad y calidad de los servicios y productos, así como la interacción con el sistema y con los intermediarios, política del servicio y funcionamiento global del sistema.
    • LANCASTER Y WARNER: Sobre el coste y tiempo invertidos y calidad de los productos y servicios. (Siendo este último el principal condicionante)
    •  GRIFFITHS Y KING: Dimensiones más ligadas al propio usuario (Conocimiento, actitudes, valoración del sistema de información, uso del mismo y propósitos de uso de la información obtenida).
    • BAILEY Y PEARSON: Dimensiones para evaluar un sistema de información automatizado. Se basó su sistema en varios métodos, definiendo 38 enunciados o características de calidad:
      • Flexibilidad del sistema.
      • Cobertura.
      • Competencia técnica del personal.
      • Actualización de la información (Tiempo de Respuesta).
      • Actitud del personal.
      • Utilidad percibida y uso de la información o efecto en el trabajo.
      • Aplicación o procesamiento de los cambios que se solicitaban.
      • Comunicación y relación con el personal.
      • Nivel de entrenamiento de formación de usuarios.
      • Formato de salida de información y la interface.
      • Traducción de las dimensiones a preguntas.
      • Evaluación de la validez y fiabilidad del cuestionario como instrumento de medida. (Si de verdad permite obtener los objetivos propuestos)
  • Ejemplo: Dimensiones y Características de calidad sobre el sistema o los usuarios.

El Formato de Respuesta

Tipo de respuestas cerradas en función del formato de respuesta
  1. Dicotómicas: Presentan 2 posibles categorías de respuesta: Sí o No
  2. Checklist: No se plantean una pregunta pero si afirmaciones o aseveraciones conforme al producto a evaluar. Se responderá si encaja con la opinión del usuario, pudiendo marcar únicamente una opción disponible. Ejemplo: El Personal me atendió bien….. Si o No
  3. Elección múltiple: Presentan una o varias posibilidades de respuesta. Ejemplo: Qué servicios ha utilizado; Préstamo, Consulta, Base de Datos. El usuario ha podido utilizar más de uno.
  4. Escala de Likert: están relacionadas las escalas de Importancia, de valores y de uso. Permite que el usuario exprese su opinión sobre la calidad mediante los valores de una escala. En un extremo de la misma se incluye la categoría más positiva y en el otro lado la más negativa.
    • Ej.: Muy Satisfecho – Satisfecho – Insatisfecho.
    • Ej.: La UID presta un buen servicio de referencia: Estoy muy de acuerdo – De acuerdo – Nada de Acuerdo.
  5. Diferencial semántico: se presentan dos conceptos opuestos sin gradación. Se presenta una categoría y su opuesta. (Son formatos de salida poco frecuentes).
  6. Escala de importancia: se utiliza el término Importante en la gradación: muy importante, indiferente, poco importante.
  7. Escala de valores: aporta atributos como bueno, malo, pésimo, excelente, muy correcto.
  8. Escala de intención de uso: utilizada en estudios de necesidades informativas y de caso a la implantación de nuevos servicios y productos.
Ej.: Si existiera un servicio X: Probablemente lo usaría, No lo usaría.

Tipos de Preguntas abiertas en función del Formato de Respuesta:
  1. Preguntas abiertas básicas: el encuestador puede responder como le parezca de manera libre o abierta.
  2. Asociación de palabras: son preguntas abiertas un poco más restringidas; se suele ofrecer una relación de afirmaciones y como colofón a éstas el encuestador aporta la palabra que se le ocurre a las afirmaciones. Ejemplo: ¿cómo valoras el servicio? desastroso; ¿y el préstamo de materiales? escaso
  3. Completar oraciones: presentamos una oración inacabada y el encuestador termina la oración. Visito la biblioteca para…. (el usuario responde)
  4. Completar historias: se muestra una historia en un párrafo y el encuestado la completa.
  5. Completar dibujos: de cara a usuarios infantiles.
Recomendaciones para la elaboración del Cuestionario
  • Definir claramente los objetivos del estudio de usuarios que pretendemos realizar.
  • En el apartado de presentación hay que realizar un protocolo de presentación.
  • Presentación del encuestador.
  • Justificación y realización del cuestionario.
  • Garantizar el anonimato del encuestado y la confidencialidad de los datos.
  • Agradecer de antemano la participación
  • Ejemplos o explicaciones de cómo realizar el cuestionario, es decir, las instrucciones que se crean precisas.
  • Organización de las preguntas
  • Las preguntas más sencillas al principio, que además coincidirán con las más generales, para que gradualmente se llegue al final del cuestionario con las preguntas más complejas y específicas. (Relación con la psicología)
  • Formular las preguntas de la forma más clara y precisa. Si una pregunta es demasiado compleja, es mejor dividirla en dos o más preguntas.
  • El cuestionario no deberá ser muy largo, para no exceder en tiempo de contestación por parte del usuario. Aunque no hay ninguna regla de tiempo, es importante determinar el tiempo que tardaría el usuario medio en cumplimentar nuestro formulario. 15 minutos recomendado
  • Es importante evitar preguntas que induzcan la respuesta del usuario. (Para mantener un grado de objetividad)
  • Evitar la jerga bibliotecaria o palabras poco usuales.
  • Es importante introducir preguntas filtro, que son aquellas que dicen al usuario que partes debe responder.
Ejemplo: ¿Conoce el servicio X? si o no // Si las preguntas posteriores son sobre X, y el usuario lo conoce, se le remite a otro punto del formulario.
  • La secuencia del embudo plantea las preguntas progresivamente, siguiendo una gradación de lo más general a lo más particular:
    • Ejemplo: ¿Le gusta leer? si o no >> ¿Qué genero le gusta más? novela o poesía >> ¿Que Novelista le gusta más? X o Y.
  • Consejos Adicionales:
    • Es fundamental que los profesionales y usuarios se sientan implicados. Que la cumplimentación del formulario servirá para mejorar el servicio.
    • El formulario no solamente incluye las preguntas, sino que es un instrumento para recoger las respuestas; Por tanto:
      • Hay que numerar las Preguntas.
      • Dejar espacio suficiente para contestar.
      • Colocar avisos señalizados para crear bloques de preguntas

lunes, 20 de febrero de 2012

05.- Los estudios de usuarios. Parte1

¿Qué se entiende por estudios de Usuarios?
Son aquellos cuyo objetivo es obtener información sobre los usuarios potenciales y reales, sus opiniones,  conducta y valoración respecto a los sistemas de información y documentación o a la información que éstos proporcionan.

Condiciones que determinan la existencia de distintos tipos de estudios de usuarios:
  • Los objetivos que se plantee el estudio ¿Qué se propone medir el estudio?
  • La aplicación concreta de métodos para la realización del estudio.
  • El sujeto investigado.
  • La fase del ciclo vital del sistema de información.
Conceptos de Necesidad, Deseo, Demanda y Uso:
  • Necesidad de información: Aquel contenido que un individuo debe poseer para el desempeño de su trabajo, investigación o actividades.
  • Deseo informativo: Estadio previo a la necesidad de información del individuo, en la que éste intuye las posibles aplicaciones de un contenido informativo. Cuando se sucede la dependencia del mismo, se crea la necesidad de información, lo que desemboca la demanda de información.
  • Demanda de información: Es la formulación del deseo del usuario.
  • Uso: Lo que el individuo utiliza realmente como resultado de la recuperación o explotación de la información del sistema.
(Qué es un Estudio de Impacto: Pretende demostrar en que forma impacta el sistema de información y documentación en el usuario; Si desempeña mejor su trabajo a raíz de que se satisfagan las necesidades de información. Para ello es necesario realizar un estudio de uso y de las necesidades de información del usuario)

Relación de los Conceptos de Necesidad, Deseo, Demanda y Uso:
  • Necesidad / Deseo: Siempre estará relacionado con los estudios de usuarios potenciales y reales y los estudios de necesidades de información.
  • Demanda / Uso: Relacionado con los usuarios reales, e implica el estudio de uso, estudio de satisfacción e estudio de impacto.
Métodos empleados para la realización de estudios de usuarios.
  • Métodos Directos: Cuando se aplican en estudios de usuarios; permiten obtener información de manera directa del usuario. Requieren acudir directamente al usuario en persona.
    • La realización de cuestionarios y entrevistas.
    • Observaciones de los hábitos de búsqueda.
    • Métodos de consenso: La Técnica Delphy y el Focus Group.
    • La Técnica del Incidente Crítico.
  • Métodos Indirectos:
    • Análisis de Citas.
    • Análisis de Referencias.
    • Análisis de Peticiones de documentos.
(Aunque un mismo método se puede emplear para diferentes estudios, según la literatura clásica existe una correspondencia entre el estudio y el método. Ejemplo: Cuestionario y el Estudio de Usuarios)

Tipología de Estudios de Usuarios
  • Primer Bloque: Usuarios Potenciales
    • Estudios de necesidades de información de los usuarios.
  • Segundo Bloque: Usuarios Reales
    • Enfoque Cuantitativo: Estudios de Uso; Pretenden analizar el uso que de una unidad de información y documentación se está haciendo.
    • Estudios de Uso: Sobre Productos
    • Estudios de Uso: Sobre Tipologías Documentales
    • Estudios de Uso: De Colectivos sin estar en un Centro de Documentación Enmarcado.
    • Enfoque Cualitativo: Estudios de Satisfacción e Impacto.
(Recuérdese que el alcance o amplitud del estudio es mucho mayor si hablamos de estudios potenciales que de usuarios reales)

Fases del Ciclo Vital de un sistema de Información y Documentación; donde se lleva a cabo un estudio de Usuarios:
  • Primer Bloque:
    • Planificación
    • Viabilidad
    • Diseño
    • Implantación
    • Funcionamiento
  • Segundo Bloque:
    • Funcionamiento y Estudios de Uso, Estudios de Satisfacción y Estudios de Impacto sobre usuarios reales.
Los Cuestionarios
Son el conjunto de preguntas preparadas de forma anidada, sobre hechos y aspectos que interesan en una investigación. (En este contexto, estudio de usuarios) para su contestación por la población general o por una muestra de la misma. Esto incluye usuarios reales y potenciales.
  • Utilidad del cuestionario:
    • Marca un orden en la entrevista.
    • Facilita la recogida de grandes cantidades de datos en poco tiempo.
    • Permiten la homogeneidad, las preguntas se plantean de la misma manera.
    • Sirve de plantilla para recoger la información, permitiendo la fácil tabulación de los datos.
  • Clasificación del cuestionario en función del grado de libertad que se da al encuestado cuando plantea las cuestiones: Qué posibilidades se dan al encuestador para Modificar / Cambiar las preguntas, siempre desde una base.
    • Cuestionarios estructurados: No permiten variación alguna, se plantea de la misma forma, secuencia y orden. Son Puros.
    • Cuestionarios no estructurados: Pueden llegar a ser una relación de puntos a tratar como base de unas ideas principales. Utilizados para entrevistas, grupos de discusión y métodos de consenso.
    • Cuestionarios semi-estructurados: Son mixtos, a medio camino entre un tipo y otro. Generalmente son la base de las entrevistas en profundidad. Habitualmente contiene más preguntas abiertas y menos preguntas cerradas
  • Clasificación del cuestionario según el modo de administración: se diferencian el modelo auto-administrado y las entrevistas.
    • Auto-administrado: Los usuarios contestan las preguntas sin intervención del encuestador
    • Entrevistas: Se da una intervención directa del encuestador con los usuarios. Lleva más tiempo para realizarlo y resulta más costoso.
Comparativa entre los cuestionarios auto-administrados y las entrevistas

Entrevistas
Auto Administrados
El Entrevistador formular las preguntas y anota las respuestas.
Las Preguntas están formuladas a priori y es el usuario quien anota las respuestas.
Preguntas No Fijas Necesariamente.
Preguntas fijas y estandarizadas.
Relación Entrevistador / Entrevistado.
No hay relación Entrevistador / Entrevistado.
Ventajas
Ventajas
-          Comprensión de las preguntas más problemáticas o complejas.
-          Respuestas con matices.
-          Tasa de Respuestas Elevada.
-          Rapidez y facilidad de aplicación y administración. Invitar a la participación de los usuarios.
-          Bajo Coste.
-          Garantiza la objetividad por no estar mediatizado o influido por el encuestador.
Inconvenientes
Inconvenientes
-          Posible Sesgo del entrevistador (Subjetividad).
-          Elevado coste de tiempo y personal.
-          Cada Entrevista debe realizarse individualmente.
-          Requiere que las preguntas e instrucciones sean sencillas (Transparentes, claras), puesto que no se les puede aclarar inicialmente nada.
-          Se obtienen respuestas sin matices; en ocasiones los encuestados no responden.
-          Tasa alta de preguntas sin respuesta. O respuestas de poca calidad.