Efecto del número de opciones de respuesta sobre las propiedades psicométricas de los cuestionarios de personalidad

Abstract

¿Cuántas opciones de respuesta hay que utilizar para responder un cuestionario de personalidad? Durante más de ochenta años, numerosas investigaciones previas han examinado este tópico sin lograr alcanzar un consenso. El presente trabajo se aborda esta cuestión de forma exhaustiva.<br/><br/>MÉTODO:<br/><br/>Se aplican dos escalas de personalidad [(Orientación Negativa hacia los Problemas (NPO) del Social Problem Solving Inventory-Revised (SPSI-R) y la escala Satisfacción con la Vida (SWLS)], cada una a una muestra independiente (Estudio A = 746 participantes y Estudio B = 426 participantes), variando el número de opciones de respuesta en dos, tres y cinco alternativas. Cada sujeto debe responder a los tres tipos de formato de respuesta dentro de una misma sesión. Para evitar que éstos noten que están contestando el mismo cuestionario en más de una ocasión, cada escala experimental se inserta dentro de una batería de "tests". De esta forma, se construyen tres baterías de "test" (una para cada muestra), contrabalanceando la aparición de los distintos formatos de respuesta y manteniendo constante el resto de las condiciones experimentales. Por otro lado, se utiliza como criterio para evaluar el efecto del número de opciones de respuesta sobre las propiedades psicométricas las escalas NPO y SWLS tanto su fiabilidad (consistencia interna y estabilidad temporal) como su validez (evidencia basada en la estructura interna y evidencia basada en el grado de relación con otras variables).<br/><br/>Estas se evalúan desde tres modelos psicométricos diferentes: Teoría Clásica de los Tests (TCT), Análisis Factorial de los Ítems (AFI) y Teoría de Respuesta a los Ítems (TRI).<br/><br/>APORTE:<br/><br/>Tres son los principales aportes de este trabajo de Tesis de Doctorado. En primer lugar, se aplican dos escalas de personalidad diferentes a muestras independientes, manteniendo constante el resto de las condiciones experimentales. Con ello se espera controlar que los resultados observados son producto del efecto ejercido por los distintos formatos de respuesta utilizados y no por otras variables. En segundo lugar, cada sujeto contesta su respectiva escala experimental utilizando los tres formatos de respuesta propuestos. Ello permite disponer de información directa respecto de cómo ha respondido realmente cada sujeto -y no sólo con una estimación indirecta, derivada de la comparación de muestras independientes, como ha sido lo habitual hasta este momento. Finalmente, el análisis de las propiedades psicométricas de las escalas experimentales se aborda por primera vez, simultáneamente, desde tres perspectivas diferentes (TCT, AFI y TRI). Esto permite controlar que los resultados observados no son consecuencia inmediata del modelo psicométrico utilizado, sino producto del efecto ejercido por los distintos formatos de respuesta propuestos. El análisis de la validez de los cuestionarios se realiza aplicando Modelos de Ecuaciones Estructurales (SEM).<br/><br/><br/>RESULTADOS Y DISCUSIÓN:<br/><br/>En su conjunto, los resultados observados sugieren que el número de opciones de respuesta afecta de forma leve a moderada la estructura interna y, parcialmente, la consistencia interna de las escalas utilizadas en este trabajo de Tesis de Doctorado. Por el contrario, el número de alternativas de respuesta no afecta aspectos tales como la evidencia basada en la relación con otras variables o la estabilidad temporal (estabilidad test-retest) de las escalas analizadas.<br/><br/>PALABRAS CLAVE:<br/><br/>Número óptimo de opciones de respuesta, Cuestionarios de personalidad, Satisfaction with Life Scale (SWLS), Social Problem-Solving Inventory-Revised (SPSI-R), Teoría Clásica de los Tests (TCT), Análisis Factorial de los Ítems (AFI), Teoría de Respuesta a los Ítems (TRI), Modelos de Ecuaciones Estructurales (SEM), Propiedades psicométricas, Fiabilidad, Validez, evidencia basada en la estructura interna, evidencia basada en la relación con otras variables, consistencia interna, estabilidad temporal.

<i>Numerous studies have attempted to answer the question of what is the optimal number of response options in personality questionnaires. Some authors argue that the number of response options do not affect at all the reliability or the validity of the measurement tool, whereas others suggest to use from 2- to 25-response alternatives in order to maximize the psychometric properties of the instrument. The present PhD Dissertation work attempts to aboard in an exhaustive manner this question.<br/><br/>METHOD:<br/><br/>All subjects have responded, within the same session, a questionnaire with two-, three- and five-response options. In order to avoid that the subjects notice that they are responding to the same questionnaire, within a same session, these are applied within a tests battery. Likewise, two independent samples (A and B) and two personality questionnaires [Negative Problem Orientation (NPO) of the Social Problem Solving Inventory-Revised (SPSI-R) and Satisfaction with Life Scale (SWLS)] are used, to ensure that the answer does not depend on the instrument investigated. Both, the reliability and validity of the instrument will be used as criteria to determine the optimum number of response alternatives. Finally, the reliability and validity of each response format is analysed using three different psychometric models: "Classical Test Theory" (CTT), "Item Factor Analysis" (IFA), and "Item Response Theory" (IRT). Add, we used Structural Equation Models (SEM) to analyze the validity of the NPO and SWLS scales.<br/><br/>RESULTS AND DISCUSSION:<br/><br/>As a whole, the observed results suggest that the number of response options affects form slight to moderate aspects such as the internal structure and, partially, the internal consistency of the scales analyzed in this work. Contrary, the number of response alternatives does not affect aspects such as the evidence based on the relation with other variables or the temporary stability (test-retest stability) of the examined scales.<br/><br/>KEYWORDS:<br/><br/>Optimal number of response options, Classical Tests Theory (CCT), Item Factor Analysis (IFA), Item Response Theory (IRT), Structural Equation Models (SEM), Psychometric properties, Reliability, Validity, Personality rating scales, Satisfaction with Life Scale (SWLS), Social Problem-Solving Inventory-Revised (SPSI-R), evidence based on the internal structure, evidence based on the relation with other variables, internal consistency, temporary stability.</i>