¿Cómo influye el tamaño del campo de texto en las respuestas a preguntas abiertas? Evidencias de un diseño experimental/The influence of box size on responses to open-ended questions: Results from a split-ballot experiment

RESUMENEl diseño visual de los cuestionarios puede afectar a la calidad de los datos obtenidos, especialmente cuando se formulan preguntas abiertas donde los encuestados responden con sus propias palabras. En este trabajo se analizan los efectos de manipular el tamaño del espacio proporcionado para la respuesta en un conjunto de preguntas abiertas incluidas en un cuestionario auto-administrado sobre opiniones hacia la administración de justicia en España. Para ello se recurrió a un experimento split-ballot, dividiendo la muestra (N = 100) en dos mitades equivalentes que recibieron dos cuestionarios con el mismo contenido, pero con diferentes tamaños de campo de respuesta (pequeño y grande) en 16 preguntas abiertas. Los resultados muestran que los participantes que recibieron campos de texto grandes escribieron un mayor número de palabras en sus respuestas. Sin embargo, la manipulación en el campo de texto no influyó en 1) el número de temas abordados; ni en 2) el tiempo empleado para cumplimentar los cuestionarios. Sobre la base ABSTRACTThe visual design of questionnaires can affect the quality of the data obtained, especially when asking open-ended questions that respondents answer in their own words. In this paper, we analyze the effects of manipulating the size of the text boxes provided for answers to a set of open-ended questions in a self-administered questionnaire about opinions of the Criminal Justice system in Spain. For this, a split-ballot experiment was conducted dividing the sample (N = 100) into two equivalent halves. One half received questionnaires with small box sizes for the answers to the 16 open-ended questions while the other half received questionnaires with larger box sizes. The content on the questionnaires was the same. The results showed that those participants who received larger text boxes provided longer answers. However, manipulation of the text box did not influence 1) the number of issues addressed; or 2) response times. The results and their implications for questionnaire design are discussed.

Influencia del atractivo físico en la percepción de la inteligencia y de la extraversión./ Physical attractiveness influence on the perception of the intelligence and extraversion.

RESUMENAntecedentes: El objetivo de la investigación es estudiar la influencia del atractivo físico en la construcción del prejuicio sobre la inteligencia y la extraversión. Método: La muestra fue incidental. Estuvo compuesta por 628 personas con edades comprendidas entre los 16 y los 80 años, y un 47,4% fueron mujeres. Como instrumentos de evaluación se han utilizado seis escalas de comparaciones binarias, las cuales se construyeron con 20 fotografías de estudiantes universitarios (10 de mujeres y 10 de hombres). Como condicionante del prejuicio se tuvo en cuenta la variable de atractivo físico. Resultados: Se pone de manifiesto que el atractivo físico influye en la percepción de las personas a la hora de estimar subjetivamente la inteligencia y la extraversión. Conclusiones: El atractivo físico puede llegar a ser relevante en aspectos importantes de la vida debido a su influencia a la hora de prejuzgar cualidades de las personas como la inteligencia y la extraversión, por lo que se confirma el estereotipo de “lo que es bello es bueno”.ABSTRACTBackground: The goal of this investigation is to study the influence of physical attractiveness in the construction of prejudice about intelligence and extraversion. Method: The sample was incidental. It consisted of 628 people with ages between 16 to 80 years old, and 47,4% were women. The evaluation system included six binary comparison scales, which were developed using 20 college students’ photographs (10 men and 10 women). As a judgement-conditioning fact the variable of physical attractiveness was taken into account. Results: The study shows that physical attractiveness influences the perception of intelligence and extraversion in people. Conclusions: Physical attractiveness can be relevant in some aspects of life due to its influence when first judging the intelligence and extraversion of a person. Therefore let the Spanish proverb ‘Lo que es bello es bueno’ (What is beautiful is good) be confirmed.

Efectos del corrector en las evaluaciones educativas de alto impacto./ Rater effects in high-impact educational assessments.

RESUMENAntecedentes: Los ítems de ejecución que son calificados por diferentes jueces mediante rúbricas es uno de los mayores desafíos en la evaluación educativa a gran escala y de alto impacto. Es conocido que los efectos del corrector afectan a los resultados de la evaluación. En este contexto, el presente estudio analiza la fiabilidad entre-correctores en la evaluación de la expresión escrita. Método: un grupo de 13 correctores calificaron 375 escritos de estudiantes de 6º curso, siguiendo una rúbrica analítica compuesta de 8 criterios de corrección. Los correctores se asignaron a 13 tribunales siguiendo un diseño de bloques incompletos balanceado. Los análisis realizados buscaron, en primer lugar, confirmar la estructura unidimensional de la rúbrica. A continuación se emplearon diferentes métodos clásicos para estudiar los efectos del corrector, la consistencia intra-juez y el acuerdo entre jueces. Resultados: se encontraron efectos diferenciales entre los correctores. Estas diferencias son importantes cuando se compara el grado de severidad de los jueces. También se encuentran diferencias en la consistencia interna de cada juez y en el acuerdo entre correctores. Este último efecto es especialmente significativo en algunos tribunales. Conclusiones: las diferencias entre correctores pueden tener diferentes fuentes, como son la experiencia, familiaridad con la tarea y grado de entrenamiento con las rúbricas; la naturaleza de la tarea a evaluar o el propio diseño de la rúbrica empleada. ABSTRACTAntecedents: the constructed response test items that are qualified by different correctors with rubrics are one of the biggest challenges for Rater effects in high-impact educational assessments and are applied to large sample groups. It is known that rater bias affects the results of the evaluation. In this context, the present study analyzes the raters’ effects of the corrector on written expression. Method: a group of 13 raters rated 375 written productions of 6th-grade students, following an analytical rubric composed of 8 correction criteria. The raters were assigned to 13 groups of correction following a balanced incomplete block design. The first step of the analysis carried out was to confirm the one-dimensional structure of the rubric. The next and final step used different classical methods to study the raters’ effects, the intra-rater consistency and the agreement between judges. Results: differential effects were found among the raters. These differences are important when the raters’ severity is compared. There are also differences in the internal consistency of each judge and in the agreement between correctors. This last effect is especially significant in some raters’ groups. Discussion: differences between raters may have different sources, such as experience and familiarity with the task; the degree of training with the rubrics; the nature of the test; and the design of the rubric used.

Efecto de la demora sobre la discriminación de cantidades en el pez ángel (Pterophyllum scalare) / Effect of delay on quantity discrimination in angelfish (Pterophyllum scalare)

RESUMENEstudios en diversas especies animales han mostrado que la capacidad para discriminar entre agrupaciones de diferente tamaño numérico puede proporcionar ventajas adaptativas en diferentes contextos funcionales. En el presente estudio, para examinar la capacidad de discriminación numérica del pez ángel, Pterophyllum scalare, sometimos a los sujetos a una prueba de elección binaria presentando simultáneamente dos grupos de individuos de la misma especie pero de diferente tamaño. Incluimos una modificación metodológica añadiendo un componente de memoria en la elección. Así, tras un período en que los sujetos podían observar a los grupos, se impidió la visión de los mismos durante 30 segundos antes de comenzar la prueba de discriminación. Se presentaron grupos tanto en el rango de números grandes (≥ 4 miembros) como en el rango de números pequeños (< 4 miembros). Encontramos que en el grupo de control (contraste 0 vs. 4 peces) los sujetos discriminaron el grupo con peces. Asimismo, cuando al menos uno de los grupos contenía un número de miembros en el rango de números grandes y los contrastes diferían en una razón de 1:2 (4 vs. 8 peces) o menor (1 vs. 4 peces), los sujetos mostraron preferencia por el grupo mayor. Sin embargo, cuando los contrastes estaban dentro del rango de números pequeños (1 vs. 2 y 2 vs. 3), los sujetos fallaron en la discriminación. Los resultados indican que el pez ángel puede discriminar entre grupos grandes cuando uno de ellos está constituido, al menos, por el doble de elementos que el otro. El fallo en los contrastes con grupos pequeños, con pequeñas diferencias numéricas entre ellos, sugiere la existencia de un límite en la discriminación o, alternativamente, que ante tal demanda de memoria, la saliencia de los estímulos toma prioridad en la toma de decisiones. ABSTRACTIn a variety of animal species it has been shown that the ability to discriminate between groups of different numerical size may provide adaptive advantages in different functional contexts. Quantity discrimination has frequently been investigated using dichotomous choice tests, in which the subjects must choose between two different sets of items presented simultaneously. In the present study, using the angelfish (Pterophyllum scalare), groups of conspecifics of different numerical size were presented and a memory component was introduced in the choice. After a period of full view of the stimulus groups, the visual access of the test fish to the groups was prevented during 30 seconds prior to the choice. Thereafter, subjects were faced with a discrimination between groups within the large number range (≥ 4 members) and also in the small number range (< 4 members). We found that in a control group (contrast 0 vs. 4 fish) subjects discriminated the group with fish over an empty compartment. A preference for the larger group was shown when at least one of the groups had a number of members in the large number range, and the groups differed by a 1:2 (4 vs. 8 fish) or lower ratio (1 vs. 4 fish). However, in the comparisons between groups in the small number range (1 vs. 2 and 2 vs. 3), subjects failed in the discrimination. The results indicate that angelfish can discriminate between large groups when one of them has, at least, twice as many elements as the other. The failure with small groups, with small numerical differences between groups, suggests the existence of a limit in the discrimination or, alternatively, that when facing such a memory demand, the salience of the stimuli takes priority in the decision-making process.

Desarrollo de un Test de Homofobia / Development of a Homophobia Test

RESUMENAntecedentes: la homofobia se puede considerar como el prejuicio hacia el colectivo homosexual, caracterizado por la presencia tanto de actitud negativa como incomodidad, entendidas respectivamente como rechazo y temor. El objetivo del presente estudio ha sido crear una escala de medición de la homofobia que refleje el nivel de homofobia en la población, determinar si los Big Five de personalidad están relacionados con la homofobia y si existen diferencias por sexo, por edad y/o clase social en este constructo. Método: Se elaboró una escala de homofobia tipo likert que cuenta con 33 ítems. 521 personas contestaron a dicha escala además de a otra de medida de la clase social y al NEO-FFI (que evalúa los Big Five de la personalidad). Resultados: se han obtenido una fiabilidad y validez adecuadas de la escala creada. Al estudiar las relaciones entre la homofobia y las variables de personalidad y sociales se ha encontrado que existen correlaciones estadísticamente significativas entre la homofobia y los Big Five (correlaciones negativas con apertura y amabilidad, negativas y bajas con extraversión y responsabilidad, y positiva y baja con neuroticismo); se comprueba que hay diferencias en homofobia en función del sexo (siendo los hombres los que obtienen puntuaciones más altas) y de la clase social (siendo las clases Baja y Medio-Alta las que más alto puntúan), y se encuentran tendencias en edad. Conclusiones: las evidencias de validez y la fiabilidad halladas muestran que la escala creada es adecuada y que los datos obtenidos concuerdan con los de otras investigaciones. Además la escala aporta datos de la relación entre los Big Five y la clase social con la homofobia, pudiéndose tener en cuenta en futuras investigaciones. ABSTRACTAntecedents: homophobia can be considered as the prejudice towards homosexuals, characterized by the presence of both negative attitude and discomfort, understood respectively as rejection and fear. The purpose of the present study was to create a measurement scale that indicates the homophobia level in any sample, to determine if Big Five personality factors are related to homophobia and if there exists differences in homophobia given age, social status and sex. Method: a Likert Homophobia Scale with 33 items was constructed. 521 people answered the Homophobia scale, in addition with a social status measurement scale, and the NEO FFI (which evaluates five personality factors). Results: the reliability and validity of the Homophobia Scale obtained are considered appropriate. When studying the correlations between homophobia, personality and social variables, statistically significant correlations between Homophobia and the personality factors were found (negative correlation with Openness and Kindness, negative and low correlation with Extraversion and Responsibility, positive and low correlation with Neuroticism); differences in Homophobia given social status (Low and Medium-High social class get higher punctuations) and trends given age were found as well. Discussion: evidence of validity and reliability found prove that the scale is appropriate and that the data are consistent with other research. In addition, the scale provides data on the relation between Big Five and homophobia and the relation between social status and homophobia that could be used for future research.

Más allá de la palabra escrita. La utilización de recursos visuales como estrategia metodológica en ciencias sociales y de la educación / Beyond the text. Using visual resources as a methodological strategy in education and social sciences

RESUMENTradicionalmente, la transcripción de entrevistas, ya sea individuales o grupales, constituye, con frecuencia, el material empírico básico para llevar a cabo estudios cualitativos en ciencias sociales y de la educación. Sin embargo, la utilización de estrategias visuales (dibujos, fotografías, videos) se ha convertido en las últimas décadas en un recurso metodológico especialmente sensible y adecuado para aquellas personas que, por distintas razones, no tienen un nivel lingüístico o comunicativo desarrollado. Este es el caso, por ejemplo, de niños y niñas, personas de origen extranjero con poca competencia en la lengua de la sociedad de destino o de algunas personas con discapacidad intelectual. El objetivo de este artículo es describir e ilustrar la utilización metodológica de recursos visuales, así como discutir sus posibilidades, a partir de ejemplos de su uso desarrollados en tres investigaciones socioeducativas. ABSTRACTTraditionally, the transcription of interviews, either individual or group, has become the basic empirical material to conduct qualitative studies in social sciences and education. However, in the last few decades, the use of visual strategies (drawings, photographs, videos) has become a methodological resource, particularly sensitive and suitable for those people who do not have a level or communicative language developed for whatever reason. This is the case of children, people of foreign origin with less competence with the language of the society of destination or people with intellectual disabilities, for example. The objective of this article is to describe and illustrate the use of methodological visual resources within the framework of three research projects. We discuss the advantages and disadvantages of the use of these strategies through experience with the projects that are described and illustrated in this article.