INFORMATION

Psicothema was founded in Asturias (northern Spain) in 1989, and is published jointly by the Psychology Faculty of the University of Oviedo and the Psychological Association of the Principality of Asturias (Colegio Oficial de Psicología del Principado de Asturias).
We currently publish four issues per year, which accounts for some 100 articles annually. We admit work from both the basic and applied research fields, and from all areas of Psychology, all manuscripts being anonymously reviewed prior to publication.

PSICOTHEMA
  • Director: Laura E. Gómez Sánchez
  • Frequency:
         February | May | August | November
  • ISSN: 0214-9915
  • Digital Edition:: 1886-144X
CONTACT US
  • Address: Ildelfonso Sánchez del Río, 4, 1º B
    33001 Oviedo (Spain)
  • Phone: 985 285 778
  • Fax: 985 281 374
  • Email:psicothema@cop.es

Content Content




VOL 26. Nº1 • 2014

 



A systematic review of the complex organization of human cognitive domains and their heritability

Ximena Goldberg Hermo, Serafín Lemos Giráldez and Lourdes Fañanás Saura

Background: Models of cognition propose a hierarchical structure for human cognitive processes, in which the sequences of human action are organized into parts or subunits of analysis that can be grouped into progressively more complex, inclusive higher-order functions. This organizational structure from partial to whole may be reflected in the neural representations that underlie human behaviour, and in its genetic underpinnings. The objective of the present study was to explore a putative hierarchical organization of the genetic influences underlying cognitive domains. Method: Thirty four studies of the heritability of cognition on population-based samples were reviewed, which included measures of intelligence, verbal and performance abilities, memory, working memory and processing speed. Results: Specific cognitive domains showed diverse proportions of genetic underpinnings such that higher-order cognitive functions present high heritability estimates, whereas lower-order functions respond to small/moderate heritability estimates. Conclusions: Based on current understanding of the developmental processes of the neurobiological substrates of human cognition, the genetic contributions to cognitive abilities seem to be organized in line with the ontogenic maturation of the brain. We discuss the large genetic control of the combinatory capacity of basic cognitive functions, and its interaction with environmental influences.

Una revisión sistemática de la organización compleja de los dominios cognitivos humanos y su heredabilidad. Antecedentes: se ha propuesto que la estructura de la cognición humana respondería a un sistema jerárquico, donde las secuencias propias a una acción se organizarían desde sub-unidades de análisis hasta funciones de nivel superior relativamente complejas. Esta estructura organizacional estaría reflejada en las representaciones neurales que subyacen al comportamiento humano, así como también en sus sustratos genéticos. El objetivo del presente estudio fue explorar la posible organización jerárquica de las influencias genéticas subyacentes a los dominios cognitivos humanos. Método: se revisaron treinta y cuatro estudios de la heredabilidad de la cognición en muestras de la población general, que incluyeron medidas de inteligencia, habilidades verbales y manipulativas, memoria, memoria de trabajo y velocidad de procesamiento. Resultados: diversos dominios cognitivos mostraron distintas proporciones de influencias genéticas, con las mayores estimaciones de heredabilidad halladas para las funciones cognitivas de nivel superior y las menores estimaciones para las funciones de orden medio o inferior. Conclusiones: tomando como referencia los conocimientos actuales acerca del neurodesarrollo humano, las contribuciones genéticas de las habilidades cognitivas parecen organizarse paralelamente al crecimiento ontogénico del cerebro. Se discuten estos resultados en relación a la interacción entre el control genético de las funciones cognitivas y sus influencias ambientales.


An experimental analysis of obsessive-compulsive checking as avoidance behaviour

Luis Valero Aguayo, Félix Hurtado Melero and Aurora Gavino Lázaro

Background:Many explanatory models of obsessive-compulsive disorders (OCD) support the idea that compulsive behaviours are an attempt to avoid an aversive situation. There are few experimental studies carried out on the onset of repetitive behaviours. This study tries to create a repetitive checking behaviour as an analogue explaining similar OCD behaviours. Method: An inter-group design with 3 levels of aversion (minimal, progressive and maximum) in a visuo-spatial reasoning task was used. 48 university students without OCD problems (mean= 23 years old) were the participants, randomly distributed in 16 per group. Checking frequency (semi-hidden chronometer) for each task was measured and the questionnaires TONI-2, STAI, MOCI and YBOCS-SR were applied. Results: Participants with a minimal or maximum level difficulty showed a significantly higher level of checking behaviour than those in the progressive difficulty. The differences occurred between the minimal and the progressive group, and between the minimal and maximum difficulty. There were no differences in any other variable. Conclusion: In this analogue, the continuous checking of a chronometer was reinforced by the elimination of boring tasks. The momentary escape from an aversive situation explains the checking behaviour. This study could be an experimental analogue of checking behaviour, showing its avoidance function.

Un análisis experimental de la comprobación obsesivo-compulsiva como conducta de evitación. Antecedentes: múltiples modelos explicativos sobre los trastornos obsesivo compulsivos (TOC) apoyan la idea de que las conductas compulsivas son un intento de eliminar una situación aversiva. Hay pocos estudios experimentales sobre cómo aparecen las conductas repetitivas. Este estudio intenta crear una conducta de comprobación repetitiva como un análogo que podría explicar conductas TOC similares. Método: se ha utilizado un diseño entregrupos con 3 niveles de aversión (mínimo, progresivo y máximo) en una tarea de razonamiento viso-espacial. Han participado 48 estudiantes universitarios sin problemas TOC (media= 23 años), aleatorizados 16 por grupo. Se ha medido la frecuencia de comprobaciones (cronómetro semioculto) en cada tarea y se aplicaron los cuestionarios TONI-2, STAI, MOCI y YBOCS-SR. Resultados: los participantes con dificultad mínima o máxima mostraron significativamente más respuestas de comprobación que el grupo de dificultad progresiva. Las diferencias ocurrieron entre el grupo con tarea de dificultad mínima y progresiva, y mínima frente a máxima. No hubo diferencias en ninguna de las otras variables. Conclusiones: en este análogo la comprobación continua se vería reforzada negativamente al aliviar una tarea monótona, el propio escape momentáneo explicaría la comprobación. Este estudio podría ser un análogo experimental de que las conductas de comprobación tienen una función de evitación.


Language laterality, handedness and empathy in a sample of parents of children with autism spectrum disorder

Sonia Martínez-Sanchis, M. Consuelo Bernal Santacreu, Rosa Cortés Sancho and Marien Gadea Domenech

Background: First-order relatives of persons with Autism Spectrum Disorder (ASD) exhibit a cognitive pattern which is part of a broader autism phenotype. Method: The purpose of the present study was to evaluate whether some neuropsychological features related to the autism phenotype are present in parents of ASD children. To this end, the exploration included a dichotic listening task, handedness and the Empathy Quotient (EQ-60). Results: The scores obtained by the total sample (fathers plus mothers) were similar to those of the general population, although there were differences in some parameters of the dichotic listening task depending on the gender. Contrary to expectations, only in fathers, the negative correlation between data from both ears was not statistically significant, which could be evidence of a lack of hemispheric interdependence. Conclusions: These results support the possible existence of a genetic susceptibility to an aberrant language asymmetry pattern. Moreover, possible unknown epigenetic factors could act on a vulnerable genotype in some ASD subjects. Nevertheless, due to the small sample size, the present research must be considered a pilot study.

Lateralidad del lenguaje, preferencia manual y empatía en una muestra de padres de niños con trastorno de espectro autista. Antecedentes: algunos familiares de primer orden de personas con trastornos del espectro autista (TEA) exhiben un patrón de funcionamiento cognitivo que forma parte del llamado fenotipo ampliado de autismo (FAA). Método: el objetivo de este estudio consiste en evaluar si algunos aspectos neuropsicológicos relacionados con un FAA están presentes en progenitores de niños y niñas con TEA. Para ello, se realizó una prueba de escucha dicótica libre, se detectó la preferencia manual y se obtuvo el Cociente de Empatía (CE-60). Resultados: los resultados sitúan a la muestra total dentro de parámetros similares a los de la población general, aunque algunos datos de la escucha dicótica revelaron diferencias según el género. Contrariamente a lo esperado, en el subgrupo de padres los datos de ambos oídos no correlacionaron significativamente, lo que revelaría falta de interdependencia hemisférica. Conclusiones: nuestros resultados apoyan la posible existencia de cierta vulnerabilidad genética a un patrón anómalo de lateralización hemisférica del lenguaje. Por tanto, factores epigenéticos por determinar podrían estar incidiendo sobre un genotipo vulnerable en las personas con TEA. No obstante, la presente investigación ha de considerarse un estudio piloto debido al tamaño de la muestra.


Evaluation and early detection of problematic Internet use in adolescents

Patricia Gómez Salgado, Antonio Rial Boubeta, Teresa Braña Tobío, Jesús Varela Mallou and Carmen Barreiro Couto

Background:Problematic Internet use in adolescents has become an issue of concern for a growing number of researchers and institutions over the past years. Behavioural problems, social isolation, school failure and family problems are some of the consequences of psychological and behavioural impact on teenagers. Taking into account the interest that this issue has generated at many levels, the aim of this paper is to develop a screening tool for early detection of problematic Internet use in teenagers. Method: A survey of Compulsory Secondary School students from Galicia involving a total of 2,339 individuals was carried out. Results: The results obtained allow (1) gauging the magnitude of the problem, establishing the risk levels among the adolescents, and (2) presenting a new, simple and short screening instrument. Conclusions: The present scale has sufficient theoretical and empirical support, including good psychometric properties (a = .83; specificity = .81; sensitivity = .80; ROC curve = .90), making it an interesting applied tool.

Evaluación y detección precoz del uso problemático de Internet entre adolescentes. Antecedentes: el uso problemático de Internet entre los adolescentes preocupa cada vez más a investigadores e instituciones. Problemas de conducta, aislamiento social, fracaso escolar y problemas familiares son algunas de las consecuencias del impacto a nivel psicológico y conductual que ello produce. Habida cuenta del interés que el tema suscita a diferentes niveles, el objetivo de este trabajo es desarrollar una herramienta de screening para la detección precoz de uso problemático de Internet entre adolescentes. Método: se realizó una encuesta a escolares de Enseñanza Secundaria Obligatoria de la comunidad gallega, en la que participaron un total de 2.339 individuos. Resultados: los resultados obtenidos permiten: (1) evaluar la magnitud del problema, permitiendo conocer los niveles de riesgo existente, y (2) presentar un nuevo instrumento de screening o cribado, breve y sencillo. Conclusiones: la presente escala cuenta con suficiente aval teórico y empírico y con unas buenas propiedades psicométricas (a = ,83; especificidad = ,81; sensibilidad = ,80; Curva COR = ,90), lo cual la convierte en una herramienta de interés a nivel aplicado.


Comorbidity of oppositional defiant disorder and anxiety disorders in preschoolers

Virginia Martín, Roser Granero and Lourdes Ezpeleta

Background: The aim was to study the comorbidity of oppositional defiant disorder (ODD) and anxiety disorders (AD) among preschool children of the general population, and to assess the contribution of comorbidity to the child’s functional impairment. Method: 622 children were assessed at the ages of 3 and 5, through a diagnostic interview. They were clustered into three diagnostic groups: only ODD, only AD and comorbid ODD+AD. Results: At age 3, ODD was associated with specific phobia, OR = 4.7, 95% CI [1.4, 14.1], and at age 5, with any anxiety disorder, OR=3.9; 95% CI [1.8, 8.4]. ODD at age 3 was predictive of separation anxiety at age 5, OR=4.1; 95% CI [1.2, 14.3]. Comorbid ODD+AD cases showed a higher risk of functional impairment at school and in behavior toward others. Sex and socioeconomic status were not related to the diagnostic group. Conclusions: ODD+AD comorbidity can be identified in preschool children. Early identification of this association is needed to adequately treat the affected children.

Comorbilidad del trastorno negativista desafiante y los trastornos de ansiedad en preescolares. Antecedentes: se analiza la comorbilidad entre el trastorno negativista desafiante (TND) y los trastornos de ansiedad (TA) en preescolares de población general, y el deterioro funcional con que se asocian. Método: 622 niños fueron evaluados a los 3 y los 5 años con una entrevista diagnóstica. Se compararon 3 grupos diagnósticos: únicamente TND, únicamente TA y comorbilidad TND+TA. Resultados: a los 3 años se halló asociación entre TND y fobia específica (OR = 4.7, IC95%: 1.4÷14.1) y a los 5 años entre TND y TA, OR= 3.9; 95% IC [1.8, 8.4]. La presencia de TND a los 3 años fue predictiva de ansiedad de separación a los 5 años (OR = 4.1; IC95%: 1.2÷14.3). La comorbilidad se asoció con mayor deterioro funcional en la escuela y en el comportamiento hacia los demás. Sexo y nivel socioeconómico no se asociaron al grupo diagnóstico. Conclusiones: la comorbilidad TND+TA se puede identificar en edad preescolar. Es necesaria la detección temprana de estos trastornos para el adecuado tratamiento de los niños afectados.


Comparing intergroup contact effects on blatant and subtle prejudice in adolescents: A multivariate multilevel model

Juan Herrero Olaizola, Francisco Javier Rodríguez Díaz and Gonzalo Musitu Ochoa

Background: The literature has rarely paid attention to the differential influence of intergroup contact on subtle and blatant prejudice. In this study, we hypothesized that the influence of intergroup contact on subtle prejudice will be smaller than its influence on blatant prejudice. Method: This hypothesis was tested with data from a cross-sectional design on 1,655 school-aged native Spanish adolescents. Prejudice was measured with a shortened version of the Meertens and Pettigrew scale of blatant and subtle prejudice adapted to Spanish adolescent population. Results: Results from multivariate multilevel analyses for correlated outcome variables supported the hypothesis. Students tended to score higher on the subtle prejudice scale; contact with the outgroup was statistically related both to levels of blatant and subtle prejudice; and, the negative relationship of contact with the outgroup and prejudice is greater for blatant prejudice as compared to subtle prejudice. Conclusions: Overall, results provide statistical evidence supporting the greater resistance to change of subtle forms of prejudice.

Comparando el efecto del contacto intergrupal en el prejuicio manifiesto y sutil en adolescentes: un modelo multinivel multivariado. Antecedentes: la literatura rara vez ha prestado atención a la diferente influencia que el contacto con el exogrupo ejerce en el prejuicio manifiesto y sutil. En este estudio hipotetizamos que el contacto con el exogrupo influye de forma más acusada en las formas manifiestas del prejuicio, por lo que el prejuicio sutil es más resistente al cambio. Método: se contrastaron estas tres hipótesis con un diseño correlacional en una muestra de 1.655 adolescentes españoles escolarizados. El prejuicio manifiesto y sutil se evaluó con una versión breve adaptada a la población adolescente española de la escala de prejuicio sutil y manifiesto de Meertens y Pettigrew. Resultados: los resultados de los análisis multivariados multinivel para variables dependientes correlacionadas confirmaron las hipótesis. Los estudiantes tendieron a puntuar más en prejuicio sutil que en manifiesto; la relación estadística entre el contacto con el exogrupo y el prejuicio es negativa (a mayor contacto, menor prejuicio); y esta relación negativa es más acusada en el caso del prejuicio manifiesto. Conclusiones: los resultados proporcionan evidencia estadística que apoya la mayor resistencia al cambio del prejuicio sutil en comparación con el prejuicio manifiesto.


Psychometric properties of the AQ Aggression Scale in Chilean students

Maruzzella Valdivia-Peralta, Eduardo Fonseca-Pedrero, Luis González-Bravo and Serafín Lemos-Giráldez

Background: The Buss and Perry Aggression Questionnaire (AQ) evaluates aggressive behaviours and is used to assess manifestations of aggression. Methods: At different points in time, 346 Chilean university students participated in the validation of the instrument, whose convergent validity was shown in relation to the scales of Psychological Aggression and Physical Aggression of the Conflict Tactics Scale 2 (CTS- 2), and the Salvo Impulsivity Scale. Discriminant validity was found when comparing the scores obtained from a group of students categorized as "Violent" with those of a control group, after a screening test. Results: The AQ scale has appropriate psychometric properties in terms of internal consistency, test-retest reliability, convergent validity and discriminant validity. Four principal factors were obtained in the confirmatory factor analysis. Conclusions: The AQ can be used in Chile to assess aggressive behaviours. Challenges for future research are discussed.

Propiedades psicométricas de la Escala de Agresividad AQ en estudiantes chilenos. Antecedentes: el Cuestionario de Agresión de Buss y Perry (AQ) evalúa conductas agresivas y se utiliza para medir manifestaciones de agresión. Método: trescientos cuarenta y seis estudiantes universitarios chilenos participaron en diferentes momentos de la validación del instrumento, las evidencias de validez convergente se analizaron en relación a las subescalas de Agresión Psicológica y Agresión Física de la Escala de Tácticas de Conflicto 2 y la escala de Impulsividad de Salvo. Las evidencias de validez discriminante se comprobaron en la comparación de las puntuaciones obtenidas en un grupo de estudiantes universitarios identificados como violentos en un screening y el grupo control. Resultados: el AQ presenta propiedades psicométricas adecuadas en términos de consistencia interna, estabilidad test-retest y evidencias de validez convergente y discriminante. Se identificaron cuatro factores principales en el análisis factorial confirmatorio. Conclusiones: el AQ parece ser un instrumento adecuado para evaluar el nivel de conductas agresivas en muestras chilenas. Se plantean desafíos para estudios posteriores.


Psychometric characteristics of the BRIEF scale for the assessment of executive functions in Spanish clinical population

Trinidad García Fernández, Julio Antonio González-Pienda, Celestino Rodríguez Pérez, David Álvarez García and Luis Álvarez Pérez

Background: The Behavior Rating Inventory of Executive Functions (BRIEF) scale, completed by families, is widely known in the assessment of executive functions in children and adolescents. However, its application is limited to English-speaking population. Method: This study analyzes the preliminary results from its application in a Spanish clinical sample, comprising 125 participants aged 5-18 years. Internal structure and reliability of the translated scale were analyzed, as well as its relationship with other behavioral measures through the analysis of their correlations with the Assessment of Attention Deficit Hyperactivity Disorder Scale (EDAH). The results were compared with those from the original validation study. Results: The data revealed the presence of the same internal structure, as well as acceptable internal consistency and significant correlations with the Attention Deficit and Hyperactivity components of the EDAH scale. Conclusions: This study provides preliminary evidence of the utility of the BRIEF scale in cultural contexts different from the original, particularly in Spanish clinical population.

Características psicométricas de la escala BRIEF para la evaluación de funciones ejecutivas en población clínica española. Antecedentes: la escala Behavior Rating Inventory of Executive Functions (BRIEF), cumplimentada por familias, es ampliamente conocida en la evaluación de las funciones ejecutivas en niños y adolescentes. Sin embargo, su aplicación está limitada a población de habla inglesa. Método: en este estudio se analizan los primeros resultados procedentes de su aplicación a una muestra clínica española, formada por 125 participantes de 5 a 18 años. Se analizó la estructura interna y fiabilidad de las puntuaciones de la escala traducida al español, así como su relación con otras medidas comportamentales a través del análisis de sus correlaciones con la escala de Evaluación del Déficit de Atención con Hiperactividad (EDAH). Los resultados se compararon con los del estudio de validación original. Resultados: los datos mostraron la presencia de una misma estructura interna de las puntuaciones, así como una aceptable consistencia interna y correlaciones estadísticamente significativas con los componentes de Déficit de Atención e Hiperactividad de la escala EDAH. Conclusiones: este estudio aporta evidencia preliminar sobre la utilidad de la escala BRIEF en contextos culturales diferentes al originario, concretamente en población clínica española.


Spanish adaptation of the Creative Potential and Practised Creativity scale (CPPC-17) in the workplace and inside the organization

Joan Boada-Grau, José-Carlos Sánchez-García, Aldo-Javier Prizmic-Kuzmica and Andreu Vigil-Colet

Background: This study follows the theoretical framework put forward by Hinton on creative potential and practised creativity. The objective was to adapt the 17-item Creative Potential and Practised Creativity scale into Spanish and examine its psychometric properties. Method: The study sample was made up of 975 Spanish employees (48.5% men and 51.5% women). Results: After performing a confirmatory factor analysis, the findings revealed a three-factor structure: Creative potential, Practised creativity and Perception of organizational support. Furthermore, appropriate reliability was found for all three factors as well as initial evidence of construct validity in relation to certain external correlates and a series of scales measuring workaholism, irritation, burnout and personality. Conclusions: The present scale may prove ideal for adequately identifying Creative potential, Practised creativity and Perceived organizational support.

Adaptación española de la escala de Potencial Creativo y de la Creatividad Practicada (CPPC-17) en el trabajo y en la organización. Antecedentes: este estudio se enmarca dentro de la propuesta de Hinton sobre el potencial creativo y la creatividad practicada. El objetivo fue realizar la adaptación al español de la escala Creative Potential and Practised de 17 ítems y analizar sus propiedades psicométricas. Método: los participantes de la presente investigación son 975 empleados españoles (48,5% hombres y 51,5% mujeres). Resultados: los resultados obtenidos demuestran, después de realizar análisis confirmatorio, una estructura constituida por tres factores: potencial creativo, creatividad practicada y percepción de apoyo organizacional. Además, los tres factores obtenidos tienen una fiabilidad adecuada e igualmente se constatan evidencias de validez si se toman como referencia algunos correlatos externos y algunas escalas que hacen referencia a la adicción al trabajo, la irritación, el burnout y la personalidad. Conclusiones: la presente escala puede resultar idónea para identificar de manera apropiada el potencial creativo, la creatividad practicada y el apoyo organizacional percibido.


The Spanish version of the Work-related Acceptance and Action Questionnaire (WAAQ)

Francisco J. Ruiz and Paula Odriozola-González

Background: Psychological flexibility, a key construct of Acceptance and Commitment Therapy (ACT), has recently been found to be an important determinant of mental health and behavioral effectiveness in the workplace. This finding has led to designing a measure of psychological flexibility especially tailored to the workplace (the Work-related Acceptance and Action Questionnaire; WAAQ) in the hope that it may reveal even stronger associations with variables related to a work context. Method: First, we back-translated the WAAQ into Spanish and then administered it to 209 workers, in addition to other relevant work-related measures. Results: Data were very similar to those obtained with the original WAAQ version. The WAAQ showed a very good internal consistency (a = .92) and a clear one-factor structure. It also showed higher correlations with work-specific measures than a general measure of psychological inflexibility (the Acceptance and Action Questionnaire-II; AAQ-II). As hypothesized by the ACT theory, the correlation between the WAAQ and the AAQ-II was moderate but not so high as to suggest that they are assessing the same construct. Conclusions: This Spanish translation of the WAAQ emerges as a reliable and valid measure of psychological flexibility in relation to the workplace.

Versión española del Cuestionario de Aceptación y Acción Relacionado con el Trabajo (WAAQ). Antecedentes: la flexibilidad psicológica, un constructo central en la Terapia de Aceptación y Compromiso (ACT), ha mostrado ser un determinante importante de la salud mental y la efectividad conductual en el trabajo. Estos hallazgos han llevado a diseñar una medida de flexibilidad psicológica ajustada al contexto laboral (Cuestionario de Aceptación y Acción en el Trabajo; WAAQ) que pudiera mostrar asociaciones incluso mayores con variables relacionadas con el contexto laboral. Método: se realizó una traducción inversa del WAAQ en español y se aplicó a 209 trabajadores conjuntamente con otras medidas. Resultados: los datos obtenidos fueron muy similares a los de la versión original. El WAAQ mostró muy buena consistencia interna (a= .92) y una estructura unifactorial. Además, el WAAQ mostró correlaciones más altas con medidas específicas del contexto laboral que una medida general de inflexibilidad psicológica (el Cuestionario de Aceptación y Acción - II; AAQ-II). Tal y como hipotetiza el modelo de ACT, la correlación entre el WAAQ y el AAQ-II fue moderada y no tan grande como para sugerir que ambos cuestionarios miden el mismo constructo. Conclusiones: la presente versión española del WAAQ se muestra como una medida fiable y válida de la flexibilidad psicológica en el contexto laboral.


Followers’ agreeableness and extraversion and their loyalty towards authentic leadership

Lucas Monzani, Pilar Ripoll, and José María Peiró

Background: Effective leaders understand that loyal followers are the key for success. To win their loyalty, leaders usually build social exchange relationships with them, through a wide range of behaviours, such as honouring agreements or using open and transparent communication. However, the effect of these behaviours on their followers’ loyalty can differ depending on followers’ individual differences, especially in relational traits such as agreeableness and extraversion. Method: We explored the moderating role of followers’ agreeableness and extraversion in the relationship between authentic leadership (using transactional leadership as reference group) and followers’ loyalty. A two-wave experiment, where 224 participants with and without work experience were randomly assigned to either a transactional or authentic leadership style condition was conducted. Results: Our results show that followers in the authentic leadership condition had higher levels of loyalty toward their leader. Moreover, followers’ agreeableness played a negative moderating role in this relationship whereas extraversion played a positive moderating role in it. Conclusions: Our results indicate that followers’ characteristics influence the effect of situational factors on their attitudes, such as loyalty, providing support for the need of a more integrative approach to leadership, where followers need to be considered as active elements of this process ofinfluence.

La afabilidad y extroversión de los seguidores y su lealtad hacia el liderazgo auténtico. Antecedentes: los líderes efectivos entienden que la lealtad de sus seguidores es clave para el éxito. Para conseguirla, establecen intercambios sociales, a través de conductas tales como recompensar con justicia o utilizar una comunicación transparente. Sin embargo, el efecto de estas conductas sobre la lealtad de sus seguidores puede variar en función de las diferencias individuales de esos seguidores, en especial en aquellos aspectos que influyen en la forma en que se relacionan las personas, como por ejemplo su extroversión o afabilidad. Método: se realizó un experimento de diseño longitudinal donde 224 participantes, con o sin experiencia laboral, fueron asignados al azar a un líder con estilo auténtico o estilo transaccional. Resultados: nuestros resultados muestran que los seguidores bajo un líder auténtico reportan mayores niveles de lealtad que aquellos bajo un líder transaccional. La afabilidad y la extroversión de los seguidores modulan la relación entre el estilo de liderazgo y la lealtad hacia el líder. Conclusión: las características de los seguidores modulan el efecto del estilo de liderazgo sobre las actitudes de los seguidores, apoyando la necesidad de un enfoque más integrador del estudio del liderazgo, donde los seguidores han de ser considerados como elementos activos de este proceso.


Assessment of dispositional and contextual variables in educational settings: IEPA and AYES scales

José A. Cecchini Estrada, Julio A. González-Pienda, Antonio Méndez-Giménez, Javier Fernández-Río, Jorge L. Fernández-Losa and Carmen González González-Mesa

Background: Despite the fact that there are a few instruments designed to measure dispositional and contextual variables in educational contexts, the goal of this study is to elaborate and validate two questionnaires to measure learning interest, effort and progression as dispositional (IEPA) and contextual (AYEs) variables in secondary education students. Method: An initial version of both scales was developed. They were reviewed by a panel of experts and tested on two pilot studies. The final versions were administered to the described sample and their psychometric properties were tested. Factor analyses (exploratory and confirmatory) were conducted on three sets of data: Mathematics (n = 290), Spanish Language and Literature (n = 283), and Physical Education (n = 289). Results: Both final scales had three dimensions with four items in each dimension. All standardized loads and critical values of t were overwhelmingly positive, while alpha coefficients ranged from .85 to .91. Both scales showed adequate construct validity, convergent validity, discriminant validity and concurrent validity. Conclusions: Results showed that these new scales have adequate psychometric properties, allowing a valid and reliable assessment.

Evaluación de variables disposicionales y contextuales en el ámbito educativo: escalas IEPA y AYES. Antecedentes: si bien existen en la literatura instrumentos diseñados para evaluar variables disposicionales y contextuales en ámbitos educativos, la finalidad de este estudio es elaborar y validar dos cuestionarios que permitan medir el interés, el esfuerzo y la progresión en el aprendizaje en el alumnado de Educación Secundaria como variables disposicionales (IEPA) y contextuales (AYES). Método: tras elaborar una primera versión, que fue sometida sucesivamente a un juicio de expertos y a dos estudios piloto previos, se comprobaron las medidas psicométricas de la versión definitiva. Se realizaron análisis factoriales (exploratorios y confirmatorios) en tres conjuntos de datos: Matemáticas (n = 290), Lengua Castellana y Literatura (n = 283) y Educación Física (n = 289). Resultados: las escalas definitivas están compuestas por tres dimensiones de cuatro ítems cada una. Todas las cargas estandarizadas y los valores críticos de t superaron ampliamente los niveles mínimos recomendados, el coeficiente alfa osciló entre ,85 y ,91. Ambos cuestionarios mostraron una adecuada validez de constructo, validez convergente, validez discriminante y validez concurrente. Conclusiones: estos resultados indican que las nuevas escalas poseen adecuadas propiedades psicométricas, lo que permite una evaluación válida y fiable.


An explanatory model of the intention to continue studying among non-traditional university students

Pedro Rosário, Armanda Pereira, José Carlos Núñez, Jennifer Cunha, Sonia Fuentes, Soely Polydoro, Martha Gaeta and Estrella Fernández

Background: Although academic achievement is believed to be an important factor in students’ decision to continue studying at university, research on this topic is limited. Method: The current study analyzed the relationship between academic achievement and the intention of 327 non-traditional students to continue studying at university, using a path model. Results: The central hypothesis of the study was confirmed, as the intention to continue studying was determined by previous academic results, although the amount of variance explained was relatively low (13%). Conclusions: The results from this study indicate that the intention to continue studying at university depends less than expected on the performance achieved. So, universities should consider other variables such as the quality of the academic support offered to these students continue their studies.

Un modelo exploratorio de la intención de continuar estudiando en alumnos universitarios no-tradicionales. Antecedentes: a pesar de la importancia que se atribuye al rendimiento académico en la toma de decisión de los alumnos mayores de 25 años sobre si continuar o no sus estudios en la Universidad, la investigación sobre este tópico es limitada. Método: se analizó la relación entre el rendimiento académico y la intención de 327 alumnos no-tradicionales de continuar sus estudios en la Universidad mediante el ajuste de un modelo de relaciones causales. Resultados: la hipótesis central del estudio fue confirmada en la medida en que la intención de continuar con los estudios resultó determinada por los resultados académicos previos, aunque la cantidad de varianza explicada fue relativamente escasa (un 13%). Conclusiones: de los resultados obtenidos en este estudio se concluyó que la intención de continuar en la Universidad depende menos de lo que se cree del rendimiento logrado, por lo que las universidades deberán dirigir su mirada también a otras variables como, por ejemplo, la calidad del apoyo que estos estudiantes reciben para continuar sus estudios.


Methodological convergence of program evaluation designs

Salvador Chacón-Moscoso, M. Teresa Anguera, Susana Sanduvete-Chaves and Milagrosa Sánchez-Martín

Background: Nowadays, the confronting dichotomous view between experimental/quasi-experimental and non-experimental/ethnographic studies still exists but, despite the extensive use of non-experimental/ethnographic studies, the most systematic work on methodological quality has been developed based on experimental and quasi-experimental studies. This hinders evaluators and planners’ practice of empirical program evaluation, a sphere in which the distinction between types of study is changing continually and is less clear. Method: Based on the classical validity framework of experimental/quasi-experimental studies, we carry out a review of the literature in order to analyze the convergence of design elements in methodological quality in primary studies in systematic reviews and ethnographic research. Results: We specify the relevant design elements that should be taken into account in order to improve validity and generalization in program evaluation practice in different methodologies from a practical methodological and complementary view. Conclusions: We recommend ways to improve design elements so as to enhance validity and generalization in program evaluation practice.

Convergencia metodológica de los diseños de evaluación de programas. Antecedentes: por una parte, actualmente todavía existe la visión dicotómica en que se presentan confrontados los estudios experimentales/cuasi-experimentales y no-experimentales/etnográficos; y por otra parte, a pesar del extendido uso de los estudios no-experimentales/etnográficos, el trabajo más sistemático sobre calidad metodológica se ha llevado a cabo en los estudios experimentales y cuasi-experimentales. Esto dificulta la práctica de quienes evalúan y planifican los programas a nivel empírico, un área donde la distinción entre tipos de estudio está en cambio constante y es menos clara. Método: tomando como referencia el marco clásico de validez en estudios experimentales/cuasi-experimentales, realizamos una revisión de la literatura con el fin de analizar la convergencia de los elementos de diseño en calidad metodológica de los estudios primarios en revisiones sistemáticas e investigación etnográfica. Resultados: explicitamos los elementos de diseño relevantes que habrían de tenerse en cuenta para mejorar la validez y generalización en evaluación de programas en las diferentes metodologías desde una aproximación práctica de complementariedad metodológica. Conclusiones: proponemos recomendaciones para mejorar los elementos de diseño y así potenciar la validez y la generalización en la práctica de evaluación de programas.


Validating assessments: Introduction to the Special Section

Stephen Sireci and José-Luis Padilla

Background: Validation is the process of providing evidence that tests and questionnaires are adequately and appropriately fulfilling the purposes for which they are developed. In this special issue, experts from several countries describe specific approaches to test validation and provide examples of their approach. These approaches and examples illustrate the validation framework implied by the Standards for Educational and Psychological Testing. Method: We describe the Standards’ approach for building a validity argument based on validity evidence based on test content, response processes, internal structure, relations to other variables, and testing consequences. Results: The five articles provide comprehensive examples of gathering data regarding these five sources of evidence and how they contribute to the validation of the use of test scores for particular purposes. Conclusions: These five articles provide concrete examples of how the five sources of validity evidence suggested by the Standards can be used to develop a sound validity argument to support the use of a test for its intended purposes.

Evaluaciones de validez: introducción a la Sección Especial. Antecedentes: la validación es el proceso de aportar evidencias de que las evaluaciones mediante tests y cuestionarios cumplen adecuada y apropiadamente los objetivos para los que se elaboran. En este número especial expertos de varios países describen enfoques específicos para la validación y aportan ejemplos. Estos enfoques y ejemplos ilustran el marco de validación implicado por los Standards for Educational and Psychological Testing. Método: describimos la aproximación de los Standards para elaborar un argumento de validez a partir de evidencias de validez basadas en el contenido del test, los procesos de respuesta, la estructura interna, las relaciones con otras variables y las consecuencias del uso del test. Resultados: los cinco artículos aportan ejemplos comprehensivos de obtención de datos en relación con las cinco fuentes de evidencia, y de cómo contribuyen a la validación del uso de las puntuaciones en el test para objetivos específicos. Conclusiones: los cinco artículos aportan ejemplos concretos de cómo las cinco fuentes de evidencias de validez sugeridas por los Standards pueden utilizarse para elaborar un sólido argumento de validez que apoye el uso de test para sus objetivos previstos.


Validity evidence based on test content

Stephen Sireci and Molly Faulkner-Bond

Background: Validity evidence based on test content is one of the five forms of validity evidence stipulated in the Standards for Educational and Psychological Testing developed by the American Educational Research Association, American Psychological Association, and National Council on Measurement in Education. In this paper, we describe the logic and theory underlying such evidence and describe traditional and modern methods for gathering and analyzing content validity data. Method: A comprehensive review of the literature and of the aforementioned Standards is presented. Results: For educational tests and other assessments targeting knowledge and skill possessed by examinees, validity evidence based on test content is necessary for building a validity argument to support the use of a test for a particular purpose. Conclusions: By following the methods described in this article, practitioners have a wide arsenal of tools available for determining how well the content of an assessment is congruent with and appropriate for the specific testing purposes.

Evidencia de validez basada en el contenido del test. Antecedentes: la evidencia de validez basada en el contenido del test es una de las cinco formas de evidencias de validez estipuladas en los Standards for Educational and Psychological Testing de la American Educational Research Association. En este artículo describimos la lógica y teoría que subyace a tal fuente de evidencia, junto a métodos tradicionales y modernos para obtener y analizar los datos de validez de contenido. Método: una revisión comprehensiva de la bibliografía y de los mencionados Standards. Resultados: para los tests educativos y otras evaluaciones de los conocimientos y habilidades que poseen los examinados, la evidencia de validez basada en el contenido del test es necesaria para elaborar un argumento de validez que apoye el uso de un test para un objetivo particular. Conclusiones: siguiendo los métodos descritos en este artículo, los profesionales tienen un amplio arsenal de herramientas disponibles para determinar en qué medida el contenido de una evaluación es congruente y apropiado para los objetivos específicos de la evaluación.


Validity evidence based on internal structure

Joseph Rios and Craig Wells

Background: Validity evidence based on the internal structure of an assessment is one of the five forms of validity evidence stipulated in the Standards for Educational and Psychological Testing of the American Educational Research Association, American Psychological Association, and National Council on Measurement in Education. In this paper, we describe the concepts underlying internal structure and the statistical methods for gathering and analyzing internal structure. Method: An in-depth description of the traditional and modern techniques for evaluating the internal structure of an assessment. Results: Validity evidence based on the internal structure of an assessment is necessary for building a validity argument to support the use of a test for a particular purpose. Conclusions: The methods described in this paper provide practitioners with a variety of tools for assessing dimensionality, measurement invariance and reliability for an educational test or other types of assessment.

Evidencia de validez basada en la estructura interna. Antecedentes: la evidencia de validez basada en la estructura interna de una evaluación es una de las cinco formas de evidencias de validez estipuladas en los Standards for Educational and Psychological Testing de la American Educational Research Association, American Psychological Association, and National Council on Measurement in Education. En este artículo describimos los conceptos que subyacen a la estructura interna y los métodos estadísticos para analizarla. Método: una descripción detallada de las técnicas tradicionales y modernas para evaluar la estructura interna de una evaluación. Resultados: la evidencia de validez basada en la estructura interna de una evaluación es necesaria para elaborar un argumento de validez que apoye el uso de un test para un objetivo particular. Conclusiones: los métodos descritos en este artículo aportan a los profesionales una variedad de herramientas para evaluar la dimensionalidad, invarianza de la medida y fiabilidad de un test educativo u otro tipo de evaluación.


Demonstrating the validity of three general scores of PET in predicting higher education achievement in Israel

Carmel Oren, Tamar Kennet-Cohen, Elliot Turvall and Avi Allalouf

Background: The Psychometric Entrance Test (PET), used for admission to higher education in Israel together with the Matriculation (Bagrut), had in the past one general (total) score in which the weights for its domains: Verbal, Quantitative and English, were 2:2:1, respectively. In 2011, two additional total scores were introduced, with different weights for the Verbal and the Quantitative domains. This study compares the predictive validity of the three general scores of PET, and demonstrates validity in terms of utility. Method: Sample: 100,863 freshmen students of all Israeli universities over the classes of 2005-2009. Regression weights and correlations of the predictors with FYGPA were computed. Simulations based on these results supplied the utility estimates. Results: On average, PET is slightly more predictive than the Bagrut; using them both yields a better tool than either of them alone. Assigning differential weights to the components in the respective schools further improves the validity. Conclusion: The introduction of the new general scores of PET is validated by gathering and analyzing evidence based on relations of test scores to other variables. The utility of using the test can be demonstrated in ways different from correlations.

Demostrando la validez de tres puntuaciones generales del PET para predecir el rendimiento en la educación superior en Israel. Antecedentes: el Psychometric Entrance Test (PET), utilizado para la admisión a la educación superior en Israel junto con la Matriculation (Bagrut), tuvo en el pasado una puntuación general en la que los pesos para sus dominios: Verbal, Cuantitativo e Inglés eran 2:2:1, respectivamente. En 2011 se introdujeron dos puntuaciones totales adicionales, con pesos diferentes para los dominios Verbal y Cuantitativo. Este estudio compara la validez predictiva de las tres puntuaciones generales del PET y demuestra la validez en términos de utilidad. Método: muestra: 100.863 estudiantes de primer año de todas las universidades israelíes en los cursos de 2005 a 2009. Se calcularon los coeficientes de regresión y las correlaciones de los predictores con FYGPA. Las simulaciones basadas en estos resultados aportaron la utilidad de las estimaciones. Resultados: en promedio, PET es ligeramente más predictivo que el "Bagrut". Asignar pesos diferentes a los componentes en las escuelas respectivas mejora más la validez. Conclusiones: la introducción de las nuevas puntuaciones generales del PET es validada mediante la obtención y análisis de evidencia basada en las relaciones de las puntuaciones del test con otras variables. Puede demostrarse la utilidad del uso del test en formas diferentes de las correlaciones.


Validity evidence based on testing consequences

Suzanne Lane

Background: Large-scale educational assessments in the U.S. are used as policy tools for improving instruction and evaluating educational programs and the effectiveness of educators. Because of the high-stakes nature of their use, it is imperative that validity evidence based on testing consequences is obtained to support their multiple purposes. Method: A comprehensive review of the literature related to validity evidence for test use was conducted. Results: A theory of action for a testing program should be delineated. A theory of action reflects an interpretative and use argument and a validity argument for assessment programs and delineates the purposes and uses of the system as well as the outcomes of the system. The articulation of a validity argument allows for the accumulation of evidence not only for, but also against, intended score interpretations and uses. Conclusions: As described in the paper, for assessment and accountability systems that are intended to have an effect on both instruction and student learning, the consequences, both positive and negative, of the systems need to be evaluated.

Evidencia de validez basada en las consecuencias del uso del test. Antecedentes: las evaluaciones educativas a gran escala en los Estados Unidos son utilizadas como herramientas políticas para mejorar la instrucción, evaluar los programas educativos y la efectividad de los educadores. Debido al elevado impacto de sus usos, es imperativo obtener evidencias de validez basadas en las consecuencias del uso del test para sus múltiples objetivos. Método: se ha llevado a cabo una revisión comprehensiva de la literatura relacionada con la evidencia de validez basada en las consecuencias del uso del test. Resultados: debe elaborarse una teoría de la acción para un programa de evaluación mediante tests. Una teoría de la acción refleja un argumento interpretativo, un argumento de uso y un argumento de validez para los programas de evaluación, y define los objetivos y usos del sistema así como los resultados. La articulación de un argumento de validez permite la acumulación de evidencias no solo a favor, sino también en contra, de las interpretaciones y usos previstos de las puntuaciones. Conclusiones: como se describe en el artículo, para los sistemas de evaluación y rendición de cuentas que son diseñados para tener un efecto sobre la instrucción y el aprendizaje del estudiante, las consecuencias, tanto positivas como negativas, necesitan ser evaluadas.


Validity evidence based on response processes

José-Luis Padilla and Isabel Benítez

Background: Validity evidence based on response processes was first introduced explicitly as a source of validity evidence in the latest edition of Standards for Educational and Psychological Testing. In this paper, we present the theory, the relationship with other sources of validity evidence, and the methods available for validation studies aimed at obtaining validity evidence about response processes. Method: A comprehensive review of the literature along with theoretical and practical proposals. Results: The articles provides arguments for determining when validity evidence based on response processes is critical for supporting the use of the test for a particular purpose, and examples of how to perform a validation study to obtain such validity evidence. Conclusions: There are methods for obtaining validity evidence based on response processes. Special attention should be paid to validation studies using the cognitive interview method given its features and possibilities. Future research problems pose how to combine data from different methods —qualitative and quantitative—, to develop complete validity arguments that support the use of the test for a particular purpose.

Evidencia de validez basada en los procesos de respuesta. Antecedentes: la evidencia de validez basadas en los procesos de respuestas fue incluida explícitamente por primera vez como fuente de evidencias de validez en la última edición de los Standards for Educational and Psychological Testing. En este artículo, presentamos la teoría, la relación con otras fuentes de evidencias de validez, y los métodos disponibles para realizar estudios de validación cuyo objetivo sea obtener evidencias de validez sobre los procesos de respuesta. Método: una extensa revisión de la literatura junto con propuestas teóricas y prácticas. Resultados: el artículo aporta argumentos para determinar cuando la evidencia de validez basada en los procesos de respuesta es crítica para apoyar el uso del test para un objetivo particular, y ejemplos de cómo realizar un estudio de validación para obtener tales evidencias de validez. Conclusiones: hay métodos para obtener evidencias de validez basadas en los procesos de respuesta. Debe prestarse especial atención a los estudios de validación mediante el método de entrevista cognitiva por sus características y posibilidades. Futuros problemas de investigación plantean como combinar datos de métodos diferentes —cualitativos y cuantitativos—, para elaborar argumentos de validez que apoyen el uso del test para un objetivo particular.



Impact Factor JCR SSCI Clarivate 2023 = 3.2 (Q1) / CiteScore SCOPUS 2023 = 6.5 (Q1)