Background: During the 20th century the alpha coefficient (α) was widely used in the estimation of the internal consistency reliability of test scores. After misuses were identified in the early 21st century alternatives became widespread, especially the omega coefficient (ω). Nowadays, α is re-emerging as an acceptable option for reliability estimation. Method: A review of the recent academic contributions, journal publication habits and recommendations from normative texts was carried out to identify good practices in estimation of internal consistency reliability. Results: To guide the analysis, we propose a three-phase decision diagram, which includes item description, fit of the measurement model for the test, and choice of the reliability coefficient for test score(s). We also provide recommendations on the use of R, Jamovi, JASP, Mplus, SPSS and Stata software to perform the analysis. Conclusions: Both α and ω are suitable for items with approximately normal distributions and approximately unidimensional and congeneric measures without extreme factor loadings. When items show non-normal distributions, strong specific components, or correlated errors, variants of ω are more appropriate. Some require specific data gathering designs. On a practical level we recommend a critical approach when using the software.

Antecedentes: Durante el siglo XX el coeficiente alfa (α) fue ampliamente utilizado en el cálculo de la consistencia interna de las puntuaciones de los test. Después de identificar algunos malos usos, a principios del siglo XXI se difundieron alternativas, especialmente el coeficiente omega (ω). Actualmente α resurge como una opción aceptable. Método: Revisamos aportaciones académicas, hábitos de publicación en revistas y recomendaciones de textos normativos con el fin de identificar buenas prácticas en la estimación de la fiabilidad de consistencia interna. Resultados: Para guiar el análisis, proponemos un diagrama de decisión en tres fases, a saber, descripción de los ítems, ajuste del modelo de medida del test y elección del coeficiente de fiabilidad de las puntuaciones. Para su ejecución proporcionamos recomendaciones sobre el uso de los programas R, Jamovi, JASP, Mplus, SPSS y Stata. Conclusiones: Tanto α como ω son adecuados para ítems que se distribuyen de forma aproximadamente normal y medidas aproximadamente unidimensionales y congenéricas sin cargas factoriales extremas. Cuando los ítems tienen otra distribución, un fuerte componente específico o sus errores están correlacionados, resultan más adecuadas variantes de ω. Algunas de ellas requieren diseños específicos de obtención de datos. A nivel práctico recomendamos un uso crítico del software.

Background: Repeated measures designs are commonly used in health and social sciences research. Although there are other, more advanced, statistical analyses, the F-statistic of repeated measures analysis of variance (RM-ANOVA) remains the most widely used procedure for analyzing differences in means. The impact of the violation of normality has been extensively studied for between-subjects ANOVA, but this is not the case for RM-ANOVA. Therefore, studies that extensively and systematically analyze the robustness of RM-ANOVA under the violation of normality are needed. This paper reports the results of two simulation studies aimed at analyzing the Type I error and power of RM-ANOVA when the normality assumption is violated but sphericity is fulfilled. Method: Study 1 considered 20 distributions, both known and unknown, and we manipulated the number of repeated measures (3, 4, 6, and 8) and sample size (from 10 to 300). Study 2 involved unequal distributions in each repeated measure. The distributions analyzed represent slight, moderate, and severe deviation from normality. Results: Overall, the results show that the Type I error and power of the F-statistic are not altered by the violation of normality. Conclusions: RM-ANOVA is generally robust to non-normality when the sphericity assumption is met.

Antecedentes: El diseño de medidas repetidas es uno de los más usados en ciencias sociales y de la salud. Aunque hay otras alternativas más avanzadas, el análisis de varianza de medidas repetidas (ANOVA-MR) sigue siendo el procedimiento más empleado para analizar las diferencias de medias. El impacto de la violación de la normalidad ha sido muy estudiado en el ANOVA intersujeto, pero los estudios son muy escasos en el ANOVA-MR. Por ello, el objetivo de este trabajo es realizar dos estudios de simulación Monte Carlo para analizar el error de Tipo I y la potencia cuando se incumple este supuesto bajo el cumplimiento de la esfericidad. Método: El estudio 1 incluye 20 distribuciones, tanto conocidas como desconocidas, manipulando el número de medidas repetidas (3, 4, 6 y 8) y el tamaño muestral (de 10 a 300). El estudio 2 incluye diferentes distribuciones en cada medida repetida. Las distribuciones analizadas representan desviación leve, moderada y severa de la normalidad. Resultados: En general, los resultados muestran que tanto el error Tipo I como la potencia del estadístico F no se alteran con la violación de la normalidad. Conclusiones: El ANOVA-MR es generalmente robusto a la no normalidad cuando la esfericidad se satisface.

Background: Using a foreign language can influence emotion modulation, but whether different psychotherapy processes would be affected by a foreign language is still unclear. The current study explored the foreign language effect on the extinction of fear. Method: During the conditioning phase, part of the neutral stimuli presented to the participants were associated with a threat, while they performed a countdown task in their native language. In the extinction phase, participants performed the same task either in their native/foreign language and were informed that the threat would no longer appear. We collected self-reports of fear, and pupil dilation and electrodermal activity as physiological measures of arousal. Results: Extinction was successful, indicated by greater self-reported fear and pupil dilation during the threat condition compared to neutral in the conditioning phase, but no significant differences during extinction. Although the foreign language group presented higher arousal, fear extinction occurred regardless of the linguistic context. Conclusions: Fear extinction via verbal instructions is equally effective in a foreign and a native language context. These results indicate that evidence should be continue to be gathered on the role of foreign languages using basic paradigms with clinical applications.

Antecedentes: Usar un idioma extranjero puede influir la modulación de las emociones, pero no está claro si su uso podría influir diferentes procesos psicoterapéuticos. Este estudio explora el efecto de la lengua extranjera en la extinción del miedo. Método: Durante el condicionamiento, parte de los estímulos presentados se asociaron a amenaza, mientras los participantes realizaban una tarea de cuenta regresiva en un contexto de lengua nativa. En la fase de extinción, se realizó la misma tarea en su lengua nativa/extranjera, y se informó de que ya no habría amenaza. Se recogieron autoinformes de miedo, así como dilatación de pupila y actividad electrodérmica como medidas fisiológicas de excitación. Resultados: La extinción fue satisfactoria, como muestran una mayor dilatación pupilar y los autoinformes de miedo al comparar las condiciones de amenaza y neutral en la fase de condicionamiento, y no encontrar diferencias significativas durante la extinción. Aunque el grupo de lengua extranjera presentó una mayor excitación, la extinción del miedo ocurre independientemente del contexto lingüístico. Conclusiones: La extinción del miedo mediante instrucciones verbales es igualmente eficaz en contexto de lengua extranjera y nativa. Estos resultados invitan a seguir reuniendo pruebas sobre el papel de las lenguas extranjeras mediante paradigmas con aplicaciones clínicas.

Background: “Juego de Llaves” [Set of Keys] is a universal school-based prevention program for adolescents aged 12-15. It is aimed at reducing drug use and other addictive behaviors. This paper describes the full protocol for the evaluation design, instruments, randomization procedure, follow-ups, and primary outcomes. Method: Non-Randomized Control Cluster Trial in a set of Spanish secondary schools, with follow-ups at 12-, 24- and 36-months. Participants will be allocated to an experimental or control group. Using a digital application designed for the study, a battery of instruments will be used to assess addictive behaviors, sociodemographic variables, school climate and other transdiagnostic psychological variables. Results: A pilot test will be carried out to test the implementation protocol and to calculate the sample size needed for outcome evaluation. After implementing the program, longitudinal statistical approaches will be used to report intervention efficacy and potential moderators and mediators. Conclusions: There is a lack of assessments on the effectiveness of school prevention programs, and this paper is expected to improve monitoring and ongoing evaluation in prevention.

Introducción: “Juego de Llaves” es un programa de prevención escolar universal para adolescentes entre 12 y 15 años. Tiene como objetivo reducir el uso de drogas y la implicación en otras conductas adictivas. Se describe un protocolo completo del diseño de evaluación, los instrumentos, el procedimiento de aleatorización, los seguimientos y las variables de resultado. Método: ensayo por conglomerados no aleatorizado en centros escolares españoles de educación secundaria obligatoria con seguimientos a los 12, 24, y 36 meses. Los participantes serán asignados a un grupo experimental o control. A través de una app específicamente diseñada para este estudio, se utilizará una batería de instrumentos de evaluación para conductas adictivas, variables sociodemográficas, clima escolar y otras variables psicológicas transdiagnósticas. Resultados: Se realizará una aplicación piloto para probar el protocolo diseñado y calcular el tamaño muestral necesario para la evaluación de resultados. Posteriormente, se aplicará el programa y se realizarán análisis de datos de tipo longitudinal para informar de la eficacia de la intervención y de los posibles moderadores y mediadores. Conclusiones: Existen pocas evaluaciones de la efectividad de los programas de prevención escolar y se espera que este artículo contribuya, como modelo, a fomentar la cultura de la evaluación.

Background: The emergence of digital technology in the field of psychological and educational measurement and assessment broadens the traditional concept of pencil and paper tests. New assessment models built on the proliferation of smartphones, social networks and software developments are opening up new horizons in the field. Method: This study is divided into four sections, each discussing the benefits and limitations of a specific type of technology-based assessment: ambulatory assessment, social networks, gamification and forced-choice testing. Results: The latest developments are clearly relevant in the field of psychological and educational measurement and assessment. Among other benefits, they bring greater ecological validity to the assessment process and eliminate the bias associated with retrospective assessment. Conclusions: Some of these new approaches point to a multidisciplinary scenario with a tradition which has yet to be created. Psychometrics must secure a place in this new world by contributing sound expertise in the measurement of psychological variables. The challenges and debates facing the field of psychology as it incorporates these new approaches are also discussed.

Antecedentes: La irrupción de la tecnología digital en las áreas de medición y evaluación psicológica y educativa expande el concepto clásico de test de lápiz y papel. Los modelos de evaluación construidos sobre la ubicuidad de los smartphones, las redes sociales o el desarrollo del software abren nuevas posibilidades para la evaluación. Método: El estudio se organiza en cuatro partes en cada una de las cuales se discuten las ventajas y limitaciones de una aplicación de la tecnología a la evaluación: la evaluación ambulatoria, las redes sociales, la gamificación y las pruebas de elección forzosa. Resultados: Los nuevos desarrollos resultan claramente relevantes en el ámbito de la medición y la evaluación psicológica y educativa. Entre otras ventajas, aportan una mayor validez ecológica al proceso evaluativo y eliminan el sesgo relacionado con la evaluación retrospectiva. Conclusiones: Algunas de estas nuevas aproximaciones llevan a un escenario multidisciplinar con una tradición aún por construir. La psicometría está obligada a integrarse en este nuevo espacio aportando una sólida experiencia en la medición de variables psicológicas. Se muestran los temas de debate y retos que ha de abordar el buen quehacer de la psicología en la incorporación de estas nuevas aproximaciones.

Background: Although several studies have reported an increase in psychological problems during the COVID-19 pandemic, the impact of stressful life events on Spanish children and adolescents using a person-oriented statistical approach and the relationships between the profiles and emotional and behavioral symptoms have not yet been examined. The present study aims to identify profiles of Spanish children and adolescents, considering life-threatening stressful events during the COVID-19 pandemic. Method: Participants were 252 parents of children aged 3 to 15 years old who completed an online structured questionnaire that collected information about stressful life events related to the pandemic and its impact on their children’s welfare. Results: Through Latent Class Analysis (LCA), four profiles of children and adolescents were found according to the stressful events experienced: “COVID infection, social confinement,” “economic loss,” “reduced social contact“ and “parental stress,” with no significant age or gender differences. Reduction in social contact was the most prevalent stressor. Comparisons of psychological symptoms across latent classes were analyzed. Conclusions: The findings increase our understanding of how stressful life events during the COVID-19 situation impacted young people’s psychological welfare and highlight the need to promote strategies to prevent emotional problems during a pandemic considering the identified profiles.

Antecedentes: Aunque diversos estudios han informado sobre el aumento de problemas psicológicos durante la pandemia de COVID-19, hasta el momento no se ha examinado el impacto de los eventos vitales estresantes en niños y adolescentes mediante un enfoque estadístico orientado a la persona, y la relación entre los perfiles y los síntomas emocionales y conductuales. El presente estudio tiene como objetivo determinar perfiles identificativos de niños y adolescentes españoles, ante eventos estresantes de riesgo durante la pandemia. Método: Participaron 252 padres de niños de 3 a 15 años, quienes completaron un cuestionario estructurado online que recopiló información sobre eventos estresantes relacionados con la pandemia y sobre su impacto en el bienestar de sus hijos. Resultados: Mediante Análisis de Clases Latentes (LCA), se encontraron cuatro perfiles, según los eventos estresantes experimentados: “Infección por COVID, encierro social,” “pérdida económica,” “contacto social reducido” y “estrés de los padres,” sin diferencias significativas en las variables edad y género. La reducción del contacto social fue el estresor más prevalente. Se analizaron las comparaciones de síntomas psicológicos entre clases latentes. Conclusiones: Los hallazgos resaltan la necesidad de promover estrategias para prevenir problemas emocionales durante la pandemia.

Background: Experiencing psychological problems during childhood and adolescence is common. However, the detection of behaviors as symptoms of psychopathologies requiring clinical diagnosis and treatment remains low. In order to advance understanding of psychological phenomena and particularly their behavioral manifestations, new theoretical and methodological perspectives such as network analysis are applied. Method: In the present study, we explore the dynamics of the symptoms of different internalizing, externalizing, and personal-contextual problems using network analysis. We estimate networks of regularized partial correlations, including measures of standard centrality, and the global and structural impact of symptoms on each network. Results: The results show that the syndromes we studied are activated through dynamics of symptoms that are strongly related to each other and act as intermediaries of potential psychopathological problems in children and adolescents (e.g., “feels sad,” “worries,” “won’t talk,” “nausea,” “threatens others,” “steals outside”). Centrality measures and impact coefficient ranges were strength (−2.39, 2.05), betweenness (−1.43, 3.38), closeness (−2.60, 2.23), and expected influence (−2.87, 2.13). Conclusions: The results suggest the need to explore attribute dynamics as well as symptomatic comorbidity between them.

Antecedentes: La experiencia de problemas psicológicos durante la infancia y la adolescencia es común. Sin embargo, la detección de conductas como síntomas de Psicopatologías que requieren diagnóstico y tratamiento clínico sigue siendo infravalorada. Por ello, para evolucionar en la comprensión de los fenómenos psicológicos considerando sus manifestaciones conductuales particulares, se aplican nuevas perspectivas teóricas y metodológicas como el análisis de redes. Método: En el presente estudio exploramos la dinámica de los síntomas de diferentes problemas internalizados y externalizados y personales-contextuales aplicando el análisis de redes. Se estimaron redes de correlaciones parciales regularizadas que incluye medidas de centralidad estándar e impacto global y estructural de los síntomas de distintos síndromes. Resultados: Los resultados muestran que los síndromes se activan a través de dinámicas de síntomas fuertemente relacionados con los demás y que actúan como intermediarios de potenciales problemas psicopatológicos en niños y adolescentes (por ejemplo, “sentirse triste”, “preocuparse”, “negarse a hablar”, “tener náuseas”, “amenazar a los demás”, “robar fuera”). Las medidas de centralidad y coeficientes de impacto oscilaron entre: fuerza (−2.39, 2.05), intermediación (−1.43, 3.38), cercanía (−2.60, 2.23) e influencia esperada (−2.87, 2.13). Conclusiones: Los resultados obtenidos sugieren la necesidad de explorar la dinámica multiconstructo, así como la comorbilidad sintomática entre ellas.

Background: Suicidal behavior, especially in young populations such as university students, is currently one of the most concerning health problems worldwide, suicide being the second leading cause of death among students. Although literature is still scarce, one of the risk factors that correlates the most with suicidal behavior in young people appears to be problematic internet use (PIU). The aim of this study was to investigate the relationship between PIU and suicidal behavior in a Spanish university population. Method: An ex post facto prospective design was used with a sample of 1,386 Spanish university students (68.7% women and 31.3% men). PIU was assessed by means of the Internet Addiction Test (IAT) and psychological problems by means of the Clinical Outcomes in Routine Evaluation-Outcome Measure (CORE-OM). Results: The results confirm the relationship between PIU and suicidal behavior, principally alongside those of social isolation and depression, this risk being 3.78 times higher among women with PIU and 5.58 times higher in men. Conclusions: PIU appears as a risk factor for suicidal behavior that must be taken into account together with social isolation, subjective distress and depression.

Antecedentes: La conducta suicida, sobre todo en población joven como la universitaria, es actualmente uno de los problemas de salud que más preocupa a nivel mundial, siendo el suicidio la segunda causa de muerte en esta población. Aunque la literatura aún es escasa, parece que el uso problemático de Internet (UPI) se muestra como uno de los factores de riesgo que más correlaciona con la conducta suicida en jóvenes. El objetivo de esta investigación es estudiar la relación entre el UPI y la conducta suicida en población universitaria española. Método: Se utilizó un diseño prospectivo ex post facto con una muestra universitaria española de 1,386 (68.7% mujeres y 31.3% hombres), evaluando el UPI mediante el Internet Addiction Test (IAT) y los problemas psicológicos mediante el Clinical Outcomes in Routine Evaluation-Outcome Measure (CORE-OM). Resultados: Los resultados obtenidos confirman la relación existente entre el UPI y la conducta suicida, en relación también con el aislamiento social y la depresión principalmente, siendo este riesgo 3.78 veces mayor entre las mujeres con UPI y de 5.58 en hombres. Conclusiones: El UPI se presenta como un factor de riesgo para el suicido a tener en cuenta junto con el aislamiento social, la angustia subjetiva y la depresión.

Background: Deficits in information processing, sustained attention and social cognition have important implications for the daily functioning of people with schizophrenia. The present study analyzed the relationship between processing speed, sustained attention, social cognition, and functioning in clinically stable people with schizophrenia. Method: Ninety people with schizophrenia and 100 healthy controls completed a battery of measures to assess clinical symptoms, processing speed, sustained attention, social cognition, and functioning. GLMMs and SEM were used to assess the relationships between these variables. Results: People with schizophrenia had impaired performance in all cognitive outcomes compared to healthy controls. Processing speed and sustained attention, together in a latent variable, had a strong effect on functioning (Beta = 0.32; p < .05). However, social cognition had also a strong effect on functioning (Beta = 0.29; p <.001) in the mediation model, which exhibited better indices of fit than the model including neurocognition alone (e.g. RMSEA_basic = 0.131 and RMSEA_mediator = 0.054). Conclusions: The mediating effect of social cognition on the relationship between processing speed, sustained attention, and functioning in people with schizophrenia suggests the importance of including both domains of neurocognition along with social cognition as treatment targets in rehabilitation interventions to optimize improvements in functioning in schizophrenia.

Antecedentes: Los déficits en el procesamiento de la información, la atención sostenida y la cognición social tienen implicaciones importantes para el funcionamiento diario de las personas con esquizofrenia. El presente estudio analizó la relación entre velocidad de procesamiento, atención sostenida, cognición social y funcionamiento en personas clínicamente estables con esquizofrenia. Método: Noventa personas con esquizofrenia y 100 controles sanos completaron una batería de pruebas para evaluar síntomas clínicos, velocidad de procesamiento, atención sostenida, cognición social y funcionamiento. Se utilizaron GLMM y SEM para evaluar las relaciones entre variables. Resultados: Las personas con esquizofrenia tuvieron un peor rendimiento en todos los resultados cognitivos. La velocidad de procesamiento y la atención sostenida, juntas en una variable latente, tuvieron un fuerte efecto sobre el funcionamiento (Beta = 0,32; p < 0,05). La cognición social también tuvo un fuerte efecto sobre el funcionamiento (Beta = 0,29; p < 0,001) en el modelo de mediación, que mostró mejores índices de ajuste que el modelo que incluía solo neurocognición (e.g. RMSEA_basic = 0.131 y RMSEA_mediator = 0.054). Conclusiones: El efecto mediador de la cognición social sobre la relación entre la velocidad de procesamiento, la atención sostenida y el funcionamiento sugiere la importancia de incluir ambos dominios junto con la cognición social como objetivos de tratamiento en las intervenciones de rehabilitación.

Background: The COVID-19 pandemic has changed the way organizations operate, forcing many of them to opt for remote-working as an alternative to the face-to-face mode. This global phenomenon has increased the importance of studying the psychosocial risks linked to the use of Information and Communication Technologies (ICTs), such as technostress. This study aims to provide validity evidence for the Technostress Creators Scale in Spain and to test its measurement invariance in terms of gender. Method: We analyzed the psychometric properties of the scale, its factor solution, and gender invariance in a sample of 931 employees from Spain. Results: The Exploratory Factor Analysis (EFA) showed that the Spanish version maintained the five factors from the original version: techno-overload, techno-invasion, techno-complexity, techno-insecurity, and techno-uncertainty. The instrument demonstrated adequate reliability. The results of the Confirmatory Factor Analysis (CFA) also replicated the five-factor structure of the English version. Additionally, measurement invariance tests indicated differences between genders. Conclusions: The resulting Spanish scale has 18 items, which is shorter than the original version. The implications and limitations of the Spanish version of the instrument are detailed in the discussion.

Antecedentes: La pandemia por COVID-19 ha cambiado la forma en que funcionan las organizaciones, obligando a optar por el teletrabajo como alternativa a la modalidad presencial. Este fenómeno ha mostrado la importancia de estudiar los riesgos psicosociales vinculados al uso de las Tecnologías de la Información y la Comunicación (TIC), como el tecnoestrés. Este estudio tiene como objetivo proporcionar evidencia de validez de la Technostress Creators Scale en España y analizar su invariancia en términos de género. Método: Analizamos propiedades psicométricas de la escala, solución factorial e invariancia de género en una muestra de 931 empleados de España. Resultados: El Análisis Factorial Exploratorio (AFE) de la versión en español mantuvo los cinco factores de la versión original: tecno-sobrecarga, tecno-invasión, tecno-complejidad, tecno-inseguridad y tecno-incertidumbre. Asimismo, las dimensiones demostraron una adecuada fiabilidad. En cuanto a los resultados del Análisis Factorial Confirmatorio (AFC), la estructura de cinco factores de la versión en inglés fue replicada. Por otra parte, el análisis de la invarianza de género arrojó diferencias entre los grupos. Conclusiones: La escala resultante cuenta con 18 ítems, siendo más corta que la versión original. En la discusión se detallan las implicaciones y limitaciones de la validación en español de este instrumento.