RESUMO

O Exame Nacional do Ensino Médio (ENEM) possui um modelo de medida restrito, caracterizado pelo postulado de que os itens marcadores de cada domínio se vinculam exclusivamente ao seus domínios-alvo. Estudos pregressos sugerem, por meio de evidências indiretas, que esse modelo não seria válido. No entanto, esse postulado ainda não foi diretamente avaliado. Neste estudo, investiga-se esse pressuposto por meio de análises fatoriais dos itens do ENEM de 2011. Dois modelos foram testados. O primeiro, chamado de estrutura simples de Thurstone, representa o modelo de medida do ENEM. O segundo, de cargas cruzadas, refuta esse modelo. O modelo das cargas cruzadas foi o único que apresentou bom ajuste aos dados de acordo com todos os índices empregados. As evidências encontradas são desfavoráveis ao postulado de cargas fatoriais simples do modelo de medida do ENEM, indicando problemas de validade e na qualidade dos escores produzidos. (AU)

The National High School Examination (ENEM) has a restricted measurement model characterized by the assumption that the marker items in each domain are exclusively linked to their target domain. Previous studies suggest, through indirect evidence, that this model may not be valid. However, this postulate has not yet been directly assessed. In this study, this assumption was investigated through factor analysis of the items of the ENEM 2011 edition. Two models were tested. The first, called Thurstone's simple structure, represents the measurement model of the ENEM. The second, of crossed loadings, refute this model. The crossed loadings model was the only one that presented a good fit to the data according to all the indices employed. The evidence found is unfavorable for the assumption of simple factor loadings of the measurement model of the ENEM, indicating issues of validity and in the quality of the scores produced. (AU)

El Examen Nacional de Enseñanza Secundaria (ENEM) tiene un modelo de medición restringido, caracterizado por el postulado de que los ítems marcadores en cada dominio están vinculados exclusivamente a su dominio objetivo. Estudios previos sugieren, a través de evidencia indirecta, que este modelo no sería válido. Sin embargo, este postulado aún no ha sido evaluado directamente. En este estudio se investiga este supuesto a través del análisis factorial de los ítems del ENEM 2011. Se probaron dos modelos. El primero, llamado estructura simple de Thurstone, representa el modelo de medición ENEM. El segundo, de cargas cruzadas, refuta este modelo. El modelo de carga cruzada fue el único que presentó un buen ajuste a los datos de acuerdo con todos los índices empleados. Las evidencias encontradas son desfavorables al supuesto de cargas factoriales simples del modelo de medición del ENEM, lo que indica problemas de validez y en la calidad de las puntuaciones producidas. (AU)

Assuntos

RESUMO

In the 1930s, a group of scientists argued that the empirical concatenation of observable elements was not possible in the human and social sciences and was, thus, not feasible to obtain objective measurements similar to those found in physics. To address this issue, mathematical theories that do not require concatenation were proposed in the 1960s, including the Additive Conjoint Measurement Theory (ACMT). In the same decade, George Rasch developed the simple logistic model for dichotomous data as a probabilistic operationalization of the ACMT. This study investigates the possibility of developing a fundamental measure for the National Exam of Upper Secondary Education (ENEM) that applies Rasch's model to students' performance on the 2011 ENEM exam. The results indicate an adequate model fit, demonstrating the viability of a fundamental measure using ENEM data. Implications are discussed.

Nos anos 1930, um grupo de cientistas argumentou que a concatenação empírica de elementos observáveis não seria possível nas Ciências Humanas e Sociais e por isso era inviável obter medidas verdadeiras nesses campos do conhecimento científico. Para lidar com este problema, foram propostas teorias matemáticas nas quais a concatenação empírica não seria necessária, como a Teoria de Medidas Aditivas Conjuntas (TMAC). No mesmo período, George Rasch desenvolveu o modelo logístico simples para dados dicotômicos, uma operacionalização probabilística da TMAC que viabiliza a análise empírica de pressupostos da medida verdadeira. Em nosso estudo, investigamos o desenvolvimento de uma medida verdadeira para o Exame Nacional do Ensino Médio (ENEM), aplicando o modelo logístico simples em dados referentes à performance dos participantes da edição de 2011 do ENEM. Os resultados indicaram um ajuste adequado do modelo, apontando para a viabilidade da construção de uma medida verdadeira para o ENEM. Implicações são discutidas.

En los años 1930, un grupo de científicos argumentó que la concatenación empírica de elementos observables no sería posible en Ciencias Humanas y Sociales y por consiguiente sería inviable obtener medidas verdaderas similares a las de Física. Para abordar este problema, a partir de los años 1960 se proponían teorías en las cuales la concatenación empírica no es necesaria, como la Teoría de Medidas Aditivas Conjuntas (TMAC). Al mismo período, George Rasch desarrolló el modelo logístico simple para datos dicotómicos, una operacionalización probabilista de la TMAC. Este estudio investigó la posibilidad de desarrollar una medida verdadera para el Examen Nacional de la Secundaria Superior (ENEM), aplicando el modelo logístico simple en los datos referentes a la performance de los participantes en la prueba de 2011 del ENEM. Los resultados indicaron adecuado ajuste del modelo, asi como la viabilidad de una medida verdadera para el ENEM. Implicaciones son discutidas.

Assuntos

RESUMO

Este estudo objetivou identificar as propriedades da escala de satisfação no trabalho mais utilizada em amostras brasileiras em termos de sua estrutura, invariância da medida e validade convergente. Participaram da pesquisa 733 trabalhadores (46% mulheres) do setor industrial e terciário de dois estados brasileiros. Além do modelo original de cinco fatores correlacionados, foram comparados três modelos estruturais alternativos (cinco fatores não correlacionados, hierárquico e bifatorial). Os resultados apontam que a estrutura bifatorial com cinco variáveis latentes de primeiro nível mais uma variável geral também de primeiro nível é um modelo estrutural robusto para avaliar a satisfação de trabalhadores brasileiros e foi invariante para todos os grupos testados, tendo a possibilidade de aplicação em amostras com diversidade em termos de tempo de trabalho, grau de escolaridade e sexo. A medida também apresentou correlação positiva de moderada a elevada com outras duas variáveis do comportamento organizacional, confirmando a validade convergente. (AU)

This study aimed to identify the properties of the job satisfaction scale most used in Brazilian samples in terms of its structure, convergent validity and measure invariance. The study involved 733 workers (46% women) from the industrial and tertiary sectors of two Brazilian states. In addition to the original model of five correlated factors, three alternative structural models were compared (five uncorrelated factors, hierarchical and bifactorial). The results show that the bifactorial structure, with five latent variables of the first level plus a general variable also of the first level, is a robust structural model to evaluate the satisfaction of Brazilian workers and was invariant for all groups tested, with the possibility of application in samples with different work times, levels of education and gender. The measure also showed a positive moderate to high correlation with the other two variables of organizational behavior confirming the convergent validity. (AU)

Este estudio tuvo como objetivo identificar las propiedades de la escala de satisfacción laboral más utilizada en muestras brasileñas en términos de su estructura, validez convergente e invarianza de medida. Participaron de la encuesta 733 trabajadores (46% mujeres) de los sectores industrial y terciario de dos provincias brasileñas. Además del modelo original de cinco factores correlacionados, se compararon tres modelos estructurales alternativos (cinco factores no correlacionados, jerárquico y el de dos factores). Los resultados demuestran que, la estructura de dos factores con cinco variables latentes del primer nivel más una variable general, también del primer nivel, es un modelo estructural robusto para evaluar la satisfacción laboral de los trabajadores brasileños y fue invariante para todos los grupos evaluados, con la posibilidad de aplicación en muestras con diferentes tiempos de trabajo, escolaridad y género. La medida también presentó correlación positiva, de moderada a elevada, con otras dos variables del comportamiento organizacional, lo que confirma la validez convergente. (AU)

Assuntos

RESUMO

This paper reports the results from a 3-year follow-up study to measure the long-term efficacy of a cognitive training for healthy older adults and investigates the effects of booster sessions using an entropy-based metric. DESIGN: semi-randomized quasi-experimental controlled design. PARTICIPANTS: 50 older adults, (M = 73.3, SD = 7.77) assigned into experimental (N = 25; Mean age = 73.9; SD = 8.62) and control groups (N = 25; mean age = 72.9; SD = 6.97). INSTRUMENTS: six subtests of WAIS and two episodic memory tasks. PROCEDURES: the participants were assessed on four occasions: after the end of the original intervention, pre-booster sessions (three years after the original intervention), immediately after the booster sessions and three months after the booster sessions. RESULTS: the repeated measures ANOVA showed that two of the cognitive gains reported in the original intervention were also identified in the follow-up: Coding (F(1, 44) = 11.79, MSE = 0.77, p = .001, eta squared = 0.084) and Picture Completion (F(1, 47) = 10.01, MSE = 0.73, p = .003, eta squared = 0.060). After the booster sessions, all variables presented a significant interaction between group and time favorable to the experimental group (moderate to high effect sizes). To compare the level of cohesion of the cognitive variables between the groups, an entropy-based metric was used. The experimental group presented a lower level of cohesion on three of the four measurement occasions, suggesting a differential impact of the intervention with immediate and short-term effects, but without long-term effects.

Assuntos

RESUMO

O Exame Nacional do Ensino Médio (Enem) gera uma pontuação para cada domínio que avalia: matemática, linguagens, ciências da natureza e ciências humanas. Reconhecendo a relevância do exame no acesso ao ensino superior e em outros aspectos da vida prática do estudante brasileiro, o presente estudo investiga a fidedignidade dos escores do Enem nos seus quatro domínios. Utilizou-se como amostra os escores dos estudantes que participaram da edição de 2011 do exame. As análises envolveram a estimação dos parâmetros de um modelo de quatro fatores correlacionados e de um modelo bifatorial por meio de análise fatorial confirmatória, além da estimação da fidedignidade composta e da fidedignidade omega dos quatro domínios e do fator geral de desempenho, no caso do modelo bifatorial. Utilizou-se como variáveis observáveis as 30 competências de cada domínio. Os resultados indicaram alta fidedignidade apenas para os escores provenientes do fator geral

The National Exam of Upper Secondary Education (ENEM) generates a score for each domains it assess: mathematics, languages, natural sciences, and humanities. Considering the relevance of the Exam in the access to higher education and in other practical aspects of Brazilian students' life, the present study investigates the reliability of the scores from the four domains. We used as a sample the scores of the students who participated in the 2011 edition of the Exam. The analyzes involved the estimation of the parameters of an oblique four-factor model and a bifactor model using confirmatory factor analysis, as well as the estimation of composite and omega reliability of the four domains and the general performance factor, in the case of the bifactor model. We used the 30 competences of each domain as observable variables. The results indicated high reliability only for the scores from the general factor

El Examen Nacional de la Secundaria Superior (ENEM) genera un puntaje para cada dominio que evalúa: matemática, lenguage, ciencias naturales y humanidades. Puesta la relevancia del Examen en el acceso a la educación superior y en otros aspectos prácticos de la vida de los estudiantes brasileños, el presente estudio investiga la fiabilidad de los puntajes de los cuatro dominios. Usamos como muestra los puntajes de los estudiantes que participaron en la edición 2011 del Examen. Los análisis incluyeron la estimación de los parámetros de un modelo oblicuo de cuatro factores y un modelo bifactorial utilizando análisis factorial confirmatorio, así como la estimación de la confiabilidad compuesta y omega de los cuatro dominios y el factor de desempeño general, en el caso del modelo bifactor. Usamos las 30 competencias de cada dominio como variables observables. Los resultados indicaron una alta fiabilidad solo para los puntajes del factor general

Assuntos

RESUMO

Os estudos sobre variáveis exclusivamente femininas são raros na literatura nacional. O presente estudo teve como objetivo identificar evidências de validade da Escala de Síndrome Pré-menstrual (ESPm). O instrumento foi construído a partir de descrições de sintomas comumente relatados na literatura especializada e passou pelo crivo de juízes que avaliaram os itens e fatores propostos. Posteriormente, o instrumento foi aplicado em 391 trabalhadoras, por meio de um link disponibilizado virtualmente. Os indicadores de validade foram identificados, a partir da análise fatorial confirmatória, onde a melhor adequação foi apresentada por um modelo bifatorial, com menor qui-quadrado, menos graus de liberdade, além de um RMSEA de 0,04 e um CFI de 0,98. Os dois fatores que compõem a escala final (fator emocional e fator físico) contém ao todo 38 itens. (AU)

Studies on exclusively female variables are rare in national literature. The present study aimed at a preliminary validation of the Premenstrual Syndrome Scale (PmSS). The instrument was elaborated based on proposals from nursing and nutrition specialists and was reviewed by judges who evaluated the proposed items and factors. Subsequently, the instrument was applied to 391 workers through a virtual link. The validity indicators were identified from the confirmatory factor analysis, where the best fit was presented by a two-factor model, with a lower chi-square, fewer degrees of freedom, in addition to a RMSEA of 0.04 and an CFI of 0.98. The two factors that make up the final scale (emotional factor and physical factor) contain a total of 38 items. (AU)

Los estudios sobre variables exclusivamente femeninas, no son muy frecuentes em la literatura nacional. El presente estudio, tuvo como objetivo realizar una validación preliminar de la Escala de Síndrome Pre-menstrual (ESPm). El instrumento fue construído a partir de propuestas provenientes de la enfermería y nutrición y pasó por eltamiz de jueces que evaluaron los ítems y factores propuestos. Posteriormente, el instrumento fue aplicado a 391 trabajadoras, a través de um link disponibilizado virtualmente. Los indicadores de validez fueron identificados, a partir de análisis factorial confirmatorio, donde la mejor adecuación fue presentada por un modelo bifactorial, con menor qui-cuadrado, menos grados de libertad, además de un RMSEA de 0,04 y un CFI de 0,98. Los dos factores que componenla escala final (factor emocional y factor físico) contienenen total 38 ítems. (AU)

Assuntos

RESUMO

The purpose of this study was to determine the immediate effects of cognitive training on healthy older adults and verify the transfer effects of targeted and non-targeted abilities. The design consisted of a semi-randomized clinical controlled trial. The final sample was composed of 80 volunteers recruited from a Brazilian community (mean age = 69.69; SD = 7.44), which were separated into an intervention group (N = 47; mean age = 69.66, SD = 7.51) and a control group (N = 33; mean age = 69.73, SD = 7.45). Intervention was characterized by adaptive cognitive training with 12 individual training sessions of 60 to 90 minutes (once a week). Eight instruments were used to assess effects of cognitive training. Five were used to assess trained abilities (near effects), including: Memorization Tests (List and History), Picture Completion, Digit Span, Digit Symbol-Coding, and Symbol Search (the last four from WAIS-III). Two instruments assessed untrained abilities (far effects): Arithmetic and Matrix Reasoning (WAIS-III). The non-parametric repeated measures ANOVA test revealed a significant interaction between group by time interaction for Picture Completion [F(74) = 14.88, p = .0002, d = 0.90, CLES = 73.69%], Digit Symbol-Coding [F(74) = 5.66, p = .019, d = 0.55, CLES = 65.21%] and Digit Span [F(74) = 5.38, p = .02, d = 0.54, CLES = 64.85%], suggesting an interventional impact on these performance tasks. The results supported near transfer effects, but did not demonstrate a far transfer effects.

Assuntos

RESUMO

O presente artigo objetiva reportar os resultados de dois estudos de validade conduzidos em um treino cognitivo para idosos. O modelo teórico adotado para a intervenção previu a estimulação de cinco habilidades cognitivas. Um estudo de validade de conteúdo foi conduzido por meio de uma análise de juízes com um grupo de 16 especialistas na área. Os resultados apontaram para uma baixa concordância entre os avaliadores (índice Fleiss Kappa=0,11; -0,02

The present article reports the results of two validity studies conducted in a cognitive training session for the elderly. The theoretical model adopted for the intervention predicted the stimulation of five cognitive abilities. A content validity study was conducted through a panel of judges including 16 experts in the field. The results pointed to a low agreement between the evaluators (Fleiss Kappa index=0.11; -0.02

Este artículo tuvo como objetivo informar los resultados de dos estudios de validez realizados en un entrenamiento cognitivo para ancianos. El modelo teórico adoptado para la intervención previó la estimulación de cinco habilidades cognitivas. Se realizó un estudio de validez de contenido que fue conducido por medio de un análisis de jueces con un grupo de 16 especialistas en el área. Los resultados mostraron baja concordancia entre los evaluadores (índice FleissKappa=0,11; -0,02

Assuntos

RESUMO

O ciúme romântico é caracterizado como reações exibidas diante da ameaça de perda de um parceiro romântico para um possível rival. Este estudo teve como objetivo revisar os itens do Inventário de Ciúme Romântico (ICR), visando melhorar sua compreensão e testar seu funcionamento em uma amostra da Bahia. Buscou-se verificar evidências de validade da versão modificada do ICR com base na estrutura interna via análise fatorial confirmatória e modelo de Rasch, a partir de dados de 400 participantes de 18 a 76 anos (M=29,96; DP=11,73), sendo 62% do sexo feminino. Verificou-se o impacto de características individuais na severidade do ciúme romântico. Os dados encontrados corroboram a literatura na área, indicando que o ciúme romântico é composto por diversos fatores, além de um fator geral, o que é refletido também na versão presentemente revisada do ICR. Além disso, outras questões específicas do construto são discutidas no artigo.(AU)

Romantic jealousy relates to a series of reactions when facing the threat of loss of a romantic partner to a possible rival. This study aimed to review the items of the Romantic Jealousy Inventory (ICR), in order to improve the their understandability and test its functioning in a sample from Bahia. It sought to verify internal validity evidences via confirmatory factor analysis and the Rasch model. We also looked for the impact of individual features on the severity of romantic jealousy. Therefore, the ICR was applied to 400 participants aged between 18 and 76 years (M=29.96; SD=11.73), and 62% were female. The data corroborate the literature on the matter, indicating that romantic jealousy is composed of several factors, which is also reflected in the currently revised version of the ICR. In addition, other specific construct questions are discussed in the article.(AU)

Celos románticos se refiere a una serie de reacciones cuando se enfrentan a la amenaza de la pérdida de una pareja romántica para un posible rival. Este estudio tuvo como objetivo revisar los artículos del Inventario Romántica los Celos (ICR), con el fin de mejorar la comprensibilidad artículos y probar su funcionamiento en una muestra de Bahía. Se trató de verificar las evidencias de validez interna a través de análisis factorial confirmatorio y el modelo de Rasch. También nos fijamos en el impacto de las características individuales de la gravedad de celos románticos. Por lo tanto, el ICR se aplicó a 400 participantes de edades comprendidas entre 18 y 76 años (M=29,96; SD=11,73), y el 62% eran mujeres. Los datos corroboran la literatura en la zona, lo que indica que los celos románticos se compone de varios factores, que también se refleja en la versión revisada actualmente ICR. Además, otras preguntas constructo específico se discuten en el artículo.(AU)

Assuntos

RESUMO

The intra-individual approach has been proposed by researchers as an alternative to traditional techniques focused on the population level. The central argument is that the inter-individual procedures are appropriate to estimate the population variance but cannot be extrapolated to the individual level. Evidence shows that the factorial structure of intelligence and personality psychometric models usually verified in the population (e.g. Carrol’s three strata factor structure and the Big Five Personality model) are not necessarily found at the individual level. However, the factor analysis in the intra-individual approach has an additional challenge in comparison to the traditional factor analysis: until the present moment there are no fit indices available to the intra-individual factor techniques. The current paper proposes the use of a set of approaches to find the adequate factor retention as a triangulation of data. The proposition will be applied in the psychometric intelligence field...

A abordagem intraindividual foi proposta por autores como uma alternativa para medir o nível do indíviduo em vez de medir o nível da população. O argumento central é que as evidências interindividuais são apropriadas para estimar a variância da população, mas não podem ser extrapoladas para o nível do indivíduo. Evidências mostram que a estrutura fatorial de modelos psicométricos da inteligência e personalidade não estão necessariamente presentes no nível individual. Entretanto, a análise fatorial na abordagem intraindividual tem um desafio adicional em relação à análise fatorial tradicional. Até o presente momento, a análise fatorial intraindividual não possui índices de ajuste aos dados. Este artigo propõe o uso de um conjunto de abordagens para obter a retenção adequada de fatores, enquanto triangulação de dados. A proposição será aplicada no campo psicométrico da inteligência...

El enfoque intraindividual fue propuesta por los cientificos como una alternativa para medir el nivel de la persona, en lugar de medir el nivel de la población. El argumento central es que la evidencia interindividual es apropiado para la estimación de la varianza de la población, pero no se puede extrapolar al nivel del individuo. Las evidencias muestran que la estructura factorial de modelos psicométricas de inteligencia y personalidad no están presentes necesariamente en el plano individual. Sin embargo, el análisis de los factores en el enfoque intraindividual tiene un desafío adicional en comparación con el análisis tradicional de los factores. Hasta la fecha, el análisis intra-individual no presenta índices de ajuste a los datos. En este artículo se propone el uso de un número de enfoques para retención de factores, como uma triangulación de datos. La propuesta se aplicará en el ámbito de investigación de la inteligência...

Assuntos