Comparative analysis of full and reduced versions of Competence Scale Study using Rasch with brazilian college students

Article Sidebar

Revista de Estudios e Investigación en Psicología y Educación, Volume 1, Number 1.
PDF (Português)
Published: Jul 1, 2014

Main Article Content

  • Maria Cristina Joly+−
  • Dario Cecilio-Fernandes
  • Anelise S. Dias
  • Sandra M. da S. S. Oliveira
  • Maria Inês Bustamante
  • Ana Cristina Ávila-Batista
  • Leandro S. Almeida
  • Alexandra M. Araújo
  • Silvia C. Monteiro
Maria Cristina Joly
Universidade de Brasília
Brazil
Dario Cecilio-Fernandes
Brazil
Anelise S. Dias
Sandra M. da S. S. Oliveira
Maria Inês Bustamante
Ana Cristina Ávila-Batista
Leandro S. Almeida
Alexandra M. Araújo
Silvia C. Monteiro
Vol. 1 No. 1 (2014), Articles, pages 35-43
DOI: https://doi.org/10.17979/reipe.2014.1.1.20
Submitted: Jul 16, 2014 Accepted: Jul 16, 2014 Published: Jul 1, 2014
How to Cite

Abstract

The aim of this study was to compare the original version of Escala de Competência de Estudo – ECE (C&T), with the reduced one by using the Item Response Theory. A sample of 126 college students, male and female, between 17 and 48 years old (M = 24.65, SD = 6.54) answered the test. The precision coefficients obtained were .91 for the original scale and .90 for the reduced one, indicating a good level of precision for both. The scale’s adjustment to the Rasch Model was analyzed, resulting an average error of 0.11 (SD = 0.02). The scale with 54 items presents an item’s infit mean of 1.00 (SD = .18), and the reduced scale presents an item’s infit mean of 1.01 (SD = .20), and the outfit’s mean value is 1,02 (SD = 0.41). The difficulty of the items was similar in the two scales. The results presented a better adjustment for the reduced scale, seeing that there were less misfit items, in terms of quantity and value.

Keywords:

study skills, psychological assessment, Item Response Theory

Downloads

Download data is not yet available.

Article Details

References

Almeida, L. S. (2007). Transição, adaptação académica e êxito escolar no Ensino Superior. Revista Galego-Portuguesa de Psicoloxía e Educación, 14 (1), 203-215.

Almeida, L. S. (2011). Prefácio. In R. A. M. Ambiel, I. S. Rabelo, S. V. Pacanaro, G. A. S. Alves, & I. F. A. S. Leme. (Orgs.). Avaliação psicológica: Guia de estudantes e profissionais de psicologia (7-10). São Paulo: Casa do Psicólogo.

Almeida, L. S., & Joly, M. C. R. A. (2009). Construção de instrumentos para Ensino Superior: Estudos em Portugal/Brasil/Espanha/Moçambique. Pesquisa Transcultural em desenvolvimento. Universidade do Minho (Portugal)/ Universidade São Francisco (Brasil).

Almeida, L. S., & Joly, M. C. R. A. (2013). Construção da Escala de Competência de Estudo para Ciências e Tecnologia. Pesquisa Transcultural em desenvolvimento. Universidade do Minho (Portugal) / Universidade de Brasília (Brasil).

Almeida, L. S., Soares, A. P., Guisande, A., & Paisana, J. (2007). Rendimento académico no ensino superior: estudo com alunos do 1o ano. Revista Galego-Portuguesa de Psicoloxía e Educación, 14(1), 209-223.

Anastasi, A., & Urbina, S. (2000). Testagem psicológica. Porto Alegre: Artes Médicas.

Andrade, D. F., Tavares, H. R., & Valle R. C. (2000). Teoria da resposta ao item: Conceitos e aplicações. ABE - Associação Brasileira de Estatística, 4º SINAPE.

Andrade, J. M., Laros, J. A., & Gouveia, V. V. (2010). O uso da teoria de resposta ao item em avaliações educacionais: Diretrizes para pesquisadores. Avaliação Psicológica, 9(2), 421-435.

Bandura, A. (2001). Social cognitive theory: An agentic perspective. Annual Reviews Psychologist, 52 (1), 2-18. http://dx.doi.org/10.1146/annurev.psych.52.1.1

Birnbaum, A. (1968). Some latent trait models and their use in inferring an examinee’s ability. In F. M. Lord, & M. R. Novick, Statistical theories of mental test scores (pp.38-57) Reading, MA: Addison-Wesley.

Bock, R. D., & Zimowski, M. F. (1997). Multiple group IRT. In W. J. V. Linder, & R. K. Hambleton (Eds.), Handbook of modern item response theory (433-448). New York: Spring-Verlag.

Credé, M., & Kuncel, N. (2008). Study habits, skills, and attitudes: The pillar supporting collegiate academic performance. Perspectives on Psychological Science, 3(6), 425-453. http://dx.doi.org/10.1111/j.1745-6924.2008.00089.x

Cueto, E. G. (1993). Introducción a la psicometría. Madrid: Siglo XXI.

Embretson, S. E, & Hershberger, S. L. (1999). The new rules of measurement: What every psychologist and educator should know. New Jersey: Lawrence Erlbaum

Fraga, H. M., Lozano, A. B., & Rioboo, A. M. P. (2007). Autoconceito e procesos de aprendizaxe no alunado de formacion profesional da Galiza. Revista Galego-Portuguesa de Psicoloxía e Educación, 14(1), 181-193.

Freire, L. (2009). Concepções e abordagens sobre a aprendizagem: A construção do conhecimento através da experiência dos alunos. Ciências & Cognição, 14(2), 162-168.

Hogam, T. P. (2004). Pruebas psicológicas: Una introducción prática. México: Manual Moderno.

Linacre, J. M. (2002). What do infit and outfit, mean-squared and standardized mean? Rasch Measurement Transactions, 16 (2), 878. Recuperado em 25 outubro, 2011, de http://209.238.26.90/rmt/rmt82a.htm

Lord, F. M. (1952). A theory of test scores. Psychometric Monograph, 7.

Mislevy, R. J., & Bock, R. D. (1984). BILOC, Maximum likelihood item analysis and test scoring: Logistic model. Scientific software, Inc. Mooresville, IN.

Pasquali, L. (2003). Psicometria: Teoria dos testes na psicologia e na educação. Petrópolis: Vozes.

Pasquali, L. (2007). TRI – Teoria de resposta ao item: Teoria, procedimentos e aplicações. Brasília, DF: LabPAM/UNB.

Pintrich, P. R. (2000). The role of goal orientation in self-regulated learning. In M. Boekaerts, P. R. Pintrich, M. Zeidner (Eds.), Handbook of self-regulation (pp. 452-502). Salta Lake City: Academic Press.

Pintrich, P. R. (2004). A conceptual framework for assessing motivation and self-regulated learning in college students. Educational Psychology Review, 16(4), 385-407. http://dx.doi.org/10.1007/s10648-004-0006-x

Rach, G. (1960). Probabilistic models for some intelligence and attainment tests. Chicago: Mesa Press.

Robbins, S., Lauver, K., Le, H., Davis, D., Langley, R., & Carlstrom, A. (2004). Do psychosocial and study skill factors predict college outcomes? A meta-analysis. Psychological Bulletin, 130(2), 261-288. http://dx.doi.org/10.1037/0033-2909.130.2.261

Samejima, F. A. (1969). Estimation of latent ability using a response pattern of graded scores. Psychometric, Monograph Supplement, 17,100.

Seco, G., Almeida, L. S., Alves, S., Pereira, P., Filipe, L., Fonseca, S., & Martins, V. A. (2010). Escala de Competências de Estudo: Resultados de um estudo de validação no Instituto Politécnico de Leiria. In L. S. Almeida, B. Silva, & S. Caires (Eds.), Actas do I Seminário Internacional “Contributos da Psicologia em Contextos Educativos”. Braga: Universidade do Minho.

Schunk, D. H., & Zimmerman B. J. (1994). Self-regulation in education: Retrospect and prospect. In D. H. Schunk, & B. J. Zimmerman (Eds.), Self-regulation of learning and performance: Issues and educational applications (pp. 305-314). Hillsdale, NJ: Erlbaum.

Schunk, D. H., & Zimmerman, B. J. (1998). Conclusions and future directions for academic interventions. In D. H. Schunk, & B. J. Zimmerman (Eds.), Self-regulated learning. From teaching to self-reflective practice (pp. 225-234). Hilsdale, NJ: Erlbaum.

Tavares, J., Almeida, L., Vasconcelos, R., & Bessa, J. (2004). Construção e validação de um Inventário de Atitudes e Comportamentos de Estudo para estudantes do ensino superior (Relatório de Pesquisa- ISE04). Florianopolis: Universidade Federal de Santa Catarina.

Tonetto, A. M., & Gomes, W. B. (2007) Competências e habilidades necessárias à prática psicológica hospitalar. Arquivos Brasileiros de Psicologia, 59(1), 38-50. Disponível em http:// http://pepsic.bvsalud.org/scielo.php?%20script=sci_arttext&pid=S1809-52672007000100005&lng=pt&nrm=iso.%20ISSN%201809-5267

Thurstone, L. L. (1928). Attitudes can be measured. American Journal of Sociology, 33 (4), 529-554.

Thurstone, L. L. (1959). The measurement of values. Chicago, IL: Chicago University Press.

Valentini, F., & Laros, J. A. (2011). Teoria de resposta ao item na avaliação psicológica. In R. A. M. Ambiel, I. S. Rabelo, S. V. Pacanaro, G. A. S. Alves, & I. F. A. S. Leme, Avaliação psicológica: Guia de consulta para consulta para estudantes e profissionais de psicologia (pp.7-39). São Paulo: Casa do Psicólogo.

Vasconcelos, R. M., Almeida, L. S., & Monteiro, S. C. (2005). Métodos de estudo em alunos do 1º ano da universidade. Psicologia Escolar e Educacional, 9(2), 195-202. http://dx.doi.org/10.1590/S1413-85572005000200002

Vendramini, C. M. M., Silva, M. C., & Canale, M. (2004). Análise de itens de uma prova de raciocínio estatístico. Psicologia em Estudo, 9(3), 331-342. http://dx.doi.org/10.1590/S1413-73722004000300017

Wingersky, M. S., Barton, M. A., & Lord, F. M. (1982). LOGIST user`s guide. Princeton, NJ: Educational Testing Service.

Wright, B., & Mok, M. M. C (2004). An overview of the family of Rasch measurement models. In E. V. Smith, & R. M. Smith (Orgs.), Introduction to Rasch Measurement (pp. 1-24). Chicago: JAM Press.

Zimmerman, B. J. (2000). Attaining self-regulation: A social cognitive perspective. In M. Boekaerts, P. Pintrich, & M. Zeidner (Eds.), Handbook of self-regulation (pp. 13-39). New York: Academic Press.

Zimmerman, B. J. (2002). Becoming a self-regulated learner: An overview. Theory into Practice, 41 (2), 64-70. http://dx.doi.org/10.1207/s15430421tip4102_2.

Zimmerman, B. J., Greenberg, D., & Weinstein, C. E. (1994). Self-regulating academic study time: A strategic approach. In D. J. Schunk, & B. J. Zimmerman (Eds.), Self-regulation of learning and performance (pp. 105-125). Hillsdale, NJ: Erlbaum.