Planejamento e análise da qualidade de uma avaliação de estatística descritiva em cursos da área da saúde
DOI:
https://doi.org/10.51359/2177-9309.2026.268500Palavras-chave:
Avaliação de Aprendizagem, Estatística Descritiva, Educação em Saúde, Evidências de Validade de Instrumento, Sala de AulaResumo
O ensino tradicional de Estatística nas ciências da saúde frequentemente baseia-se em métodos transmissivos e descontextualizados que privilegiam a memorização mecânica em detrimento do pensamento estatístico — o processo investigativo essencial à resolução de problemas e à tomada de decisões. Para superar essas lacunas, desenvolvemos e avaliamos um instrumento de avaliação composto por sete questões de múltipla escolha e uma questão dissertativa curta, fundamentado nas diretrizes GAISE e centrado em um problema real de saúde pública. Participaram do estudo vinte estudantes de um curso da área da saúde de uma universidade pública de São Paulo. Para estabelecer evidências de validade (nas dimensões cognitiva, instrucional e inferencial), avaliamos a percepção dos estudantes sobre a dificuldade das questões e calculamos os índices de dificuldade e discriminação de cada item. O instrumento apresentou forte alinhamento com o conteúdo das aulas, além de capacidade para identificar equívocos conceituais e discriminar entre diferentes níveis de conhecimento. A análise das respostas dissertativas e dos relatos dos participantes indicou que a capacidade de síntese e a complexidade visual dos gráficos funcionam como barreiras cognitivas, independentemente da compreensão conceitual prévia do estudante. Embora o tamanho reduzido da amostra limite as conclusões ao contexto deste curso, o estudo contribui para a melhoria contínua do processo de ensino-aprendizagem, ao oferecer uma estrutura prática para alinhar a avaliação em Estatística a práticas pedagógicas baseadas em evidências.
Downloads
Referências
AGGARWAL, Rakesh. Statistical Literacy for Healthcare Professionals: Why is It Important? Annals of Cardiac Anaesthesia, v. 21, n. 4, p. 349, dez. 2018. Disponível em: https://journals.lww.com/aoca/fulltext/2018/21040/statistical_literacy_for_healthcare_professionals_.1.aspx
ALI, Kamran; ZAHRA, Daniel. Ten tips for effective use and quality assurance of multiple-choice questions in knowledge-based assessments. European Journal of Dental Education: Official Journal of the Association for Dental Education in Europe, v. 28, n. 2, p. 655–662, maio 2024. Disponível em: https://pubmed.ncbi.nlm.nih.gov/38282273/
BELOV, Dmitry I.; LÜDTKE, Oliver; ULITZSCH, Esther. A supervised learning approach to estimating IRT models in small samples. British Journal of Mathematical and Statistical Psychology, v. n/a, n. n/a, 2025. Disponível em: https://onlinelibrary.wiley.com/doi/abs/10.1111/bmsp.12396
BEN-ZVI, Dani. Statistical reasoning learning environment. Em Teia-Revista de Educacao Matemática e Tecnológica Iberoamericana, v. 2, n. 2, p. 1–13, 2011. Disponível em: https://periodicos.ufpe.br/revistas/emteia/article/view/2152/1721
BOUD, David; DAWSON, Phillip. What feedback literate teachers do: an empirically-derived competency framework. Assessment & Evaluation in Higher Education, v. 48, n. 2, p. 158–171, 17 fev. 2023. Disponível em: https://doi.org/10.1080/02602938.2021.1910928
BRAZIL. Relatório síntese de área - Medicina [Area summary report - Medicine]. Brasília/DF: Inep, 2024. Disponível em: https://download.inep.gov.br/educacao_superior/enade/relatorio_sintese/2023/medicina.pdf. Acesso em: 21 maio. 2024.
BURRILL, Gail; PFANNKUCH, Maxine. Emerging trends in statistics education. ZDM – Mathematics Education, v. 56, n. 1, p. 19–29, 1 fev. 2024. Disponível em: https://doi.org/10.1007/s11858-023-01501-7
DUVAL, Raymond. Registros de representação semiótica e funcionamento cognitivo do pensamento: Registres de représentation sémiotique et fonctionnement cognitif de la pensée (Trad. Méricles Thadeu Moretti). Revista Eletrônica de Educação Matemática, Tradução revisada (2023). v. 7, n. 2, p. 266–297, 13 dez. 2012. Disponível em: https://periodicos.ufsc.br/index.php/revemat/article/view/1981-1322.2012v7n2p266
ELGADAL, Amani H.; MARIOD, Abdalbasit A. Item Analysis of Multiple-choice Questions (MCQs): Assessment Tool For Quality Assurance Measures. Sudan Journal of Medical Sciences, v. 16, n. 3, p. 334–346, 3 nov. 2021. Disponível em: https://www.ajol.info/index.php/sjms/article/view/216888
FERRETTI, Federica; GAMBINI, Alessandro; SPAGNOLO, Camilla. Management of semiotic representations in mathematics: Quantifications and new characterizations. European Journal of Science and Mathematics Education, v. 12, n. 1, p. 11–20, 1 jan. 2024. Disponível em: https://www.scimath.net/article/management-of-semiotic-representations-in-mathematics-quantifications-and-new-characterizations-13827
GAL, Iddo. Statistical Literacy. In: BEN-ZVI, Dani; GARFIELD, Joan (Orgs.). The Challenge of Developing Statistical Literacy, Reasoning and Thinking. Dordrecht: Springer Netherlands, 2004. p. 47–78. Disponível em: https://doi.org/10.1007/1-4020-2278-6_3
GROTH, Randall E. The Relevance of Statistical Knowledge for Teaching to Health Care Professionals: Reflections on a COVID-19 Press Briefing. Journal of Statistics and Data Science Education, v. 29, n. 1, p. 84–94, 23 jan. 2021. Disponível em: https://doi.org/10.1080/10691898.2020.1851160
HAMAMOTO FILHO, Pedro Tadao; BICUDO, Angélica Maria. Improvement of Faculty’s Skills on the Creation of Items for Progress Testing Through Feedback to Item Writers: a Successful Experience. Revista Brasileira de Educação Médica, v. 44, n. 1, p. e018, 2020. Disponível em: http://www.scielo.br/scielo.php?script=sci_arttext&pid=S0100-55022020000100401&tlng=en
HICKS, Jenna et al. Paired Multiple-Choice Questions Reveal Students’ Incomplete Statistical Thinking about Variation during Data Analysis. Journal of Microbiology & Biology Education, v. 22, n. 2, p. 10.1128/jmbe.00112-21, 31 maio 2021. Disponível em: https://journals.asm.org/doi/10.1128/jmbe.00112-21
LOCUS PROJECT. Levels of Conceptual Understanding in Statistics - LOCUS. Disponível em: https://locus.statisticseducation.org. Acesso em: 10 set. 2025.
MCLEAN, Susan F. Case-Based Learning and its Application in Medical and Health-Care Fields: A Review of Worldwide Literature. Journal of Medical Education and Curricular Development, v. 3, p. JMECD.S20377, 2016. Disponível em: https://pubmed.ncbi.nlm.nih.gov/29349306/
MEE, Janet et al. An experimental comparison of multiple-choice and short-answer questions on a high-stakes test for medical students. Advances in Health Sciences Education, v. 29, n. 3, p. 783–801, jul. 2024. Disponível em: https://link.springer.com/10.1007/s10459-023-10266-3
NAIR, Geethu G.; FEROZE, M. Effectiveness of multiple-choice questions (MCQS) discussion as a learning enhancer in conventional lecture class of undergraduate medical students. Medical Journal of Dr. D.Y. Patil Vidyapeeth, v. 16, n. 8, p. 183–188, 1 jan. 2023. Disponível em: https://journals.lww.com/mjdy/fulltext/2023/16002/effectiveness_of_multiple_choice_questions__mcqs_.3.aspx
PAREKH, Priya et al. The Utility of Multiple-Choice Assessment in Current Medical Education: A Critical Review. Cureus, v. 16, 7 maio 2024. Disponível em: https://www.cureus.com/articles/248393-the-utility-of-multiple-choice-assessment-in-current-medical-education-a-critical-review
PELLEGRINO, James W.; DIBELLO, Louis V.; GOLDMAN, Susan R. A Framework for Conceptualizing and Evaluating the Validity of Instructionally Relevant Assessments. Educational Psychologist, v. 51, n. 1, p. 59–81, 2 jan. 2016. Disponível em: https://doi.org/10.1080/00461520.2016.1145550
PEREIRA, Rodrigo Fioravanti; DUFRANC, Ileana Maria Greca; VILLAGRA, Jesus Angel Meneses. Ways of teaching statistics for the health area. Revista Latinoamericana de Investigación en Matemática Educativa, v. 22, n. 1, mar. 2019. Disponível em: https://www.relime.org/index.php/relime/article/view/24
PERRETT, Jamis. Revising the Guidelines for Assessment and Instruction of Statistics Education (GAISE) College Report. Scatterplot, v. 1, n. 1, p. 2401637, 31 dez. 2024. Disponível em: https://doi.org/10.1080/29932955.2024.2401637
PHADKE, Sayali; BECKMAN, Matthew; MORGAN, Kari Lock. Examining the role of context in statistical literacy assessment. Statistics Education Research Journal, v. 23, n. 1, p. 4–4, 28 jul. 2024. Disponível em: https://iase-pub.org/ojs/SERJ/article/view/529
REZIGALLA, Assad Ali et al. Item analysis: the impact of distractor efficiency on the difficulty index and discrimination power of multiple-choice items. BMC Medical Education, v. 24, n. 1, p. 445, 24 abr. 2024. Disponível em: https://doi.org/10.1186/s12909-024-05433-y
RIZOPOULOS, Dimitris. ltm: An R Package for Latent Variable Modeling and Item Response Analysis. , 2007. Disponível em: https://www.jstatsoft.org/index.php/jss/article/view/v017i05
SISTERMANS, Ilse Johanna. Integrating competency-based education with a case-based or problem-based learning approach in online health sciences. Asia Pacific Education Review, v. 21, n. 4, p. 683–696, 1 dez. 2020. Disponível em: https://link.springer.com/article/10.1007/s12564-020-09658-6
TAVAKOL, Mohsen; DENNICK, Reg. Making sense of Cronbach’s alpha. International Journal of Medical Education, v. 2, p. 53–55, 27 jun. 2011. Disponível em: https://www.ncbi.nlm.nih.gov/pmc/articles/PMC4205511/
ZAIDI, Nikki L. Bibler et al. Pushing Critical Thinking Skills With Multiple-Choice Questions: Does Bloom’s Taxonomy Work? Academic Medicine, v. 93, n. 6, p. 856, jun. 2018. Disponível em: https://pubmed.ncbi.nlm.nih.gov/29215375/
ZIKMUND-FISHER, Brian J.; THORPE, Alistair; FAGERLIN, Angela. How to Communicate Medical Numbers. Clinical Review & Education, 2025. Disponível em: https://jamanetwork.com/journals/jama/article-abstract/2839303#google_vignette
Downloads
Publicado
Como Citar
Edição
Seção
Licença
Copyright (c) 2026 Alessandra Aparecida da Silva Menezes, Nathalia Santanna Petraconi Nunes, Camila Bertini Martins
Este trabalho está licenciado sob uma licença Creative Commons Attribution 4.0 International License.
Autores que publicam nesta revista concordam com os seguintes termos:
a. Autores mantêm os direitos autorais e concedem à revista o direito de primeira publicação, com o trabalho simultaneamente licenciado sob a Licença Creative Commons Atribuição 4.0 Internacional (CC BY 4.0).
b. Autores têm autorização para assumir contratos adicionais separadamente, para distribuição não-exclusiva da versão do trabalho publicada nesta revista (ex.: publicar em repositório institucional ou como capítulo de livro), com reconhecimento de autoria e publicação inicial nesta revista.
c. Autores têm permissão e são estimulados a publicar e distribuir seu trabalho online (ex.: em repositórios institucionais ou na sua página pessoal) a qualquer ponto antes ou durante o processo editorial, já que isso pode gerar alterações produtivas, bem como aumentar o impacto e a citação do trabalho publicado.
d. Os conteúdos da Revista Em Teia estão licenciados com uma Licença Creative Commons Atribuição 4.0 Internacional (CC BY 4.0). Esta licença permite que os reutilizadores distribuam, remixem, adaptem e desenvolvam o material em qualquer meio ou formato, desde que a atribuição seja dada ao criador. A licença permite o uso comercial.
Authors who publish with this journal agree to the following terms:
a. Authors retain copyright and grant the journal right of first publication with the work simultaneously licensed under a Creative Commons Attribution 4.0 International (CC BY 4.0) License.
b. Authors are able to enter into separate, additional contractual arrangements for the non-exclusive distribution of the journal's published version of the work (e.g., post it to an institutional repository or publish it in a book), with an acknowledgement of its initial publication in this journal.
c. Authors are permitted and encouraged to post their work online (e.g., in institutional repositories or on their website) prior to and during the submission process, as it can lead to productive exchanges, as well as earlier and greater citation of published work.
d. This license allows reusers to copy and distribute the material in any medium or format in unadapted form only, for noncommercial purposes only, and only so long as attribution is given to the creator.
