Please use this identifier to cite or link to this item:
https://dspace.sti.ufcg.edu.br/handle/riufcg/45532Full metadata record
| DC Field | Value | Language |
|---|---|---|
| dc.creator.ID | https://orcid.org/0009-0001-4305-0636 | - |
| dc.creator.ID | https://orcid.org/0009-0004-3552-8507 | - |
| dc.creator.Lattes | http://lattes.cnpq.br/1319318974098247 | - |
| dc.creator.Lattes | http://lattes.cnpq.br/5366486377966497 | - |
| dc.identifier.doi | https://doi.org/10.35572/rle.v25i2.6493 | - |
| dc.description.resumo | Este artigo avalia a eficácia dos sistemas de correção automática de redações em português do Brasil, comparando suas avaliações com as de professores experientes. Foram analisados três sistemas disponíveis no mercado brasileiro: coRedação, CRIA e Glau, utilizando um corpus de 40 redações de alunos do ensino médio. Os resultados revelaram divergências significativas entre as avaliações dos sistemas e as dos avaliadores humanos, especialmente na avaliação geral das redações. Embora os sistemas mostrem alguma convergência na avaliação isolada das competências do ENEM, o desempenho global apresentou discrepâncias consideráveis. As análises estatísticas, incluindo correlação de Pearson, erro médio absoluto e diferença média quadrática, confirmaram a variabilidade no desempenho dos sistemas. A pesquisa destaca a necessidade de aprimoramentos nos sistemas de correção automática para que possam ser utilizados de forma mais eficaz como ferramentas de apoio ao ensino. | pt_BR |
| dc.publisher.country | Brasil | pt_BR |
| dc.publisher.initials | UFCG | pt_BR |
| dc.subject.cnpq | Linguística. | pt_BR |
| dc.subject.cnpq | Educação. | pt_BR |
| dc.citation.volume | 25 | pt_BR |
| dc.citation.issue | 2 | pt_BR |
| dc.title | Avaliando os avaliadores: quão eficientes são os sistemas de correção automática de redações? | pt_BR |
| dc.date.issued | 2025-11-24 | - |
| dc.description.abstract | This article evaluates the effectiveness of automated essay scoring systems in Brazilian Portuguese, comparing their assessments with those of experienced teachers. Three systems available in the Brazilian market were analyzed: coRedação, CRIA, and Glau, using a corpus of 40 essays from high school students. The results revealed significant discrepancies between the systems' evaluations and those of human evaluators, especially in the overall assessment of the essays. Although the systems show some convergence in the isolated evaluation of ENEM competencies, the overall performance showed considerable differences. Statistical analyses, including Pearson correlation, mean absolute error, and mean squared error, confirmed the variability in the systems' performance. The research highlights the need for improvements in automated scoring systems to be used more effectively as teaching support tools. | pt_BR |
| dc.identifier.uri | https://dspace.sti.ufcg.edu.br/handle/riufcg/45532 | - |
| dc.date.accessioned | 2026-02-23T16:10:03Z | - |
| dc.date.available | 2026-02-23 | - |
| dc.date.available | 2026-02-23T16:10:03Z | - |
| dc.type | Artigo de Periódico | pt_BR |
| dc.subject | Correção automática de redação | pt_BR |
| dc.subject | Avaliação automática de redação | pt_BR |
| dc.subject | Automação - correção de redações | pt_BR |
| dc.subject | Sistema de correção automática de redações | pt_BR |
| dc.subject | Correlação de Pearson | pt_BR |
| dc.subject | Software coRedação | pt_BR |
| dc.subject | Software CRIA - corretor de redações | pt_BR |
| dc.subject | Software Glau - corretor de redações | pt_BR |
| dc.subject | Exame Nacional do Ensino Médio - redação | pt_BR |
| dc.subject | Automatic essay correction | pt_BR |
| dc.subject | Automatic essay evaluation | pt_BR |
| dc.subject | Automation - essay correction | pt_BR |
| dc.subject | Automatic essay correction system | pt_BR |
| dc.subject | Pearson correlation | pt_BR |
| dc.subject | CRIA software - essay corrector | pt_BR |
| dc.subject | Glau software - essay corrector | pt_BR |
| dc.subject | National High School Exam - essay | pt_BR |
| dc.rights | Acesso Aberto | pt_BR |
| dc.creator | MARTINS, Ronaldo Teixeira. | - |
| dc.creator | SOUSA, Luan Daniel dos Santos. | - |
| dc.publisher | Universidade Federal de Campina Grande | pt_BR |
| dc.language | por | pt_BR |
| dc.title.alternative | Evaluating the evaluators: how efficient are automated essay scoring systems? | pt_BR |
| dc.identifier.citation | MARTINS, Ronaldo Teixeira; SOUSA, Luan Daniel dos Santos. Avaliando os avaliadores: quão eficientes são os sistemas de correção automática de redações? Leia Escola: Revista da Pós-Graduação em Linguagem e Ensino da UFCG.Centro de Humanidades, Campina Grande-PB, v.25, n.2, 2025. ISSN: 2358-5870. Disponível em: https://dspace.sti.ufcg.edu.br/handle/riufcg/45532 | pt_BR |
| dc.identifier.issn | 2358-5870 | pt_BR |
| dc.relation.ispartof | Leia Escola: Revista do Programa de Pós-Graduação em Linguagem e Ensino - CH - UFCG. | pt_BR |
| dc.identifier.ror | https://ror.org/00eftnx64 | - |
| Appears in Collections: | Revista Leia Escola - 2025, v.25 n° 2 | |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| AVALIANDO OS AVALIADORES QUÃO EFICIENTES SÃO - REV. LEIA ESCOLA EDUFCG V.25 N.2 2025.pdf | Avaliando os avaliadores: quão eficientes são os sistemas de correção automática de redações? - Rev. Leia Escola EDUFCG V.25 N.2 2025 | 2.3 MB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.
