Scale of Perception and Analysis of Reading Fluency – SOLAR: usability and consistency
Escala de Percepção e Análise da Fluência Leitora – SOLAR: usabilidade e consistência
Luciana Mendonça Alves; Rafael Teixeira Scoralick Dias; Júlia Barcelos Lara; Luiz Felipe dos Santos; Leticia Corrêa Celeste; Vanessa de Oliveira Martins-Reis
Abstract
Objective: to analyze the consistency of responses of evaluators and to verify the usability of the perception and analysis of SOLAR (Science of Language and Reading)
Methods: a non-experimental descriptive cross-sectional study. Elementary school teachers and undergraduate students of speech therapy and pedagogy participated as the judges. The judges used the SOLAR Scale as an instrument to analyze the reading fluency of twenty audios recorded by elementary school students. Usability comparisons were performed using the Kruskal Wallis test and two-by-two comparisons using the Mann Whitney test. To analyze the consistency of the responses between the judges, the calculation of the interclass correlation coefficient was used.
Results: the analysis of the reliability of the answers showed an excellent intraclass correlation coefficient for all the skills of the Scale. As for the usability of the Scale, more than 80% of the participants positively evaluated the assessment. This was verified through the usability questionnaires which confirmed that it was easy to use, with clear guidelines and that users felt comfortable and confident using it.
Conclusion: SOLAR obtained good results in reliability and consistency with excellent agreement between the evaluators. These results indicated satisfactory reliability of the SOLAR items and favorable qualitative ratings from users.
Keywords
Resumo
Objetivo: analisar a consistência de respostas entre avaliadores e verificar a usabilidade da Escala de Percepção e Análise da Fluência Leitora - SOLAR.
Métodos: estudo descritivo não experimental de corte transversal. Participaram como juízes professores do Ensino Fundamental e acadêmicos de Fonoaudiologia e Pedagogia. Os juízes utilizaram como instrumento a Escala SOLAR para a análise de fluência leitora de áudios de 20 estudantes do Ensino Fundamental. A comparação da usabilidade foi realizada por meio do teste Kruskal Wallis e comparação dois a dois pelo teste Mann Whitney. Para análise da consistência de respostas entre juízes foi utilizado o cálculo do coeficiente de correlação interclasse. O nível de significância utilizado foi de 5%.
Resultados: a análise da fidedignidade das respostas demonstrou coeficiente de correlação intraclasse excelente para todas as habilidades da escala. Quanto à usabilidade do instrumento, mais de 80% dos participantes o avaliaram positivamente. Verificou-se, por meio dos questionários de usabilidade, que é uma escala de fácil uso, com orientações claras, os seus usuários se sentem confortáveis e confiantes em utilizá-la.
Conclusão: a SOLAR obteve bons indicadores de fidedignidade e consistência, com excelente concordância entre os avaliadores. Tais resultados indicam confiabilidade satisfatória dos itens e avaliações qualitativas favoráveis dos usuários.
Palavras-chave
Referências
1. Alves LM, Barcelos J, Scoralick R, Martin Celeste LC. Monitoramento da Fluência leitora. In: Coares AM, Capovilla FC, Simão JROR, Neves LM, editors. Caminhos da aprendizagem e inclusão: Entretecendo múltiplos saberes. Belo Horizonte: Artesã, 2021. p.57-70.
2. Coltheart M, Rastle K, Perry C, Langdon R. Projection mapping as a means of creative visual expression and its future prospects. Psychol Rev. 2010;108(I):450-6.
3. Morton J. Facilitation in Word recognition experiments causing change in the Logogen Model. In: Press P, editor. Processing os visible language, v
4. Morton J. Interaction of information in word recognition. Psychol Rev. 1969;76(2):165-78.
5. Cunha VLO, Martins MA, Capellini SA. Relação entre fluência e compreensão leitora em escolares com dificuldades de aprendizagem. Psicol Teor e Pesqui. [journal on the internet] 2017 [accessed 2021 oct 10]; 33:1-8. Available at: https://www.scielo.br/j/ ptp/a/4G3GsrWzMSk7SSQ7FtrSC5h/?lang=pt
6. Salles JF de, Parente MA de MP. Processos cognitivos na leitura de palavras em crianças: relações com compreensão e tempo de leitura. Psicol Reflexão e Crítica. [journal on the internet] 2002 [accessed 2021 oct 10]; 15(2):321-31. Available at: https://www.scielo. br/j/prc/a/3FcxqfWxLMVq3c83Gs3q8mJ/ abstract/?lang=pt
7. Alves LM, Celeste LC. Escala de percepção de fluência leitora. Rev Formação Docente. [journal on the internet] 2019 [accessed 2021 oct 10]; 11(2):195-204. Available at: https://www.metodista. br/revistas/revistas-izabela/index.php/fdc/article/ view/2091/1089
8. Alves LM, Santos LF, Carvalho IM, Ribeiro GL, Freire LS, Martins-Reis VO et al. Reading speed in elementary school and junior high. Codas [journal on the internet]. 2021 [accessed 2021 oct 10]; 33(5):1-7. Available at: https://www.scielo.br/j/codas/a/PcCR78M7p jNWHKhtGs4Lt8f/?format=pdf&lang=en
9. NRP: National Reading Panel. Teaching children to read: an evidence-based assessment of the scientific research literature on reading and its implications for reading instructions. Tecnical Report. USA: National Institute of Child Health & Human Development, NRP; 2000.
10. Hudson RF, Lane HB, Pullen PC. Reading fluency assessment and instruction: What, why, and how? Read Teach. 2005;58(8):702-14.
11. González-Trujillo MC, Calet N, Defior S, Gutiérrez-Palma N. Escala de fluidez lectora en español: midiendo los componentes de la fluidez. Estud Psicol. [journal on the internet]. 2014 [accessed 2021 oct 10]; 35(1):104-36. Available at: http:// dx.doi.org/10.1080/02109395.2014.893651
12. Martins MA, Capellini SA. Relation between oral reading fluency and reading comprehension. Codas [journal on the internet]. 2019 [accessed 2021 oct 10]; 31(1):1-8. Available at: https://www.scielo.br/j/ codas/a/ghNL5wkkLdLL9f5ZMbDbTkb/?lang=en
13. O’Connor RE. Reading fluency and students with reading disabilities: how fast is fast enough to promote reading comprehension? J Learn Disabil. 2018;51(2):124-36.
14. Puliezi S, Maluf MR. A fluência e sua importância para a compreensão da leitura. Psico-USF. [journal on the internet] 2014 [accessed 2021 sep 10];19(3):467-75. Available at: https://www.scielo.br/j/pusf/a/jdXqdwBLBR hVswxj4Yj3dYs/?lang=pt&format=pdf
15. Rasinski TV. Readers who struggle: why many struggle and a modest proposal for improving their reading. Read Teach [journal on the internet]. 2017 [accessed 2021 sep 10]; 70(5):519-24. Available at: https://timrasinski.com/presentations/rasinski- 2017-rt-readers_who_struggle.pdf
16. Andrade AJL, Celeste LC, Alves LM. Characterization of reading fluency in elementary school students. Audiol - Commun Res [journal on the internet]. 2019 [accessed 2021 oct 10]; 24:1-8. Available at: https://www.scielo.br/j/acr/a/ DtXN6jJxZptKd8CMvk5FL5s/?lang=en
17. Kawano CE, Kida ASB, Carvalho CAF, Ávila CRB. Fluency parameters and types of errors in the reading of students with signs of reading and writing difficulties. Rev Soc Bras Fonoaudiol [journal on the internet]. 2011 [accessed 2021 oct 10]; 16(1):9-18. 2011 Available at: https://www.scielo.br/j/rsbf/a/ Dv5xytVH5NtYBtwsxwwjCPD/abstract/?lang=en
18. Celeste LC, Pereira ES, Pereira NRR, Alves LM. Prosodic parameters of reading in 2nd to 5th grade students. Codas [journal on the internet]. 2018 [accessed 2021 oct 10]; 30(1):1-4. Available at: https://www.scielo.br/j/codas/a/ hDGpC8xRCCrmQwHfJn5tqnr/?lang=en
19. Daane MC, Campbell JR, Grigg WS, Goodman MJ, Oranje A. Fourth-grade students reading aloud: NAEP 2002 special study of oral Reading (NCES 2006-469). 2005. U.S. Department of Education. Institute of Education Sciences, National Center for Education Statistics. Washington, DC: Government Printing Office.
20. Smith GS, Paige DD. A study of reliability across multiple raters when using the NAEP and MDFS rubrics to measure oral reading fluency. Read Psychol. [journal on the internet]. 2019 [accessed 2021 oct 10]; 40(1):34-69. Available at: https://doi. org/10.1080/02702711.2018.1555361 Alves LM, Dias RTS, Lara JB, Santos LF, Celeste LC, Martins-Reis VO
21. Alves LM, Lalain M, Ghio A, Celeste LC. Escala Multidimensional de Fluência em Leitura: avaliação perceptiva da leitura em escolares com e sem dislexia do desenvolvimento. In: Editora W, editor. Dislexia: novos temas, novas perspectivas. Rio de Janeiro; 2015. p.151-64.
22. Alves LM, Celeste LC. SOLAR: Escala de Percepção e Análise da Fluência Leitora. Kognos, Belo Horizonte; 2021.
23. Alves LM, Reis C, Pinheiro Â. Prosody and reading in dyslexic children. Dyslexia. 2015;21(1):35-49.
24. Scliar-Cabral L. Guia prático de alfabetização. Contexto, editor. São Paulo; 2003.
25. Martins AI, Rosa AF, Queirós A, Silva A, Rocha NP. European Portuguese validation of the System Usability Scale (SUS). Procedia Comput Sci [journal on the internet]. 2015 [accessed 2021 oct 10]; 67(Dsai):293-300. Available at: http://dx.doi. org/10.1016/j.procs.2015.09.273
26. Koo TK, Li MY. A guideline of selecting and reporting intraclass correlation coefficients for reliability research. J Chiropr Med [journal on the internet]. 2016 [accessed 2021 oct 2]; 15(2):155-63. Available at: http://dx.doi.org/10.1016/j.jcm.2016.02.012
27. Dall’ Aqua MF, Takiuchi N, Zorzi JL. Efetividade de um treinamento de professores de uma escola de educação especial usando os princípios dos métodos Hanen e V.O.E.: veja, ouça e espere. Rev. CEFAC [journal on the internet]. 2008 [accessed 2021 oct 1]; 10(4):433-42. Available at: http://www.scielo.br/scielo.php?script=sci_ arttext&pid=S1516-18462008000400003&lang= pt%0Ahttp://www.scielo.br/pdf/rcefac/v10n4/ v10n4a03.pdf
28. Castejón LA, González-Pumariega S, Cuetos A. Teaching reading fluency in the clasroom: from research to practice. Ocnos Rev Estud sobre Lect. [journal on the internet] 2019 [accessed 2021 oct 1]; 18(2):17-30. Available at: https:// revista.uclm.es/index.php/ocnos/article/view/ ocnos_2019.18.2.1961/pdf
29. Conselho Federal de Fonoaudiologia. Resolução CFFa no 309. 2005.
30. Luzardo R, Nemr K. Instrumentalização fonoaudiológica para professores da educação infantil. Rev. CEFAC [journal on the internet]. 2006 [accessed 2021 sep 10]; 8(3):289-300. Available at: https://www.redalyc.org/pdf/1693/169320536006. pdf
31. Seno MP. Contribuições da fonoaudiologia educacional para a formação continuada de professores. Brazilian J Dev [journal on the internet]. 2020 [accessed 2021 oct 2]; 6(9):69507-21. Available at: https://www.brazilianjournals.com/ index.php/BRJD/article/view/16792
Submetido em:
18/10/2021
Aceito em:
22/11/2021
Facebook
Twitter
LinkedIn
Mendeley
Email