Timothy Shanahan: já sou um(a) ótimo(a) professor(a), por que deveria seguir evidências científicas?

Timothy Shanahan: já sou um(a) ótimo(a) professor(a), por que deveria seguir evidências científicas?

por | dez 2, 2019 | Educação Infantil, Ensino Fundamental, Gestão escolar, Pesquisas em educação

Um professor me perguntou: “o que significa dizer que algo tem base em evidências científicas? Sou professor há anos e já ensinei centenas de crianças a ler. Agora me disseram que em nosso estado devemos ensinar com base em evidências de pesquisas. Gosto de ensinar e não quero mudar meu estilo. Por que deveria?”

Eu imagino que muitos professores concordam com ele. Um pesquisador como eu pode recomendar esta ou aquela abordagem de ensino como ideal. Porém, muitos(as) professores(as) veem o aprendizado de seus alunos progredindo bem sem esse método visto como indispensável pelos cientistas.

Por que confiar em um pesquisador que nem conhece esses(as) alunos(as), quando você pode confiar em seus próprios olhos?

O que funciona pra uns pode não funcionar para outros

Primeiro, é importante saber o que queremos dizer quando afirmamos que a pesquisa mostra que uma abordagem de ensino “funciona”. Isso NÃO significa que somente essa abordagem funciona, mas quer dizer seus benefícios são um pouquinho maiores em relação aos de outros métodos.

O fato de haver alguma melhoria, mesmo que pequena, não significa que todas as crianças do grupo experimental prosperaram e que todas as crianças do grupo de comparação definharam. Simplesmente significa que a média de desempenho foi diferente para os dois grupos.

Você deve ter notado que usei o termo grupo de comparação em vez de grupo de controle. Normalmente, não temos “grupos de controle” nos estudos de leitura, pois seria antiético controlar ou limitar a alfabetização de qualquer pessoa. Todo método de ensino provavelmente vai ensinar algo, portanto sempre haverá aprendizado nos dois grupos.

Nesse caso, as crianças que fizeram tarefas de consciência fonológica superaram as que não tiveram essas habilidades estimuladas. Talvez, muitas das crianças ensinadas tenham se saído um pouco melhor que as crianças do grupo de comparação. Ou talvez, algumas crianças de cada grupo não tenham aprendido a ler, mas houve menos dessas falhas quando a consciência fonológica fazia parte das aulas.

Em todo caso, isso não quer dizer que as crianças do primeiro grupo aprendem e as do segundo grupo, não. Não é bem assim, no estilo “preto e branco” – está mais para tons de cinza. Essencialmente, por em prática os métodos de ensino que as pesquisas recomendam significa tentar alterar as probabilidades de sucesso dos(as) alunos(as).

Aproveite as oportunidades

Segundo, ao considerar se você deve seguir o que diz a pesquisa, entender o conceito de “custo de oportunidade” ajuda bastante.

Digamos que você ensina a ler há 10 anos e as crianças aprendem, as notas de provas e atividades são parecidas em média, as famílias estão felizes com sua maneira de ensinar e a direção da escola elogia seu trabalho como educador(a).

Obviamente, o seu jeito de ensinar está funcionando. Por que mexer em time que está ganhando, não é?

Essa até parece uma boa ideia, mas ela ignora o que chamei de custo de oportunidade. O fato de você alfabetizar de um certo jeito tirou de você a chance de ver como seria e quais resultados teria se ensinasse de outra maneira.

É aí que entra a pesquisa. Os(as) pesquisadores(as) tentarão organizar seus estudos de forma que seja possível avaliar como uma abordagem de ensino se compara a outra. E aí podemos ver que seus alunos poderiam inclusive aprender tanto quanto ou até mais se tivessem sido ensinados de outra maneira.

Em outras palavras, pode ser que não haja motivos para você ter uma abordagem pedagógica preferida. Nenhum(a) professor(a) pode saber o que suas crianças estão deixando de aprender por meio da abordagem atual, que parece tão satisfatória.

Leia mais

Robert Slavin: Prêmio Nobel comprova a importância das evidências científicas para a educação
Timothy Shanahan: Cinco coisas que todo(a) professor(a) deve saber sobre o ensino de vocabulário
Larry Cuban: O “otimismo tecnológico” encontra as escolas – as escolas vencem (parte 2)

As evidências científicas são indispensáveis

Terceiro, estou me referindo a pesquisas que se concentram em resultados específicos, na maioria das vezes nos ganhos de leitura mas também em outros resultados (por exemplo, interesse, motivação). Às vezes, pode parecer que os(as) professores(as) “negam a ciência” porque não reconhecem as descobertas reveladas pela pesquisa.

O(a) pesquisador(a) se preocupa em saber quantas palavras corretas por minuto as crianças podem ler, se elas podem decodificar uma lista de palavras sem significados ou quantas perguntas de múltipla escolha foram respondidas em uma avaliação. O professor pode ter outros critérios em mente.

Há alguns “casos” que sempre acontecem comigo. Quando mostro as provas de que um certo Método A obtém melhores resultados de aprendizado do que um Método B, sou inundado em mensagens de defensores de um Método B. Essas pessoas têm certeza de que, se eu visitasse a sala de aula delas, eu mudaria de idéia.

Esses(as) professores(as) não são burros(as), apenas têm objetivos diferentes dos adotados pelos pesquisadores.

Estou tentando fazer com que as crianças alcancem os níveis mais altos de aprendizado em leitura e escrita. Os(as) professores(as) também podem querer isso, mas podem valorizar ainda mais a sensação de poder ensinar de forma que eles (professores) se sintam em casa. É por isso que têm tanta certeza de que, se eu visse o quão boa é a sala de aula deles(as), eu escolheria a abordagem deles(as) e não a mais eficaz, em teoria.

Os(as) professores(as) costumam me dizer que precisam fazer tudo do jeito deles(as), porque estão ensinando “amor pela leitura”. Parece não incomodar a ninguém o fato de que não há uma referência de “amor pela leitura” no estado onde vivem, nenhum estímulo a esse “amor pela leitura” ou que esse “amor” depende muito do quão bem as crianças conseguem ler.

Podemos amontoar pesquisas e mais pesquisas aos pés desses(as) professores(as), mas essas pesquisas não se encaixam nas crenças e nos objetivos desses(as) educadores(as). Não importa quantas evidências nós mostremos, pessoas assim nunca serão convencidas.

Estimular o interesse pela pesquisa também é importante

Em conclusão, professores(as) geralmente sabem pouquíssimo sobre pesquisa – métodos de estudo, raciocínio, ética científica… Mesmo nas universidades de primeira linha, os estudantes dos cursos de educação têm pouco ou quase nenhum treinamento em pesquisa para professores e diretores. É difícil confiar em algo que você não entende.

Os(as) professores(as) muitas vezes duvidam de que “a pesquisa pode provar qualquer coisa”, revelando suas profundas suspeitas sobre a falta de confiabilidade tanto das evidências da(s) pesquisas quanto dos(as) pesquisadores(as).

Obviamente, os(as) pesquisadores(as) se preocupam bastante com esses problemas. É por isso que, por exemplo, a maior parte de nós não faz recomendações com base em apenas uma ou outra pesquisa, mas observando os resultados médios de diversas pesquisas para garantir a consistência das evidências descobertas.

Se um estudo diz que o “Programa de Leitura XYZ” gerou ótimos resultados, isso é uma coisa; mas se 38 ou 51 estudos reafirmam esse sucesso, então eu estou a bordo. Essa é a razão pela qual relatórios de diversos órgãos públicos dos Estados Unidos são tão úteis… é pouco provável que um estudo a mais atrapalhe esse sucesso, já que esses resultados se baseiam em muitas evidências. É nessa consistência que nós confiamos.

Quando o assunto é descoberta científica, outro benefício da abordagem metanalítica é que ela nos permite saber não apenas que uma abordagem funcionou – ou seja, que teve um efeito positivo no aprendizado – mas também entender o público com quem a abordagem funcionou e sob que circunstâncias ela deu certo.

Em muitas escolas, esse pensamento de “funcionar ou não” parece diminuir o nível de detalhe que os(as) professores(as) precisam para pôr em prática com sucesso os resultados das pesquisas – e justamente esses detalhes dariam aos professores maior confiança de que vale a pena seguir as pesquisas. Se 30 minutos por dia de ensino de fluência, por exemplo, podem melhorar essa habilidade, é necessário incluir esse ensino no planejamento. Mas se o(a) professor(a) não sabe o tempo de aula ou tipo de texto usado, o método pode falhar.

O(A) professor(a) que coloca as crianças para ler em voz alta uma página de texto fácil, para que pratiquem a fluência, está honrando a descoberta da pesquisa – o ensino de fluência é eficaz. Porém, não está seguindo as práticas pedagógicas específicas que levaram a essa descoberta.

Pouco a pouco, as crianças devem aprender muito com essa leitura, se o(a) professor(a) seguir a pesquisa. As evidências são a única ferramenta que temos para determinar quais métodos de ensino têm maior probabilidade de beneficiar o aprendizado de nossos alunos. O senso comum e a sabedoria acabam sendo são inúteis. É fácil para um(a) professor(a) deixar de buscar conquistas maiores para a turma se, para ele(a), “as crianças parecem ler bem”. Mas, atualmente, a tecnologia e as mudanças na maneira como trabalhamos e interagimos socialmente exigem níveis mais altos de alfabetização do que no passado. É importante prestar atenção nisso se os(as) estudantes precisam participar plenamente de nossa sociedade. Mais conhecimento sobre como a pesquisa é feita e como é avaliada ajudaria muito os(as) professores(as) a entender que essas informações podem realmente ajudá-los a serem cada vez melhores.

Espero que você consiga fazer as transformações necessárias na sua escola. Se bem feitas, elas podem levar a melhores resultados para todas as suas crianças.

Tradução: Danilo Aguiar /Américo Amorim.

Robert Slavin’s Blog: Por que não o melhor?

Robert Slavin’s Blog: Por que não o melhor?

por | set 23, 2019 | Educação Infantil, Ensino Fundamental, Gestão escolar, Inovação no Ensino, Pesquisas em educação, Sem categoria

A partir de hoje, você confere aqui no Blog da Escribo conteúdos exclusivos do educador e psicólogo americano Robert Slavin, pesquisador de políticas educacionais. Ele também é diretor do Centro de Pesquisa e Reforma em Educação da Universidade Johns Hopkins, referência internacional na formação de educadores e pesquisadores educacionais. Neste primeiro texto, Slavin fala sobre a importância de estimularmos a pesquisa e a aplicação de evidências científicas para melhorar cada vez mais a educação.

Tradução: Danilo Aguiar/Américo Amorim.

Em 1879, Thomas Edison inventou a primeira lâmpada. O principal problema que ele enfrentou foi encontrar um filamento que brilhasse, mas não queimasse muito rapidamente. Para encontrá-lo, ele testou mais de 6.000 substâncias que poderiam ser usadas nos filamentos. O algodão carbonizado funcionou muito melhor do que todos os outros (o tungstênio, que usamos atualmente, surgiu muito depois).

A luz incandescente mudou o mundo, claro. Ela substituiu sistemas de iluminação a gás muito mais caros e era muito mais versátil. A lâmpada permitiu fazermos todo tipo de atividade humana de tarde e de noite.

Mas se a lâmpada tivesse sido uma inovação educacional, provavelmente seria vista como uma falha enorme. Os céticos diriam que apenas um em cada seis mil filamentos funcionava. Os pesquisadores teriam calculado que o effect size para todas as 6.000 substâncias seria de apenas +0,000000001. Dificilmente valeria a pena adotar essa inovação (a lâmpada). Se os experimentos de Edison fossem financiados pelo governo, os políticos teriam reclamado que o dinheiro dos contribuintes foi desperdiçado em 5.999 testes. Os economistas teriam calculado as taxas de custo-benefício e concluído que, mesmo que a luz de Edison funcionasse, o custo de fabricar somente uma já era astronômico, sem mencionar o custo incalculável da instalação de sistemas de geração e fiação elétrica nas cidades.

Tudo isso é ridículo, você deve estar dizendo. Mas no mundo da educação baseada em evidências, coisas parecidas ​​acontecem o tempo todo. Em 2003, Borman et al. fez uma meta-análise de 300 estudos que avaliaram 29 projetos de reforma no sistema educacional. Eles identificaram três estudos que foram muito eficazes. Em vez de celebrá-los e divulgá-los (e continuar a pesquisa e desenvolvimento para achar mais deles), o Congresso dos EUA encerrou o financiamento para a disseminação de programas abrangentes de reforma escolar. 

Outra prática comum em educação é usar os resultados médios obtidos em meta-análises  de toda uma categoria de programas ou políticas, ignorando o fato de que existem alguns programas que são muito diferentes e muito mais eficazes do que a média de todos os programas. Um bom exemplo são as escolas charter (escolas privadas financiadas por recursos públicos). Em uma meta-análise de larga escala, pesquisadores de Stanford (2013) descobriram que na média as escolas charter não produzem efeitos significativos. Uma análise feita em 2015 encontrou effect sizes melhores, mas ainda muito pequenos, nas redes de escolas  urbanas (ES = +0,04 na leitura, +0,05 em matemática). Em 2010, a What Works Clearinghouse publicou um artigo após encontrar resultados negativos, porém discretos, em escolas charter do ensino médio. Essas descobertas são úteis porque nos mostram que as escolas charter não são mágicas nem obtêm resultados positivos somente porque são charter. Apesar disso, as descobertas não dizem nada sobre as escolas charter que são extraordinárias e que usam métodos que outras escolas públicas (inclusive não charter) também poderiam usar. Há evidências mais fortes ligadas a escolas com a política “sem desculpas”, como os programas educacionais KIPP e Success Academies (em inglês), mas entre os milhares de escolas do tipo existentes agora, esse é o único formato que vale a pena replicar? Deve haver algumas “luzes brilhantes” entre todas essas “lâmpadas”.

Como um terceiro exemplo, existem muitos programas de tutoria usados ​​por alunos com dificuldades em leitura e matemática. O tamanho médio dos efeitos de todas as formas de tutoria é de cerca de +0,30, tanto na leitura quanto na matemática. Mas existem abordagens de tutoria de leitura com tamanhos de efeito de +0,50 ou mais. Se esses programas estão disponíveis, por que as escolas não adotariam os melhores programas? Escolher práticas pedagógicas “medianas” é útil para fins de pesquisa, já que sempre calculamos custos e possibilidades, mas eu acreditava que toda escola iria querer usar o melhor para as crianças por um bom custo-benefício.

Eu sempre ouvi professores e diretores dizerem que “os pais nos enviam os melhores filhos que eles têm”. Sim, eles fazem isso, e por esse motivo, é nossa responsabilidade como educadores oferecer a esses jovens os melhores programas que pudermos. Costumamos descrever a educação dos alunos como esclarecedora, como “ acender a lâmpada da sabedoria”. Talvez a melhor maneira de criar um pouco mais de luz seja pegar uma idéia de Edison, o grande mestre: experimente incansavelmente até encontrar o que funciona. Aí então, use o melhor que tiver.

Referências

Borman, G.D., Hewes, G.M., Overman, L.T. & Brown, S. (2003). Reforma e aproveitamento escolar abrangentes: uma meta-análise. Revisão da Pesquisa Educacional, 73 (2), 125-230.