Por Bogdan Yamkovenko e Kodi Weatherholtz
Nossa pesquisa recente, quase experimental, destaca o impacto significativo que o Khan Academy pode ter no crescimento dos alunos, oferecendo insights valiosos para os professores que decidem como integrá-lo em suas salas de aula.
Destaques do estudo:
- Aumentos graduais: Incentive os alunos a focarem em dominar mais habilidades a cada ano. Até mesmo pequenos aumentos na proficiência das habilidades podem levar a melhorias notáveis. Por exemplo, dominar uma habilidade a mais do que no ano anterior resulta em um aumento médio de 0,5 ponto percentual na porcentagem de ganho alvo.
- Fechando lacunas de aprendizado: A prática regular no Khan Academy pode ajudar os alunos a diminuir as lacunas de desempenho, mas é importante entender que melhorias significativas requerem esforço contínuo.
- Benefícios universais: O estudo sugere que todos os alunos, independentemente de seu histórico ou apoio externo, podem se beneficiar do aumento do engajamento com o aprendizado no Khan Academy.
Ficar para trás em matemática
Sabemos que os dados mais recentes sobre os resultados de testes mostram que muitos alunos estão com desempenho abaixo das expectativas para sua série.
Um relatório recente da NWEA para o ano letivo 2023-2024 indica que os ganhos em matemática ainda são de 2% a 14% menores do que eram antes da pandemia (Lewis e Kuhfeld, 2024).
De fato, os dados do nosso recente estudo MAP Accelerator, iniciativa da Khan Academy americana, afirma que os alunos geralmente alcançam apenas 86% de suas metas de crescimento em um ano.
Os resultados da nossa pesquisa mais recente oferecem insights sobre o que é necessário para ajudar os alunos a recuperar o tempo perdido.
veja o exemplo acima, quanto em porcentagem houve crescimento no aprendizado ao longo dos anos letivos.
Resultados de um estudo quase experimental de três anos
Nosso estudo recente, quase experimental, acompanha os mesmos alunos ao longo de três anos e analisa como os ganhos dos alunos mudam ano após ano, à medida que aumentam ou diminuem o uso do Khan Academy.
Neste caso, observamos especificamente como os ganhos no teste MAP Growth variam ano após ano quando os alunos aprendem mais ou menos habilidades em um curso relevante da Khan Academy do que no ano anterior.
Em nossa plataforma, aprender uma habilidade é medido ao alcançar o nível de proficiência ou domínio dessa habilidade.
Frequentemente, os estudos em edtech analisam apenas um ano de dados de desempenho porque é difícil acompanhar os alunos por vários anos. Nesses estudos, também é possível comparar apenas os alunos que usam a ferramenta com outros alunos que não a utilizam.
A principal limitação é que os alunos com uso alto normalmente são muito diferentes dos alunos com uso baixo em vários atributos que não podemos contabilizar no estudo.
Mas em um estudo como o que descrevemos aqui, cada aluno é acompanhado por vários anos, e comparamos os ganhos de cada aluno com seus ganhos um ano ou mais antes.
Ao comparar os alunos consigo mesmos, podemos eliminar fatores como motivação dos alunos.
Ou até mesmo características dos professores e focar no efeito do aumento ou diminuição do uso do Khan Academy (veja este blog para saber por que isso funciona).
Uma metodologia poderosa
Esta é uma metodologia poderosa que ajuda a abordar uma das críticas mais comuns aos estudos de edtech—que as ferramentas de edtech só funcionam para alunos motivados.
Neste estudo, incluímos todos os alunos, independentemente de quanto eles usaram o Khan Academy. Estudos como esse são considerados um passo abaixo dos Ensaios Clínicos Randomizados (RCT), que são frequentemente vistos como o padrão de ouro nos métodos de pesquisa.
A NWEA publica as expectativas de crescimento de outono para primavera para alunos que fazem o teste MAP Growth. Por exemplo, espera-se que um aluno médio do 5º ano ganhe ~10 pontos entre os testes de outono e primavera (veja as normas da NWEA – em inglês).
Mas, tipicamente, os alunos não atingem o esperado. Esse mesmo aluno do 5º ano, que ganhou oito pontos entre outono e primavera, está com cerca de 80% de seu ganho esperado ou alvo.
Esperaríamos que, se esse mesmo aluno se tornasse proficiente em mais habilidades no Khan Academy no ano seguinte, ele se aproximasse de seu crescimento alvo ou até o superasse. E é exatamente isso que vemos nos resultados do nosso estudo.
Quando um aluno se torna proficiente em uma habilidade a mais do que aprendeu no ano passado, em média, ele aumenta sua porcentagem do alvo em cerca de 0,5 pontos percentuais.
Em outras palavras, ele ganha mais do que ganhou no ano passado e se aproxima do seu ganho esperado. Em alguns casos, dependendo de quantas habilidades a mais ele aprenda, ele pode ultrapassar seu ganho alvo.
Isso significa que praticar ainda algumas habilidades a mais no Khan Academy pode ajudar os alunos a fechar suas lacunas e alcançar seus colegas. Essa descoberta é verdadeira para alunos de diferentes grupos demográficos. Para detalhes técnicos, veja nosso artigo recente (em inglês) que foi aceito e apresentado na ECTEL 2024.
Analise o impacto no progresso dos alunos americanos no “Enem norte-americano” ao avançar nas habilidades da Khan Academy.
O que isso significa para um aluno em sala de aula?
Considere um aluno do 5º ano que trabalhou apenas em uma unidade do curso de matemática do 5º ano no Khan Academy e se tornou proficiente em 10 habilidades dessa unidade, além de tudo o que o professor pediu para ele fazer em sala de aula.
O curso completo tem 130 habilidades, então o progresso desse aluno é bem pequeno. Suponha que esse aluno termine o ano letivo com ganhos no MAP Growth que correspondem a 80% do alvo do 5º ano.
Agora, suponha que no ano seguinte ele se torne proficiente em 40 habilidades de matemática do 6º ano. Isso representa 30 habilidades a mais do que ele aprendeu no ano anterior.
Com base na nossa pesquisa, que indica que cada nova habilidade aprendida com proficiência ou domínio resulta em um aumento de 0,5 ponto percentual no aprendizado, esperaríamos que esse aluno se aproximasse 15 pontos percentuais do seu alvo.
Assim, este ano ele deveria estar ganhando cerca de 95% do alvo. Se o aluno fizer ainda mais progresso no curso, ele poderia realmente alcançar ou até superar seu alvo e ganhar mais do que o esperado.
No Khan Academy, queremos acelerar o aprendizado dos alunos. Empoderamos os alunos para que atendam às suas necessidades individuais de aprendizagem por meio de prática focada nas habilidades que eles precisam aprender.
Se os alunos estão atrasados, podemos ajudá-los a alcançar o nível esperado. Se eles já estão no nível de série, podem ir ainda mais longe.
Nosso estudo mostra que, independentemente de quem você seja como aluno – onde você mora, quem é o seu professor, quanto apoio você recebe de adultos – passar ainda um pouco mais de tempo ou se tornar proficiente em algumas habilidades a mais no Khan Academy pode levar a ganhos mais altos.