Quando se trata de tecnologia educativa, a pergunta de um milhão de reais é: será que realmente ajuda os alunos a aprender? Todos nós sabemos que existem inúmeros aplicativos e plataformas por aí, mas quantos podem provar que fazem a diferença?

Na Khan Academy, temos o compromisso não só de fazer essa pergunta, mas de respondê-la com evidências sólidas. Leia sobre os estudos norte-americanos que demonstram como a Khan Academy leva aos ganhos de aprendizagem.

O desafio de provar a eficácia

Normalmente, as empresas de tecnologia educacional, incluindo a Khan Academy, comparam os alunos que usam sua plataforma com aqueles que não usam. Embora esta abordagem nos dê algumas informações, não é infalível. 

Afinal de contas, podem existir muitos outros fatores em jogo. Talvez os alunos que utilizam a plataforma também tenham aulas de reforço ou talvez tenham professores mais empenhados. 

A realização de um ensaio controlado aleatorizado seria o padrão de ouro para demonstrar a eficácia, mas nem sempre é viável. Imagine tentar encontrar uma escola disposta a atribuir aleatoriamente alunos a diferentes professores e métodos de ensino durante um ano inteiro!

Uma abordagem diferente: Você vs. Você

Por isso, tentamos algo diferente. E se compararmos os alunos com os seus parceiros mais semelhantes – eles próprios?

Acompanhamos o mesmo grupo de alunos durante dois anos letivos para ver como o desempenho deles mudava de ano para ano, dependendo de como o uso da Khan Academy mudava de ano para ano.

Os resultados falam por si

As conclusões foram encorajadoras. Kodi Weatherholtz, principal cientista de pesquisa da Khan Academy, descobriu que os alunos que aumentaram a sua utilização da Khan Academy de um ano para o outro registraram melhorias notáveis nos seus ganhos no teste norte-americano MAP Growth.

Essa foi uma tendência consistente em diferentes séries e grupos demográficos. Devido ao projeto do estudo (comparação entre sujeitos), estes ganhos não podem ser facilmente atribuídos a outras características dos alunos, como a motivação, o que constitui um forte argumento a favor da eficácia da Khan Academy.

Aprofundando sobre o tema

Para quem gosta de detalhes minuciosos, usamos uma medida chamada Índice de Crescimento Condicional (CGI) para acompanhar o crescimento dos alunos. 

Esta medida conta com vários fatores, como as pontuações iniciais e os níveis de ensino, o que a torna um indicador confiável do progresso genuíno da aprendizagem. 

Esta medida também nos permite comparar o crescimento dos alunos em todos os anos de escolaridade numa escala de desvio padrão. 

Os dados mostraram que mesmo um pequeno aumento no uso da Khan Academy pode levar a um aumento significativo nas pontuações CGI. Leia o resumo completo da pesquisa em inglês (pdf).

E o efeito da sala de aula?

É verdade que um aluno no ano letivo de 2022 pode ter tido uma melhor experiência na sala de aula do que no ano letivo de 2021. Será que a melhoria deve-se a esse fato? É possível, mas há duas razões para termos a certeza de que não é esse o caso. 

Em primeiro lugar, nas escolas públicas, os alunos raramente escolhem as suas salas de aula. As mudanças na experiência na sala de aula de ano para ano devem-se em grande parte ao acaso. 

E dado que estamos analisando 100 mil alunos, cerca de metade dos quais aumentaram a sua utilização de ano para ano, é pouco provável que todos esses alunos tenham tido melhores professores no segundo ano. 

Em segundo lugar, para excluir este efeito na nossa análise, levamos em conta o tempo médio que os alunos de um determinado professor passam na plataforma da Khan, bem como as classificações médias que os alunos de um determinado professor obtêm nos seus testes. 

Isso significa que estamos analisando o efeito da mudança no uso sobre a mudança nos ganhos do MAP em todos os professores, e calculamos a média do efeito. E depois de tudo isso, o efeito ainda se mantém. 

E o que que isto significa para você?

Em termos simples, quanto mais utilizar a Khan Academy, mais provavelmente aprenderá. Costumamos dizer para passar pelo menos 30 minutos por semana na Khan. 

Mas o que este estudo quer dizer é que, se já gasta cinco minutos por semana, gastar um pouco mais de tempo – digamos, 10 minutos por semana – será benéfico para você. 

Quer seja um estudante, pai ou educador, esta é uma ótima notícia. Isso significa que o tempo investido na Khan Academy é um tempo bem gasto, levando a ganhos de aprendizado reais e mensuráveis.

Conclusão

O nosso último estudo baseia-se em conclusões anteriores, mostrando que a Khan Academy é uma ferramenta confiável para melhorar os resultados da aprendizagem, mesmo no contexto difícil de uma pandemia. Embora nenhum estudo seja perfeito, as provas sugerem fortemente que a Khan Academy pode desempenhar um papel significativo na melhoria do desempenho acadêmico. 

Saiba mais sobre a investigação e a eficácia da Khan Academy.

Por Bogdan Yamkovenko, gestor de pesquisa de eficácia; Kodi Weatherholtz, cientista principal de eficácia e pesquisa; e Phil Grimaldi, cientista sênior de eficácia e pesquisa da Khan Academy.