A inteligência artificial está transformando rapidamente a educação, mas uma questão permanece: a IA pode realmente melhorar o aprendizado dos alunos em vez de simplesmente fornecer respostas? Um estudo recente explora essa questão através de Fósforo, uma plataforma de livros didáticos interativos com inteligência artificial, projetada para incentivar o aprendizado ativo, incorporando questionários e feedback gerado por IA diretamente nos materiais do curso.

Este artigo apresenta os resultados de um estudo piloto realizado em um curso introdutório de estatística no Dartmouth College e oferece informações valiosas sobre como a IA pode ser usada para melhorar o engajamento, a conclusão da leitura e o desempenho acadêmico.

O que é fósforo?

Phosphor é uma plataforma interativa de livros didáticos digitais que integra inteligência artificial diretamente à experiência de aprendizado. Em vez de depender de um chatbot independente, os alunos leem o material do curso enquanto realizam avaliações integradas, recebendo feedback imediato gerado por IA.

A plataforma inclui:

  • Lições interativas de livros didáticos online
  • Questionários incorporados após cada aula.
  • Correção por IA para respostas de texto livre (respostas dissertativas)
  • Questões tradicionais de múltipla escolha
  • questionários de revisão cumulativa
  • Um chatbot com recursos de recuperação aprimorada (RAG) para perguntas relacionadas ao curso.

É importante ressaltar que a participação era totalmente opcional e não contribuía para as notas dos alunos no curso.

O Estudo

O projeto piloto foi realizado em um curso introdutório de estatística com 151 alunos matriculados, dos quais 143 concluíram o curso. Apesar de não haver incentivo financeiro relacionado a notas, os pesquisadores observaram níveis de participação notavelmente altos.

O estudo investigou três questões principais:

  • Será que a IA pode aumentar o envolvimento dos alunos com a leitura de livros didáticos?
  • A avaliação formativa assistida por IA melhora os resultados da aprendizagem?
  • As perguntas abertas são mais eficazes do que os questionários de múltipla escolha?

Alto nível de envolvimento dos alunos

A leitura tradicional de livros didáticos costuma ser deficiente, com os instrutores estimando que apenas cerca de 10 a 15% dos alunos concluem as leituras atribuídas.

Os resultados com fósforo foram substancialmente diferentes.

  • Mais de 90% dos alunos utilizaram a plataforma.
  • A estimativa de conclusão da leitura aumentou drasticamente.
  • Muitos alunos concluíram voluntariamente a maioria das lições, apesar de não receberem créditos pelo curso.

Esses resultados sugerem que a integração de avaliações interativas diretamente nos materiais de leitura pode aumentar significativamente o envolvimento dos alunos.

Um maior envolvimento esteve associado a um melhor desempenho.

Os alunos que interagiram com mais frequência com a plataforma geralmente tiveram um melhor desempenho no exame final.

Os pesquisadores descobriram:

  • Existe uma forte correlação positiva entre a conclusão das aulas e as notas dos exames.
  • Mesmo levando em consideração o desempenho acadêmico anterior, os alunos que completaram mais conteúdo da plataforma obtiveram resultados substancialmente mais altos nos exames finais.

Como a participação foi voluntária, o estudo não pode comprovar que o Phosphor, por si só, causou a melhora. Alunos motivados podem, naturalmente, ser mais propensos tanto a usar a plataforma quanto a ter um bom desempenho acadêmico. Mesmo assim, a associação permaneceu significativa mesmo após ajustes estatísticos.

Questões abertas tiveram melhor desempenho do que questões de múltipla escolha.

Uma das descobertas mais interessantes surgiu de uma comparação inesperada entre diferentes formatos de questionário.

Durante o semestre:

  • O primeiro módulo incluía questões de múltipla escolha e questões de resposta livre com correção automática por inteligência artificial.
  • O segundo módulo baseava-se quase inteiramente em questões de múltipla escolha.
  • O terceiro módulo retomou as avaliações de resposta livre.

Os pesquisadores observaram que o desempenho dos alunos melhorou muito mais durante os módulos que continham questões de resposta construída. Durante a seção composta apenas por questões de múltipla escolha, a realização de questionários adicionais apresentou pouca relação mensurável com o desempenho na prova.

Essa descoberta corrobora pesquisas educacionais que sugerem que gerar respostas ativamente promove uma aprendizagem mais profunda do que simplesmente reconhecer a opção correta.

A importância dos questionários de revisão

Os alunos que completaram os questionários de revisão cumulativa tiveram um desempenho consistentemente melhor do que aqueles que não os completaram.

Os autores atribuem essa melhoria a princípios de aprendizagem bem estabelecidos, incluindo:

  • Prática de recuperação
  • Repetição espaçada
  • Intercalar conceitos previamente aprendidos

Essas técnicas incentivam a retenção a longo prazo em vez da memorização a curto prazo.

Curiosamente, os alunos raramente usaram o chatbot.

Embora o Phosphor incluísse um chatbot de IA capaz de responder a perguntas sobre o conteúdo do curso, os alunos fizeram relativamente pouco uso dele.

De acordo com o feedback dos alunos, vários fatores contribuíram para isso:

  • As ferramentas gerais de IA geralmente eram de acesso mais rápido.
  • O conteúdo da aula já respondeu à maioria das perguntas.
  • Os alunos consideraram os questionários integrados mais úteis do que a IA conversacional.

Isso sugere que a IA pode proporcionar maior valor educacional quando integrada às atividades de aprendizagem, em vez de funcionar como uma assistente independente.

Princípios-chave de design

O artigo argumenta que a IA é mais eficaz quando apoia a aprendizagem ativa, em vez de a substituir. Sistemas de IA educacionais bem-sucedidos devem:

  • Integrar diretamente aos materiais didáticos.
  • Forneça feedback formativo imediato.
  • Avalie as respostas abertas em vez de se basear exclusivamente em questões de múltipla escolha.
  • Incentive a prática de recuperação da informação.
  • Acompanhar o progresso do aluno ao longo do tempo.

Limitações do Estudo

Embora os resultados sejam encorajadores, os autores reconhecem diversas limitações importantes:

  • O estudo foi observacional, e não um ensaio clínico randomizado controlado.
  • Os alunos escolheram se queriam usar a plataforma.
  • A pesquisa foi realizada em uma única universidade.
  • Algumas respostas da pesquisa podem estar sujeitas a viés.
  • As diferenças entre os módulos do curso envolviam mais do que apenas o tipo de questão, o que dificultava a obtenção de conclusões causais.

Conclusão

O estudo da Phosphor sugere que a inteligência artificial tem um potencial considerável para melhorar o ensino superior quando integrada diretamente ao processo de aprendizagem. Em vez de funcionar como um atalho que simplesmente fornece respostas, a IA demonstra ser mais valiosa quando incentiva os alunos a pensar, buscar informações e receber feedback imediato sobre suas próprias respostas.

Talvez a conclusão mais importante seja que a avaliação formativa baseada em IA — e não os chatbots de IA — pode representar o uso mais eficaz de grandes modelos de linguagem na educação.

Artigo de pesquisa original

Você pode ler o artigo completo aqui:

Equilibrando eficácia e engajamento em textos interativos (PDF)