O que podemos aprender se as IAs forem capazes de passar nos exames?

O debate sobre inteligência artificial e os métodos tradicionais de testar habilidades acadêmicas, como exames, rapidamente se tornaram realidade. Pesquisadores do Illinois Institute of Technology e da Stanford University enviou o GPT-4, um modelo de IA desenvolvido pela OpenAI na primavera de 2023.

O robô respondeu a quase 76% perguntas com múltipla escolha. Isso é 7% a mais do que o candidato médio. Você teve um bom desempenho tanto em MCQs quanto na escrita de respostas argumentativas.

Este é um teste especial.

Todas as especialidades universitárias estão envolvidas

Os pesquisadores acreditavam intuitivamente que modelos algorítmicos seriam mais adequados para assimilar conhecimento de campos científicos.

Os acadêmicos da École Polytechnique Federale de Lausanne publicaram um relatório (Nova janela) no final de novembro de 2024 sobre a aplicação de IA generativa aos exames dos 50 cursos EPFL, principalmente aqueles em ciência da computação, matemática, biologia, física ou ciência dos materiais. É um teste para obter um diploma de bacharel (Bac+3) ou um diploma de mestrado (Bac+4).

Aprendendo como um estudante

Como primeiro passo, a IA precisava ser treinada com informações de aulas universitárias, exames passados e modelos de avaliação. Era necessário reunir as informações que um aluno sério buscaria para estudar para um exame. É hora de adquirir conhecimento.

Após os autores terem completado seu estudo, eles começaram a pensar sobre a melhor forma de interrogar a IA. Para obter as melhores respostas, os “prompts”, ou instruções escritas, são usados.

Pesquisadores descobriram que os “prompts” são mais eficazes na interação com a IA.

Cientistas descobriram que as formulações mais simples (ou seja, Cientistas descobriram que as formulações mais básicas, ou seja, Assim que os escritores de prompts têm mais conhecimento sobre o tópico, a pontuação aumenta para 85%.

Uma oportunidade para reconsiderar o ensino

Esses resultados não são simplesmente uma demonstração de que máquinas podem passar em exames. Este é um grande símbolo de como a tecnologia evoluiu, mas não é muito útil para nós.

Acima de tudo, trata-se de como fazer o melhor uso da tecnologia.

É uma chance de reconsiderar as formas como ensinamos. Alunos que dependem muito de ferramentas geradas por IA para suas tarefas não adquirirão o conhecimento básico de que precisam.

É somente com esse tipo de conhecimento que você pode aprender com os melhores.

O tipo de raciocínio que mais tarde será capaz de dar suporte a um mais complexo. Pode parecer uma jogada para economizar tempo, mas pode, na verdade, tornar o aluno menos capaz de entender conceitos mais complexos. Isso resulta em perda de habilidades. Os modelos de IA só vão melhorar e se tornar mais especializados. E assim se tornarão assistentes mais especialistas.

Valorizando a especificidade da mente humana

Em um mundo de IA, esta é uma ótima oportunidade para destacar o que torna as mentes humanas especiais. Esta é a capacidade de usar diferentes tipos de informação para resolver um problema. Isso provavelmente significará que a maneira como as habilidades são medidas na educação precisa ser repensada.

Assuntos de exames não serão mais uma simples recitação de informações dos cursos teóricos. É o mesmo que trabalhar em projetos, onde você precisa recorrer a uma variedade de ideias e habilidades.

Isso significa que estaremos no modo projeto.

As universidades precisarão repensar suas próprias técnicas de ensino. Questionando as disciplinas e áreas que devem ser incluídas em um currículo inicial. Sobre formas revisadas de avaliar conhecimento e sobre maneiras de utilizar de forma cruzada diferentes know-how.

Calculadoras podem ser uma ótima ferramenta para estudantes se forem usadas corretamente. O mesmo deve ser feito com IA. Devemos fazer o mesmo com IA.

Simplifique as tarefas Usando OpenAI e Python