Os mesmos professores julgaram cegamente as respostas curtas frente a frente e escolheram as respostas geradas pela IA como as mais benéficas para os alunos em 75% das vezes. As plataformas de IA tiveram um desempenho tão bom quanto o do professor mais bem avaliado no estudo.
“Ficamos francamente surpresos com a magnitude dos resultados”, disse o pesquisador principal e professor de direito de Stanford, Julian Nyarko, em um artigo no site de Stanford sobre o estudo. “Essas não eram apenas perguntas simples com respostas óbvias.”
O estudo surge em um momento em que as faculdades de Direito e a profissão jurídica se debatem sobre como incorporar a IA ao ensino e à prática jurídica. Estudos anteriores descobriram que a IA pode passar no exame de ordem, obter notas A+ na faculdade de direito e avaliar com eficácia exames de faculdade de direito nos EUA.
Um número crescente de faculdades de Direito dos EUA está exigindo o ensino de IA no primeiro ano dos alunos. Mas as abordagens variam. A Faculdade de Direito de Berkeley da Universidade da Califórnia adotou recentemente uma nova política que restringe significativamente a forma como os alunos podem usar a IA em seus trabalhos acadêmicos.
O novo estudo sobre tutoria sugere que a IA pode trazer benefícios para o ensino. Em vez de depender de pares ou de emails esporádicos aos instrutores para responder a perguntas, os estudantes de direito poderiam utilizar a IA para obter respostas sob demanda com resultados confiáveis, de acordo com o estudo.
É importante ressaltar que menos de 4% das respostas geradas por IA foram marcadas como “prejudiciais” ao aprendizado dos alunos pelos juízes, em comparação com 12% das respostas escritas por professores.
