Na segunda-feira, a Ordem dos Advogados da Califórnia revelou que usou a IA para desenvolver uma parte das perguntas de múltipla escolha em seu exame de bar de fevereiro de 2025, causando indignação entre os professores da faculdade de direito e os compradores de testes. A admissão ocorre após semanas de queixas sobre problemas técnicos e irregularidades durante a administração do exame, relata o Los Angeles Times.
A barra estadual divulgou que seu psicométrico (uma pessoa ou organização qualificada na administração de testes psicológicos), a ACS Ventures, criou 23 das 171 perguntas de múltipla escolha com assistência de IA. Outras 48 perguntas vieram de um exame de estudante de direito do primeiro ano, enquanto os serviços de exame de Kaplan desenvolveram as 100 perguntas restantes.
A Ordem do Estado defendeu suas práticas, dizendo ao LA Times que todas as perguntas foram submetidas a revisão por painéis de validação de conteúdo e especialistas no assunto antes do exame. “As perguntas da ACS foram desenvolvidas com a assistência da IA e posteriormente revisadas pelos painéis de validação de conteúdo e um especialista em assuntos antes do exame”, escreveu o diretor executivo do Bar Leah Wilson em um comunicado à imprensa.
Segundo o LA Times, a revelação provocou fortes críticas de vários especialistas em educação jurídica. “O desastre que foi o exame de bar de fevereiro de 2025 é pior do que imaginávamos”, disse Mary Basick, reitora assistente de habilidades acadêmicas da Universidade da Califórnia, Irvine School of Law. “Estou quase sem palavras. Ter as perguntas elaboradas por não advogados usando inteligência artificial é inacreditável”.
Katie Moran, professora associada da Escola de Direito da Universidade de São Francisco, especializada em preparação para exames de barra, chamou de “uma admissão impressionante”. Ela ressaltou que a mesma empresa que redigiu as perguntas geradas pela IA também as avaliou e as aprovou para uso no exame.
O estado do estado defende perguntas assistidas pela AI em meio a críticas
Alex Chan, presidente do Comitê de Examinadores de Barra do Bar da Barra de Estado, observou que a Suprema Corte da Califórnia havia instado a Ordem do Estado a explorar “novas tecnologias, como inteligência artificial” para melhorar a confiabilidade e a efetividade dos testes.