Estudo com 3.132 pessoas mostra que a IA reduz a vontade de dizer "não sei" — e a precisão
Um estudo com 3.132 participantes, publicado dois dias antes deste boletim mas ainda em discussão a 28/09, descobriu que o acesso à IA reduz drasticamente a vontade das pessoas de admitirem incerteza, mesmo quando isso as torna menos precisas.
Em cinco experiências, com perguntas sobre detalhes visuais finos de filmes — o tipo de pergunta em que os modelos de linguagem tendem a alucinar —, os participantes sem acesso a IA reservaram o seu julgamento ("não sei") entre 36% e 44% das vezes; com acesso a IA, essa taxa caiu para 3% a 6%. A confiança subiu 2,5 vezes, mas a precisão caiu de 27,6% de respostas corretas sem IA para apenas 10% com IA.
Incentivos financeiros por resposta certa reduziram modestamente a dependência da IA, sem eliminar o efeito. Segundo os autores, "a vontade de dizer 'não sei' pode estar entre as primeiras vítimas da interação humano-IA".
Fontes
- The Decoder the-decoder.com
Resumo editorial em português feito com apoio de inteligência artificial a partir das fontes indicadas. Como fazemos o Boletim IA.