Site do projeto: https://www.brainonllm.com Entrevista com a autora: https://youtu.be/eET6eP3GGAg?si=QGkMTpfZ-ViXfIow Link para o artigo original: https://arxiv.org/pdf/2506.08872 Resumo do artigo: "Com a ampla adoção atual de produtos de LLM como o ChatGPT da OpenAI, humanos...
Site do projeto: https://www.brainonllm.com
Entrevista com a autora: https://youtu.be/eET6eP3GGAg?si=QGkMTpfZ-ViXfIow
Link para o artigo original: https://arxiv.org/pdf/2506.08872
Resumo do artigo: "Com a ampla adoção atual de produtos de LLM como o ChatGPT da OpenAI, humanos e empresas se envolvem e usam LLMs diariamente. Como qualquer outra ferramenta, ela apresenta suas próprias vantagens e limitações. Este estudo se concentra em descobrir o custo cognitivo do uso de um LLM no contexto educacional da escrita de uma redação.
Distribuímos os participantes em três grupos: grupo LLM, grupo Mecanismo de Busca e grupo Cérebro-Apenas, onde cada participante utilizou uma ferramenta específica (ou nenhuma ferramenta neste último caso) para escrever uma redação. Realizamos 3 sessões com a mesma tarefa de grupo para cada participante. Na 4ª sessão, pedimos aos participantes do grupo LLM que não utilizassem nenhuma ferramenta (chamamos de LLM-para-Cérebro), e aos participantes do grupo Cérebro-Apenas foi solicitado que utilizassem o LLM (Cérebro-para-LLM). Recrutamos um total de 54 participantes para as Sessões 1, 2 e 3, e 18 participantes, entre eles, concluíram a sessão 4.
Utilizamos a eletroencefalografia (EEG) para registrar a atividade cerebral dos participantes, a fim de avaliar seu engajamento e carga cognitiva, e para obter uma compreensão mais aprofundada das ativações neurais durante a tarefa de redação. Realizamos análises de PNL e entrevistamos cada participante após cada sessão. Realizamos a pontuação com a ajuda de professores humanos e um juiz de IA (um agente de IA especialmente desenvolvido)."
Fazendo a social da Mila
Bluesky: mila.bsky.social
Instagram: @milalaranjeira
Fazendo a social da Vivi
Twitter: avivimota.bsky.social
Instagram: @avivimota
Perfis oficiais do canal:
@canalpeixebabel em todas as redes!
Sumário:
00:00 Introdução
01:24 Natureza do trabalho
02:04 Grupos investigados
03:02 Etapas iniciais
03:49 Escrita de redações
05:45 Troca de papéis (Sessão 4)
07:17 Pesquisas similares
08:03 Resultados: Citando a redação
09:23 Resultados: Senso de autoria
10:25 Resultados: Mapeamento cerebral
12:15 Resultados: Sessão 4
14:02 Resultados: Processamento de Linguagem Natural (NLP)
15:23 Câmaras de eco em modelos de linguagem
17:04 Resultados: Mapeamento cerebral na sessão 4
18:03 "Ninguém nasce sênior"
19:02 Resultados: Mapeamento cerebral na sessão 4
20:16 Textos superficiais
20:32 Débito cognitivo
22:00 Impressões da Vivi
23:43 Pesquisas similares: Artigo 1
24:44 Pesquisas similares: Artigo 2
25:40 Conclusões
