Apresentando o CounseLLMe: um conjunto de dados de diálogos simulados de saúde mental para comparar LLMs como Haiku, LLaMAntino e ChatGPT com humanos · Artigo de referência

Título original: Introducing CounseLLMe: A dataset of simulated mental health dialogues for comparing LLMs like Haiku, LLaMAntino and ChatGPT against humans. Pode sustentar semelhança parcial de padrões linguísticos e e…

Como a literatura científica descreve e avalia o uso de sistemas conversacionais de IA generativa, especialmente modelos grandes de linguagem e chatbots baseados em LLMs, em funções de psicoterapia, aconselhamento, psicoeducação, autocuidado em saúde mental ou suporte emocional, e que evidências existem sobre contextos de uso, aceitabilidade, efeitos relatados, segurança, manejo de crise, limitações e salvaguardas?

A literatura disponível descreve usos delimitados de chatbots e IA generativa em saúde mental. No corpus público atual, há sinal baixo a moderado de aceitabilidade e de apoio pontual em contextos de baixo risco, sobretudo quando a tarefa é estruturada e a supervisão humana permanece. Isso não demonstra que esses sistemas “façam terapia” no sentido clínico, nem que sejam seguros em crise ou capazes de substituir psicoterapia humana

Força da evidência: baixa a moderada para apoio pontual, aceitabilidade e usos estruturados ou supervisionados de baixo risco; baixa para benefício clínico sustentado; insuficiente/não demonstrada para segurança em crise e para substituição de psicoterapia humana

Estado público: briefing público pos AR0438 v1

Limitações e transparência metodológica: Esta versão pública continua sendo uma camada conservadora de uma revisão viva. A avaliação de qualidade segue preliminarprogramatica; 229 solicitações humanas permanecem pendentes; 125 registros fulltextexcluded e 16 pendentes já extraídos não entram na sustentação pública; 141 extrações avaliadas ficam fora da sustentação central; permanece uma diferença operacional de 200 registros entre triagem e manifest; a triagem foi conduzida por agentes A/B/árbitro, não por dois revisores humanos independentes; 5 cenários de sensibilidade ainda dependem de julgamento narrativo por falta de colunas estruturadas; 2 registros naoavaliavel recém-recuperados seguem com evidencetype=incerto fora do corpus público aguardando renormalização; e a cobertura de b…

Título editorial em português: Apresentando o CounseLLMe: um conjunto de dados de diálogos simulados de saúde mental para comparar LLMs como Haiku, LLaMAntino e ChatGPT com humanos

Título original: Introducing CounseLLMe: A dataset of simulated mental health dialogues for comparing LLMs like Haiku, LLaMAntino and ChatGPT against humans

O que este artigo pode sustentar: Pode sustentar semelhança parcial de padrões linguísticos e emocionais em inglês e limites fortes por idioma, prompting e consistência

O que este artigo não pode sustentar: Não pode sustentar terapia real, eficácia clínica, segurança, aliança terapêutica ou substituição de profissionais

Alerta metodológico: Dataset útil para testar realismo textual de aconselhamento; sem usuários reais e com falhas de papel/alucinação, vale só como evidência indireta