Um novo benchmark chamado FratBench revelou que a OpenAI tem o pior desempenho em calibração social entre os principais modelos de linguagem testados. O estudo avaliou como os LLMs interpretam nuances interpessoais e respondem a contextos sociais complexos, áreas onde a OpenAI surpreendentemente ficou em último lugar. Essa performance abaixo da média expõe lacunas críticas no treinamento e alinhamento dos modelos, especialmente para desenvolvedores e empresas que dependem desses sistemas para interações humanizadas. O resultado sugere que mesmo as empresas líderes em IA ainda enfrentam desafios significativos para replicar a compreensão social humana. Especialistas apontam que essa deficiência pode afetar desde chatbots de atendimento até assistentes virtuais corporativos, exigindo ajustes urgentes nos métodos de treinamento.
IA17 de março de 2026 às 03:08Por Redação ELOVIRAL29 leituras
OpenAI fica em último lugar em benchmark de calibração social
Relacionados
E
China publica modelos open-weight e pressiona OpenAI e rivais dos EUA
E
Superelmer processa Memes.ai por vender quadrinho como template de anúncio IA
E
Jason Gibson reprova 32 alunos com instrução oculta contra uso de IA
E
LessWrong aponta falhas recorrentes de alinhamento na OpenAI com GPT-4o e o3
E
CEO da Moonshot diz que OpenAI não inventou nada após carta de Altman
E
Guardian e estudo da Anthropic afastam apocalipse imediato de empregos pela IA
E