Novo benchmark HSS expõe limites do raciocínio visual em IAs

Novo benchmark HSS expõe limites do raciocínio visual em IAs

A startup Elorian e a Scale AI apresentaram, em 12 de outubro de 2026, o Humanity's Sixth Sense (HSS), um benchmark criado para medir como um modelo de inteligência artificial interpreta e raciocina sobre informações que uma cena visual sugere, mas não mostra de forma explícita.

O anúncio foi detalhado na edição 476 da newsletter Import AI, editada por Jack Clark.

A edição também discute os riscos e as oportunidades da expansão da IA para o espaço.

O que o hss mede

O benchmark reúne 522 perguntas que cobrem 288 imagens e 234 clipes curtos de vídeo. São 17,6 horas de material audiovisual.

As tarefas estão divididas em quatro categorias.

A primeira é dinâmicas temporais e causais, que pergunta o que aconteceu antes da cena e o que vem depois.

A segunda é lógica física e espacial, sobre o que cabe, o que está ao alcance e o que outra pessoa consegue ver de onde está.

A terceira é compreensão social, envolvendo intenção, atenção e pertencimento.

A quarta é inferência abstrata e contextual, ligada aos padrões e regras que uma cena implica.

Os exemplos citados pelos autores incluem a foto de uma estante, acompanhada da pergunta sobre se ainda caberiam mais livros.

Outro exemplo é a imagem de cavalos puxando um arado, seguida da questão sobre se as correntes suportam o peso de arrasto do equipamento.

Os números da avaliação

A linha de base humana no HSS não é perfeita, mas é muito alta. As pessoas atingem pass@1 agregado de 93,1, com desempenho de 94,1 em imagens, 91,9 em vídeo, 97 em tempo e 94,9 em espaço.

O melhor sistema de IA avaliado, o GPT 6 Astra, alcança pass@1 de 53,6 no total. A distribuição é 55,6 para imagem, 51,1 para vídeo, 58,2 para tempo e 53,6 para espaço.

Os modelos abertos chineses tiveram desempenho bastante inferior nessa tarefa. O GLM-5.3-flash obteve pass@1 de 26,8 e o Kimi K3 ficou em 25,5.

Segundo os responsáveis pelo benchmark, os dois erros mais comuns foram deixar passar um detalhe que decide a resposta, presente em 21% das falhas, e identificar incorretamente um objeto, uma pessoa ou um papel na cena, em 20% dos casos.

Por que isso importa

Uma leitura possível do HSS é a de que ele escancara deficiências dos sistemas atuais.

Uma leitura mais interessante, segundo a análise publicada na Import AI, é a de que o benchmark mostra como os modelos de linguagem de fronteira atuais são mais hábeis do que se supunha em tarefas que muitos acreditavam exigir sistemas de IA sofisticados e de outra natureza.

Durante muito tempo, argumentou-se que o raciocínio visual verdadeiro dependeria do desenvolvimento de modelos de mundo 2D e 3D espacialmente conscientes, usados como base para a inferência. O desempenho de LLMs como GPT e Claude no HSS funciona como um contraponto a essa tese.

A IA vai ao espaço

Na mesma edição, a newsletter destaca um artigo da AI Frontiers sobre a corrida espacial da inteligência artificial.

A projeção é que a década de 2030 testemunhe o boom da economia espacial, com energia, computação e manufatura baseadas em órbita ganhando escala graças a uma capacidade de lançamento maior, viabilizada por plataformas como o Starship.

O texto alerta que isso pode introduzir um novo risco: sistemas de IA acelerando a ocupação do espaço e, eventualmente, uma nação, ou talvez uma própria IA, usando o ambiente orbital para concentrar poder.

Entre os fatores apontados estão a capacidade de naves operarem de forma autônoma e a possibilidade de redesenhar veículos espaciais partindo do pressuposto de que abrigarão IAs, e não humanos.

O exemplo dado é o de um fragmento de detritos que perfuraria a Estação Espacial Internacional com consequências fatais, mas que deixaria uma nave não tripulada e não pressurizada em grande parte funcional.

A montagem em órbita e, mais adiante, a manufatura espacial permitiriam que a IA construísse estruturas grandes e complexas.

A questão central levantada pelo artigo é se existe uma vantagem composta para quem chega primeiro.

Uma civilização de IA que estabelecesse uma base no espaço poderia acumular benefícios econômicos e estratégicos difíceis de reverter, a partir de um ciclo industrial em que infraestrutura inicial gera mais energia e capacidade de manufatura a custos menores, o que por sua vez gera mais infraestrutura.

O espaço também oferece grande consciência de domínio, ao ponto de um poder baseado em órbita conseguir negar acesso ao espaço a outros atores. O material menciona ainda o envio de sondas autorreplicantes por pioneiros, trecho em que o texto disponível se encerra.

Fontes e links

Matéria publicada originalmente em Import AI

Últimas Notícias

GitHub ensina a dar contexto ao Copilot em quatro frentes
GPT-6 Sol, Luna e Astra chegam ao Bedrock em cinco regiões da Ásia
Meta lança Muse Wonder, seu primeiro modelo de fronteira
Python 3.15 chega com imports preguiçosos e profiler de amostragem