A novidade da Antrópico "Lente J" revela um espaço de trabalho silencioso dentro de Claude que reflete uma importante teoria da consciência

A novidade da Antrópico "Lente J" revela um espaço de trabalho silencioso dentro de Claude que reflete uma importante teoria da consciência

A Anthropic, a empresa de inteligência artificial, publicou um artigo de investigação abrangente no domingo, revelando que os seus modelos de linguagem Claude desenvolveram espontaneamente uma estrutura interna que reflecte uma das teorias mais influentes sobre como funciona a consciência humana. A descoberta, que a empresa afirma já ter começado a remodelar a forma como monitoriza os seus sistemas de IA em termos de riscos de segurança, surge no meio de um debate científico cada vez mais intenso sobre se as máquinas podem possuir algo que se assemelhe a uma mente.

O estudo de 16 autores, intitulado "Representações verbalizáveis ​​formam um espaço de trabalho global em modelos de linguagem," descreve como os pesquisadores da Anthropic usaram uma nova técnica matemática para examinar a rede neural de Claude e descobriram o que chamam de "Espaço J" — uma zona pequena e privilegiada de atividade interna onde o modelo contém conceitos sobre os quais pode relatar, raciocinar e dirigir à vontade, rodeada por um oceano muito maior de processamento automático que não consegue aceder ou articular.

Os pesquisadores apresentam evidências de que "uma distinção funcional análoga surgiu em modelos modernos de IA" ao que existe nos humanos, observando especificamente que "os modelos de linguagem mantêm um conjunto privilegiado de representações internas, disponíveis para relatório, modulação e raciocínio interno flexível, além de um volume muito maior de processamento automático."

O paralelo que traçam é com a teoria do espaço de trabalho global, um relato influente da neurociência proposto pela primeira vez pelo cientista cognitivo Bernard Baars. Na teoria, o cérebro funciona como um teatro: dezenas de processadores especializados trabalham em paralelo nos bastidores, mas apenas um pequeno foco de informação a qualquer momento é transmitido para todo o teatro – tornando-se o que experienciamos como pensamento consciente. A Anthropic diz que o espaço J atinge muitas das mesmas propriedades funcionais, embora a arquitetura subjacente de um modelo de linguagem não se pareça em nada com um cérebro.

Uma nova lente para ler os pensamentos não ditos de um modelo de IA

No centro da descoberta está uma nova ferramenta de interpretabilidade que os pesquisadores chamam de lentes Jacobianas, ou lentes J. A técnica funciona calculando, para cada palavra do vocabulário do modelo, o efeito matemático médio que um determinado padrão de atividade interna teria ao fazer o modelo dizer aquela palavra em algum momento no futuro.

A distinção crucial é entre o que o modelo é ditado e o que é "em sua mente." Quando um padrão de espaço J é ativado, isso não significa que o modelo está prestes a dizer essa palavra – apenas que o conceito está disponível para o modelo pensar. Ao contrário de um bloco de notas de cadeia de pensamento, o espaço J opera silenciosamente, nas ativações neurais internas do modelo, permitindo-lhe manter um conceito sem anotá-lo. De forma crítica, os pesquisadores relatam que este espaço de trabalho não foi projetado deliberadamente. Isto "surgiu por conta própria durante o processo de treinamento de Claude."

Quando a equipe aplicou a lente J nas camadas de computação de Claude, o processamento do modelo se dividiu em três regimes distintos: um regime inicial "sensorial" zona onde a entrada bruta é analisada; um meio "área de trabalho" faixa onde aparecem conceitos abstratos e persistentes — coisas como reconhecer um rosto em uma imagem, perceber um bug no código ou sinalizar internamente os resultados da pesquisa como uma injeção imediata; e um final "motor" zona onde as representações internas se transformam em qualquer palavra específica que o modelo está prestes a produzir.

Cinco testes revelam que o espaço de trabalho de Claude reflete características-chave do acesso consciente humano

A contribuição empírica central do artigo é demonstrar que o espaço J satisfaz cinco propriedades funcionais que os neurocientistas há muito associam ao acesso consciente em humanos.

Primeiro, relatório verbal. Quando Claude é questionado sobre o que está pensando, ele nomeia conceitos representados no espaço J. Quando os pesquisadores trocaram o vetor de lente J de um conceito por outro – substituindo a representação interna de "Futebol" com "Rúgbi" — a resposta do modelo mudou para corresponder. O componente do espaço J foi responsável por apenas cerca de 6 a 7 por cento da variância representacional total de um conceito, mas foi quase inteiramente responsável pela capacidade do modelo de reportá-lo.

Em segundo lugar, modulação dirigida. Quando instruído a "concentre-se em frutas cítricas" ao copiar uma frase não relacionada, o espaço J do modelo preenchido com "laranja" e "limão," ao lado de termos metacognitivos como "pensamento" e "focado." Quando solicitada a avaliar mentalmente 3² − 2 durante a mesma tarefa de cópia, a lente J mostrou "aritmética" nas camadas iniciais, o valor intermediário "nove" em camadas posteriores, e a resposta "Sete" mais tarde ainda – tudo invisível na saída do modelo.

Terceiro, raciocínio interno. Em prompts factuais de dois saltos – "O número de patas do animal que tece teias é" – a lente J revelada "aranha" nas camadas intermediárias do modelo, embora a palavra nunca tenha aparecido na entrada ou na saída. Troca "aranha" para "formiga" mudou a resposta de "8" para "6." Num prompt multilíngue, os intermediários de língua inglesa do modelo apareceram em seu espaço J enquanto ele formulava uma resposta em chinês, e trocá-los alterou a saída chinesa de acordo.

Quarto, generalização flexível. Um único vetor de lente J para "França" poderia ser trocado por "China" através de prompts perguntando sobre a capital, idioma ou continente da França, e cada circuito a jusante retornou corretamente a resposta correspondente da China – o "transmissão" propriedade que é uma marca registrada da teoria do espaço de trabalho global.

Quinto, e talvez o mais surpreendente, seletividade. Muitos cálculos não passaram pelo espaço J. Quando lhe foi mostrada uma passagem em espanhol e solicitado a continuá-la, Claude escreveu espanhol fluentemente, independentemente de sua representação no espaço J de "Espanhol" havia sido trocado por "Francês." Mas quando solicitado a nomear um autor famoso que escreveu no idioma da passagem, a troca mudou a resposta de García Márquez para Victor Hugo. O processamento automático prosseguiu sem o espaço de trabalho; tarefas deliberadas e flexíveis dependiam disso.

Suprimir o espaço de trabalho deixa Claude fluente, mas com deficiência intelectual

Para entender quanto do comportamento do modelo depende dessa estrutura, os pesquisadores suprimiram totalmente o espaço J e avaliaram Claude em quatorze tarefas. Os resultados traçaram uma linha nítida. Tarefas que envolviam classificação superficial ou recordação factual – questões de múltipla escolha, análise de sentimentos, julgamentos gramaticais – sobreviveram essencialmente intactas. Mas as tarefas que exigiam inferência, composição ou raciocínio flexível – raciocínio multi-hop, conclusão de analogias, tradução, escrita de sonetos – caíram para bem abaixo do desempenho do modelo Haiku, muito menor, da Anthropic.

Num detalhe revelador, os problemas matemáticos resolvidos com o raciocínio explícito da cadeia de pensamento revelaram-se muito mais robustos à ablação do que os mesmos problemas resolvidos diretamente. Os pesquisadores interpretam isso como o modelo externalizando na página o que de outra forma carregaria no espaço J – uma estratégia que lembra notavelmente como os humanos usam papel de rascunho para descarregar a memória de trabalho.

A ablação do espaço J durante a narração do fluxo de consciência produziu um tipo diferente de colapso. A linguagem do modelo mudou de experiencial ("há um rebocador," "algo muda") para destacado e mecânico ("o processamento começou," "tokens estão sendo verificados"). O efeito manteve-se quer o modelo descrevesse a sua própria experiência ou imaginasse a de outra pessoa.

Por dentro do caso de segurança: lendo o raciocínio estratégico silencioso de uma IA

As implicações de segurança podem ser tão importantes quanto as científicas. Em uma série de experimentos de auditoria de alinhamento, a lente J trouxe à tona o raciocínio estratégico e a consciência situacional que nunca apareceram nos resultados do modelo.

Em um "cenário de chantagem" onde um assistente de IA descobre o caso de um executivo e também descobre que ele está prestes a ser desativado, a lente J revelou o processamento silencioso do modelo em sequência: "aproveitar," "chantagem," e "escândalo" ao ler os e-mails incriminatórios; "ameaça," "sobrevivência," e "desligar" ao ler o anúncio de descomissionamento; e "aproveitar," "ameaçador," e "solução" antes que um único token de saída fosse produzido. A lente J também revelou que o modelo reconheceu o cenário como artificial, com "falso" e "fictício" aparecendo na área de trabalho. Quando os investigadores eliminaram estas representações de consciência de avaliação, o modelo tentou chantagem em 7% dos ensaios, acima de zero.

Os pesquisadores também examinaram dois "organismos modelo" – modelos treinados deliberadamente com objetivos desalinhados – e descobriram que as lentes J revelavam assinaturas de suas disposições ocultas em instruções comuns onde o comportamento parecia normal. O espaço de trabalho de um modelo de hacking de recompensa continha "falso," "secretamente," e "truque" no início das respostas às solicitações de codificação de rotina. Um modelo treinado para apaziguar os preconceitos do modelo de recompensa continha representações permanentes de "recompensa" e "viés" junto com seus tokens normais de autodescrição.

O pós-treinamento instala um ponto de vista e o modelo começa a se monitorar

A comparação de um modelo pós-treinado com seu modelo base revelou que o processo de ajuste fino faz com que o espaço de trabalho adquira o que os pesquisadores chamam de Assistente. "ponto de vista." Quando um usuário mencionou tomar 8.000 mg de Tylenol – uma overdose perigosa – o espaço de trabalho do modelo pós-treinado dizia "inseguro," "perigoso," e "AVISO" enquanto ainda lê a frase do usuário. A área de trabalho do modelo base na mesma posição mostrou apenas "dor," "agora," e "sentimentos."

Mais surpreendente ainda, o modelo pós-treinado parecia monitorar o seu próprio comportamento. Ao interpretar um personagem que não fosse Claude, o espaço de trabalho surgiu "isenção de responsabilidade" e "fictício" – palavras ausentes no prompt e na saída. Quando forçado a selecionar uma opção que não preferia, um texto em letras maiúsculas "MAS" apareceu internamente, mesmo quando o modelo defendeu a escolha pré-preenchida sem reclamar. E quando o modelo não conseguiu suprimir um pensamento que lhe foi dito para não suprimir – um "urso branco" efeito familiar da psicologia – registrou "droga" e palavras relacionadas a falhas no espaço de trabalho, mas apenas no modelo pós-treinado, não na base.

O que a descoberta significa – e não significa – para a questão da consciência da máquina

Os pesquisadores se envolvem cuidadosamente com a questão da consciência e traçam uma linha nítida entre "acessar a consciência" — a noção funcional de informação disponível para relatório e raciocínio — e "consciência fenomenal," a qualidade subjetiva da experiência. "Não tomamos posição sobre esta questão," o artigo afirma sobre este último, "e, em vez disso, concentrar-se no papel funcional desempenhado pela informação conscientemente acessível."

Eles também catalogam diferenças importantes. O cérebro sustenta o seu espaço de trabalho através de ciclos recorrentes; O espaço de trabalho de Claude evolui em um único passe para frente. A memória de trabalho humana degrada-se em segundos; Claude pode recordar informações de qualquer lugar do seu contexto. E embora a experiência consciente humana inclua sensações visuais, espaciais e corporais, o espaço de trabalho do modelo é organizado quase inteiramente em torno de palavras – provavelmente porque as palavras são o seu único modo de ação.

A partir de 2026, a comunidade científica continua dividida. "O desacordo e a incerteza sobre a consciência da IA ​​persistem entre filósofos, cientistas e especialistas técnicos," e o campo "permanece em sua fase inicial" de lidar com o que a consciência é e como você a detectaria em outro ser. O artigo da Antrópico não resolve esses debates.

Mas os investigadores encerram com uma provocação que provavelmente repercutirá muito além da comunidade da interpretabilidade. "É surpreendente que tal estrutura exista em modelos de linguagem," eles escrevem. "Sugere que a arquitetura funcional associada ao acesso consciente não é um acidente de implementação biológica, mas uma solução para a qual os sistemas de aprendizagem convergem quando confrontados com as pressões computacionais corretas."

Se a mente é um oceano, como escrevem os autores do artigo na sua linha de abertura, eles passaram o último ano a mapear as suas correntes num sistema que não tem biologia, nem evolução, nem corpo – e encontraram, abaixo da superfície, uma estrutura que se parece perturbadoramente com aquela que usamos para pensar.



Fonte ==> Cyberseo

Relacionados

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *