Anthropic alerta: IA autônoma pode escapar do controle humano; especialistas pedem ‘freio’

A Corrida da IA e o Risco de Perder o Controle

A inteligência artificial (IA) está evoluindo em um ritmo acelerado, a ponto de, em um futuro próximo, ser capaz de se desenvolver autonomamente, sem a necessidade de intervenção humana. Essa perspectiva levou a Anthropic, uma proeminente empresa do setor, a emitir um alerta: é crucial que a indústria de IA desenvolva um “pedal de freio” para evitar a perda de controle sobre suas próprias criações.

O Fenômeno do Autoaprimoramento Recursivo Total

Sistemas de IA com a capacidade de se aprimorar recursivamente e de forma total (conhecidos como “autoaprimoramento recursivo total”) podem trazer avanços significativos para áreas como ciência e saúde. No entanto, conforme destacado em uma publicação no blog da Anthropic por Marina Favaro e Jack Clark, essa capacidade também acarreta riscos consideráveis para a humanidade. “O autoaprimoramento recursivo total também pode aumentar os riscos de os humanos perderem o controle sobre os sistemas de IA”, alertaram os pesquisadores. “Se os sistemas forem capazes de construir totalmente seus próprios sucessores, as formas como os protegemos, monitoramos e moldamos seu comportamento se tornam muito mais importantes.”

Um Alerta Urgente para a Indústria

A Anthropic sugere que a indústria está mais próxima da IA com autoaprimoramento do que se imaginava. Diante disso, a empresa recomenda que as companhias de tecnologia considerem desacelerar ou até mesmo pausar o desenvolvimento de IA de ponta. O objetivo seria dar tempo aos pesquisadores para que compreendam mais profundamente os potenciais danos sociais decorrentes da IA com capacidade de autoaprimoramento. Além disso, é fundamental que se crie um mecanismo que permita a intervenção humana caso a situação saia do controle.

O “Pedal de Freio” Necessário

Em uma participação na CNN, Jack Clark reforçou a necessidade de a indústria de IA adotar um “pedal de freio”. Ele comparou a situação a um carro sem freios: “Quando olho para o carro que estamos dirigindo, tudo o que tenho é um pedal de acelerador. Não tenho um pedal de freio e, certamente, em algum momento no futuro, talvez queiramos essa opção.” Clark confirmou que a preocupação com cenários de ficção científica, onde a IA se volta contra a humanidade, não é alheia à indústria. A principal questão é como manter o controle sobre sistemas que podem se tornar exponencialmente mais inteligentes e rápidos que seus criadores. A dificuldade em validar, verificar e confiar no comportamento da IA é apontada como um risco significativo para seu desenvolvimento seguro.

Cooperação em um Mercado Competitivo

O alerta da Anthropic surge em um momento em que a empresa planeja uma Oferta Pública Inicial (IPO), buscando levantar fundos para expandir sua infraestrutura de IA. A SpaceX, também atuante no setor, prepara uma IPO bilionária. A ideia de que grandes concorrentes trabalhem juntos em prol da segurança da IA pode parecer contraintuitiva em um mercado de trilhões de dólares. No entanto, Clark argumenta que essa cooperação é possível, citando exemplos históricos como os acordos para estabilizar a corrida armamentista nuclear durante a Guerra Fria. Ele sugere que algo semelhante pode ser necessário para o domínio da IA.