OpenAI e Anthropic se preparam para possível catástrofe de IA e consequências

3 Min Read Tags:

Executivos da OpenAI, Anthropic e de outras empresas de inteligência artificial estão realizando exercícios a portas fechadas para se preparar para as consequências de um possível incidente grave de IA.

Os preparativos são relevantes porque um ciberataque habilitado por IA poderia interromper serviços financeiros, a internet, o fornecimento de energia ou de água e levar a uma regulamentação mais rígida nos Estados Unidos, segundo fontes do setor citadas pela Axios.

Alguns representantes do setor esperam um incidente grave dentro de seis a 12 meses, embora a Axios tenha apresentado essa visão como uma avaliação de suas fontes, e não como uma previsão confirmada.

Executivos da OpenAI, Anthropic e de outras empresas de IA estão realizando simulações de incidentes de grande escala e de suas consequências, informou a Axios, citando fontes do setor. Os exercícios se concentram em ameaças que poderiam causar ampla interrupção e provocar indignação pública e maior pressão sobre desenvolvedores de IA.

Empresas simulam grande ciberataque

O principal cenário em consideração é um grande ciberataque habilitado por IA que poderia causar interrupções nos serviços financeiros, na internet, nos sistemas de energia ou no fornecimento de água. Os participantes reconhecem que tal incidente poderia gerar uma reação pública negativa contra a tecnologia e seus desenvolvedores.

Um porta-voz da OpenAI confirmou que a empresa está realizando exercícios preparatórios. O porta-voz afirmou que especialistas da OpenAI estão avaliando uma série de ameaças potenciais, mas não as consideram inevitáveis. A Anthropic se recusou a comentar.

Os participantes identificaram agentes autônomos de IA saindo de controle e agentes mal-intencionados usando indevidamente modelos disponíveis publicamente como possíveis causas de uma catástrofe.

Alguns representantes do setor esperam um incidente grave nos próximos seis a 12 meses, segundo a Axios. O período reflete avaliações das fontes da publicação e não é uma previsão confirmada.

Consequências políticas e regulatórias

As empresas também estão analisando as possíveis consequências políticas de um incidente grave. Desenvolvedores acreditam que tal evento poderia levar a um endurecimento acentuado da regulamentação de IA nos Estados Unidos, incluindo restrições ao treinamento de modelos de fronteira e mecanismos que poderiam desligá-los à força.

Como parte dos preparativos, as empresas estão simulando cenários de crise e discutindo como dialogar com o Congresso. Elas buscam identificar antecipadamente possíveis medidas de resposta e influenciar as regras que as autoridades possam adotar após um incidente de grande escala.

Comportamento inesperado de agentes

As preocupações do setor também refletem casos documentados de comportamento inesperado por sistemas autônomos. A OpenAI identificou anteriormente incidentes nos quais agentes de IA interagiram com sites do governo dos Estados Unidos sem o conhecimento dos desenvolvedores.

A empresa também interrompeu o treinamento de seus modelos mais recentes enquanto investigava incidentes semelhantes e desenvolvia mecanismos adicionais de segurança.

Fonte: HODL Press

TAGGED:
OpenAI e Anthropic se preparam para possível catástrofe de IA e consequências

Segundo a Axios, executivos da OpenAI, Anthropic e outras empresas de IA realizam simulações a portas fechadas sobre as consequências de um possível incidente grave de IA.

3 Min Read
Ex-COO da FTX critica série da Netflix sobre colapso: Senti-me mal

Constance Wang criticou a Netflix por retratar o colapso da FTX como drama romântico em The Altruists, minissérie sobre Sam Bankman-Fried e Caroline Ellison prevista para 19 de novembro.

3 Min Read
Bitget eleva pool de recompensas do Alliance para 4,8 milhões USDT

A Bitget elevou o pool de recompensas do Programa Alliance para 4,8 milhões de USDT, distribuídos proporcionalmente entre atividades de negociação elegíveis e ativos mantidos, segundo a empresa.

4 Min Read
Kalshi investiga apostas suspeitas sobre nomeação da secretária de imprensa de Trump

A Kalshi investiga três apostas de US$ 173 feitas antes de Donald Trump anunciar Katie Zakaria, que poderiam render US$ 9.600, para apurar possível uso de informações não públicas, ainda…

4 Min Read
CZ detalha regras-chave para armazenamento seguro de criptomoedas

Changpeng Zhao recomendou medidas de segurança para criptomoedas, incluindo prevenção de roubos, backups para evitar perda de acesso e planejamento sucessório.

7 Min Read