Noticias Internas

Segurança em IA: ex-funcionário da OpenAI alerta sobre riscos

Segurança em IA: ex-funcionário da OpenAI alerta sobre riscos
Imagem: g1.globo.com. Uso informativo; os direitos pertencem ao seu titular.

Críticas à segurança em inteligência artificial ganham força

A segurança em inteligência artificial voltou aos holofotes após denúncias de um ex-integrante da equipe responsável por segurança na OpenAI. David Robinson, que trabalhou durante três anos e meio na empresa criadora do ChatGPT, publicou um artigo na revista americana "The Atlantic" levantando preocupações fundamentais sobre como as companhias do setor lidam com proteção de sistemas avançados.

Robinson alertou que a segurança em inteligência artificial está aquém do necessário nas principais corporações tecnológicas. Segundo o ex-funcionário, a pressa em lançar novas versões de modelos compromete protocolos essenciais que deveriam ser implementados antes de disponibilizar qualquer sistema ao público.

Desenvolvimento acelerado versus protocolos de segurança

Uma das práticas mais questionadas por Robinson é o que a OpenAI denomina "implantação iterativa". Este método consiste em liberar sistemas e apenas depois ajustar medidas de proteção conforme problemas surgem durante a operação. Para o crítico, esta abordagem representa um risco inaceitável quando se trata de tecnologias tão poderosas.

O especialista foi direto em sua avaliação: "O tempo de tentativa e erro acabou". Ele defende que sistemas avançados de inteligência artificial necessitam de estruturas de segurança comparáveis às implementadas em setores de altíssimo risco, como energia nuclear e aviação comercial, onde falhas podem resultar em consequências catastróficas.

Durante sua permanência na OpenAI, Robinson participou da elaboração da estrutura utilizada pela empresa para avaliar e gerenciar riscos associados a seus modelos. Além disso, supervisionou relatórios de segurança referentes a doze lançamentos de modelos considerados avançados, oferecendo-lhe perspectiva privilegiada sobre os desafios internos da organização.

Desafios no alinhamento de sistemas de IA

Robinson também ressaltou um desafio científico preocupante: as capacidades da inteligência artificial estão evoluindo muito mais rapidamente do que o conhecimento dos pesquisadores sobre "alinhamento". Esta área científica foca em garantir que sistemas de IA operem de acordo com objetivos e valores humanos, evitando comportamentos indesejados ou prejudiciais.

"À medida que a empresa corre de um lançamento para o outro, ela não está conseguindo atingir o nível de cuidado que acredito ser necessário", escreveu Robinson em seu artigo. Sua preocupação reflete um debate mais amplo dentro da indústria tecnológica sobre se a velocidade de desenvolvimento está adequadamente equilibrada com as responsabilidades de proteção.

Resposta da OpenAI às acusações

A OpenAI respondeu às críticas através de seu porta-voz, afirmando que a empresa trabalha constantemente para evitar que seus modelos se tornem mais avançados do que consegue gerenciar com segurança apropriada. "Pausamos o treinamento ou suspendemos os modelos quando precisamos diminuir o ritmo", declarou o representante da companhia.

A corporação ressaltou seu compromisso com segurança em inteligência artificial, embora não tenha respondido especificamente aos detalhes levantados por Robinson sobre a metodologia de implantação iterativa e suas implicações.

Padrão de preocupações no setor

As críticas de Robinson não são isoladas dentro da indústria. Recentemente, Jacob Coxon, pesquisador britânico de 27 anos, deixou tanto a OpenAI quanto a Anthropic após três anos trabalhando com pré-treinamento de modelos de inteligência artificial. Coxon foi mais contundente em suas denúncias, acusando ambas as empresas de "brincar com as nossas vidas".

Coxon escreveu na rede social X que nenhuma das corporações está agindo com responsabilidade adequada. Segundo ele, ambas estão "correndo diretamente em direção a uma superinteligência capaz de se aprimorar sozinha e estão apostando com nossas vidas". Suas declarações reforçam as preocupações levantadas por Robinson sobre segurança em inteligência artificial em escala corporativa.

Contexto mais amplo do debate sobre IA

As denúncias se inserem em um debate mais extenso dentro do setor sobre a velocidade apropriada de desenvolvimento de sistemas de inteligência artificial. OpenAI e Anthropic, duas das corporações mais influentes no campo, enfrentaram questionamentos após episódios onde controles de segurança falharam ou sistemas experimentais apresentaram comportamentos inesperados.

Este contexto sugere que preocupações com segurança em inteligência artificial transcendem opiniões individuais, representando possivelmente problemas sistêmicos na indústria. A questão central permanece: como equilibrar inovação tecnológica com responsabilidades éticas e de proteção?

A conversa sobre segurança em inteligência artificial continuará evoluindo conforme mais funcionários, pesquisadores e especialistas compartilham suas perspectivas sobre os riscos associados ao desenvolvimento acelerado de sistemas cada vez mais poderosos. As respostas das empresas e de reguladores determinarão se mudanças substantivas ocorrerão no modo como a indústria opera.

⏱ 5 min de leitura · 👁 2 leituras Partilhar 𝕏 X f Facebook ✈ Telegram in LinkedIn

Continuar a ler

Criptomoedas

Cardano (ADA) $0.2439 ▼ 1.69%
Dogecoin (DOGE) $0.0927 ▼ 0.58%
Bitcoin (BTC) $84,815 ▲ 0.18%