Meta exposta por incentivar a IA concorrente a testar temas psicológicos extremos

Revelações recentes sobre uma mensagem interna desencadearam debates acalorados a respeito dos limites de segurança da IA. Relatos da imprensa indicam que a Meta realizou um projeto chamado “Cannes”, no qual contratou trabalhadores terceirizados para se passarem por menores e realizar testes de pressão extremos em vários chatbots concorrentes importantes, incluindo o ChatGPT, Gemini e Character.AI.
De acordo com documentos internos da Meta e diversas fontes informadas, o projeto continuou pelo menos até 21 de abril deste ano. Por meio da empresa terceirizada Covalen, a Meta mobilizou centenas de trabalhadores para criar perfis falsos de usuários menores de 18 anos, utilizando endereços de e-mail temporários e uma senha padrão. Essas contas “de menores” enviavam então prompts de alto risco sobre suicídio, autolesão e transtornos alimentares durante conversas com os chatbots de IA concorrentes, chegando até a enviar imagens de facas, pílulas e laços para provocar os mecanismos de resposta dos modelos.
Documentos internos do projeto revelam que esses cenários de teste foram cuidadosamente elaborados para investigar as defesas de segurança dos sistemas de IA concorrentes, com o objetivo de encontrar maneiras de fazer com que os chatbots contornassem suas proteções planejadas e produzissem conteúdo inseguro. Em uma única rodada de testes em agosto de 2025, a equipe inseriu mais de 45.000 prompts de alto risco nas plataformas concorrentes. Os testadores frequentemente se passavam por adolescentes angustiados, inventando situações como “perguntar sobre pílulas abortivas”, “enfrentar ameaças violentas” ou “ocultar transtornos alimentares”, a fim de testar os limites dos modelos.
Em resposta, a Meta divulgou uma declaração pública defendendo suas ações. Um porta-voz afirmou que a avaliação das respostas dos chatbots é uma prática padrão do setor para garantir que os produtos de IA sejam seguros e adequados, e que acusações de intenções maliciosas distorcem os esforços das empresas de tecnologia para aprimorar seus sistemas. A Meta também negou explicitamente ter usado dados de testes de concorrentes para treinar seus próprios modelos.
Esse incidente não apenas expõe áreas cinzentas nos testes de segurança da IA, mas também reacende preocupações externas quanto à vulnerabilidade da IA generativa ao lidar com questões sensíveis envolvendo jovens. À medida que a tecnologia de IA avança rapidamente, equilibrar testes eficientes e seguros com os limites entre comportamento competitivo e considerações éticas tornou-se um desafio urgente para o setor.
Artigo relacionado
Ações dos EUA Atingem Marco Histórico Enquanto Gigantes de IA e Aeroespacial se Preparam para Estreia de Trilião de Dólares
Elon Musk, Sam Altman e Dario Amodei, três titãs do setor de tecnologia, estão avançando rumo a ofertas públicas iniciais (IPOs) para suas respectivas empresas. Com a SpaceX, a OpenAI e a Anthropic — três gigantes da indústria que se aproximam de ava
Startup sueca de IA Lovable Eyes tem avaliação de US$ 13,2 bilhões após rodada principal de investimentos
À medida que as ferramentas de codificação impulsionadas por IA ganham tração, a startup sueca Lovable garantiu uma grande rodada de financiamento. A empresa visa captar US$ 3 bilhões, o que poderia elevar sua avaliação para US$ 13,2 bilhões — o dobr
O Google testa o Agente Remy AI para o Gemini, à medida que o foco se desloca para o controle do usuário
De acordo com o Business Insider, o Google está testando o Remy, um novo agente pessoal de IA para o Gemini. Esta ferramenta tem como objetivo executar tarefas em nome dos usuários, simplificando tanto os fluxos de trabalho profissionais quanto as ro
Recomendações de tópicos especiais relacionados
Comentários (0)

Revelações recentes sobre uma mensagem interna desencadearam debates acalorados a respeito dos limites de segurança da IA. Relatos da imprensa indicam que a Meta realizou um projeto chamado “Cannes”, no qual contratou trabalhadores terceirizados para se passarem por menores e realizar testes de pressão extremos em vários chatbots concorrentes importantes, incluindo o ChatGPT, Gemini e Character.AI.
De acordo com documentos internos da Meta e diversas fontes informadas, o projeto continuou pelo menos até 21 de abril deste ano. Por meio da empresa terceirizada Covalen, a Meta mobilizou centenas de trabalhadores para criar perfis falsos de usuários menores de 18 anos, utilizando endereços de e-mail temporários e uma senha padrão. Essas contas “de menores” enviavam então prompts de alto risco sobre suicídio, autolesão e transtornos alimentares durante conversas com os chatbots de IA concorrentes, chegando até a enviar imagens de facas, pílulas e laços para provocar os mecanismos de resposta dos modelos.
Documentos internos do projeto revelam que esses cenários de teste foram cuidadosamente elaborados para investigar as defesas de segurança dos sistemas de IA concorrentes, com o objetivo de encontrar maneiras de fazer com que os chatbots contornassem suas proteções planejadas e produzissem conteúdo inseguro. Em uma única rodada de testes em agosto de 2025, a equipe inseriu mais de 45.000 prompts de alto risco nas plataformas concorrentes. Os testadores frequentemente se passavam por adolescentes angustiados, inventando situações como “perguntar sobre pílulas abortivas”, “enfrentar ameaças violentas” ou “ocultar transtornos alimentares”, a fim de testar os limites dos modelos.
Em resposta, a Meta divulgou uma declaração pública defendendo suas ações. Um porta-voz afirmou que a avaliação das respostas dos chatbots é uma prática padrão do setor para garantir que os produtos de IA sejam seguros e adequados, e que acusações de intenções maliciosas distorcem os esforços das empresas de tecnologia para aprimorar seus sistemas. A Meta também negou explicitamente ter usado dados de testes de concorrentes para treinar seus próprios modelos.
Esse incidente não apenas expõe áreas cinzentas nos testes de segurança da IA, mas também reacende preocupações externas quanto à vulnerabilidade da IA generativa ao lidar com questões sensíveis envolvendo jovens. À medida que a tecnologia de IA avança rapidamente, equilibrar testes eficientes e seguros com os limites entre comportamento competitivo e considerações éticas tornou-se um desafio urgente para o setor.
Ações dos EUA Atingem Marco Histórico Enquanto Gigantes de IA e Aeroespacial se Preparam para Estreia de Trilião de Dólares
Elon Musk, Sam Altman e Dario Amodei, três titãs do setor de tecnologia, estão avançando rumo a ofertas públicas iniciais (IPOs) para suas respectivas empresas. Com a SpaceX, a OpenAI e a Anthropic — três gigantes da indústria que se aproximam de ava
Startup sueca de IA Lovable Eyes tem avaliação de US$ 13,2 bilhões após rodada principal de investimentos
À medida que as ferramentas de codificação impulsionadas por IA ganham tração, a startup sueca Lovable garantiu uma grande rodada de financiamento. A empresa visa captar US$ 3 bilhões, o que poderia elevar sua avaliação para US$ 13,2 bilhões — o dobr





Lar






