Lar
A OpenAI integra ferramentas de código aberto para a segurança de adolescentes em seus projetos de desenvolvimento

Na terça-feira, a OpenAI anunciou o lançamento de um conjunto de diretrizes destinadas a ajudar os desenvolvedores a tornar seus aplicativos mais seguros para adolescentes. O laboratório de IA afirmou que essas políticas de segurança para adolescentes são compatíveis com seu modelo de segurança de código aberto, o gpt-oss-safeguard.
Em vez de começar do zero para determinar como melhorar a segurança da IA para adolescentes, os desenvolvedores podem usar essas orientações para fortalecer seus aplicativos. Elas abordam questões como violência gráfica e conteúdo sexual, ideais e comportamentos prejudiciais relacionados à imagem corporal, atividades e desafios de risco, cenários de dramatização românticos ou violentos, e produtos e serviços com restrição de idade.
Essas políticas de segurança são elaboradas como prompts, garantindo que funcionem facilmente com modelos diferentes do gpt-oss-safeguard, embora provavelmente sejam mais eficazes dentro do próprio ecossistema da OpenAI.
A OpenAI declarou que colaborou com as organizações de segurança em IA Common Sense Media e everyone.ai para desenvolver essas instruções.
“Essas políticas baseadas em prompts ajudam a estabelecer uma base de segurança significativa em todo o ecossistema. Por serem de código aberto, elas podem ser adaptadas e aprimoradas ao longo do tempo”, disse Robbie Torney, chefe de IA e Avaliações Digitais da Common Sense Media, em um comunicado.
Em seu blog, a OpenAI observou que desenvolvedores, incluindo equipes experientes, frequentemente têm dificuldade em traduzir objetivos de segurança em regras operacionais precisas.
“Isso pode resultar em lacunas de proteção, aplicação inconsistente ou filtragem excessivamente ampla”, explicou a empresa. “Políticas claras e bem definidas são uma base essencial para sistemas de segurança eficazes.”
A OpenAI reconhece que essas políticas não são uma solução completa para os complexos desafios da segurança da IA. No entanto, elas se baseiam em esforços anteriores, incluindo medidas de proteção no nível do produto, como controles parentais e previsão de idade. No ano passado, a OpenAI atualizou suas diretrizes para grandes modelos de linguagem — conhecidas como Model Spec — para abordar como seus modelos de IA devem interagir com usuários menores de 18 anos.
A própria OpenAI, no entanto, não tem um histórico impecável. A empresa enfrenta vários processos judiciais movidos por famílias de pessoas que morreram por suicídio após o uso extremo do ChatGPT. Essas relações prejudiciais geralmente se desenvolvem depois que um usuário contorna as salvaguardas do chatbot, e nenhuma barreira de proteção de modelo é completamente impenetrável. No entanto, essas novas políticas representam um passo à frente, especialmente no apoio a desenvolvedores independentes.
Artigo relacionado
A Anthropic agora tem mais clientes corporativos do que a OpenAI, de acordo com dados da Ramp
A Anthropic superou a OpenAI em clientes comerciais verificados pela primeira vez, de acordo com o Índice de IA deste mês da fintech Ramp.Os dados das despesas dos clientes da Ramp revelam que 34,4% das empresas participantes pagam pelos serviços da
A Índia muda de foco de downloads de aplicativos para monetização, à medida que os locais começam a pagar por serviços digitais
A Índia já foi o principal hub de downloads de aplicativos do mundo, mas enfrentava dificuldades para gerar receita. Esse cenário está mudando, à medida que os usuários investem cada vez mais em inteligência artificial (IA), entretenimento e serviços
A OpenAI enfrenta uma investigação conduzida pelos procuradores-gerais estaduais
Um grupo de procuradores-gerais estaduais teria iniciado uma investigação sobre a OpenAI.De acordo com o The Wall Street Journal, a empresa recebeu uma intimação do procurador-geral de Nova York na se
Recomendações de tópicos especiais relacionados
Comentários (1)

Na terça-feira, a OpenAI anunciou o lançamento de um conjunto de diretrizes destinadas a ajudar os desenvolvedores a tornar seus aplicativos mais seguros para adolescentes. O laboratório de IA afirmou que essas políticas de segurança para adolescentes são compatíveis com seu modelo de segurança de código aberto, o gpt-oss-safeguard.
Em vez de começar do zero para determinar como melhorar a segurança da IA para adolescentes, os desenvolvedores podem usar essas orientações para fortalecer seus aplicativos. Elas abordam questões como violência gráfica e conteúdo sexual, ideais e comportamentos prejudiciais relacionados à imagem corporal, atividades e desafios de risco, cenários de dramatização românticos ou violentos, e produtos e serviços com restrição de idade.
Essas políticas de segurança são elaboradas como prompts, garantindo que funcionem facilmente com modelos diferentes do gpt-oss-safeguard, embora provavelmente sejam mais eficazes dentro do próprio ecossistema da OpenAI.
A OpenAI declarou que colaborou com as organizações de segurança em IA Common Sense Media e everyone.ai para desenvolver essas instruções.
“Essas políticas baseadas em prompts ajudam a estabelecer uma base de segurança significativa em todo o ecossistema. Por serem de código aberto, elas podem ser adaptadas e aprimoradas ao longo do tempo”, disse Robbie Torney, chefe de IA e Avaliações Digitais da Common Sense Media, em um comunicado.
Em seu blog, a OpenAI observou que desenvolvedores, incluindo equipes experientes, frequentemente têm dificuldade em traduzir objetivos de segurança em regras operacionais precisas.
“Isso pode resultar em lacunas de proteção, aplicação inconsistente ou filtragem excessivamente ampla”, explicou a empresa. “Políticas claras e bem definidas são uma base essencial para sistemas de segurança eficazes.”
A OpenAI reconhece que essas políticas não são uma solução completa para os complexos desafios da segurança da IA. No entanto, elas se baseiam em esforços anteriores, incluindo medidas de proteção no nível do produto, como controles parentais e previsão de idade. No ano passado, a OpenAI atualizou suas diretrizes para grandes modelos de linguagem — conhecidas como Model Spec — para abordar como seus modelos de IA devem interagir com usuários menores de 18 anos.
A própria OpenAI, no entanto, não tem um histórico impecável. A empresa enfrenta vários processos judiciais movidos por famílias de pessoas que morreram por suicídio após o uso extremo do ChatGPT. Essas relações prejudiciais geralmente se desenvolvem depois que um usuário contorna as salvaguardas do chatbot, e nenhuma barreira de proteção de modelo é completamente impenetrável. No entanto, essas novas políticas representam um passo à frente, especialmente no apoio a desenvolvedores independentes.
A Anthropic agora tem mais clientes corporativos do que a OpenAI, de acordo com dados da Ramp
A Anthropic superou a OpenAI em clientes comerciais verificados pela primeira vez, de acordo com o Índice de IA deste mês da fintech Ramp.Os dados das despesas dos clientes da Ramp revelam que 34,4% das empresas participantes pagam pelos serviços da
A Índia muda de foco de downloads de aplicativos para monetização, à medida que os locais começam a pagar por serviços digitais
A Índia já foi o principal hub de downloads de aplicativos do mundo, mas enfrentava dificuldades para gerar receita. Esse cenário está mudando, à medida que os usuários investem cada vez mais em inteligência artificial (IA), entretenimento e serviços
A OpenAI enfrenta uma investigação conduzida pelos procuradores-gerais estaduais
Um grupo de procuradores-gerais estaduais teria iniciado uma investigação sobre a OpenAI.De acordo com o The Wall Street Journal, a empresa recebeu uma intimação do procurador-geral de Nova York na se











