MPF, ANPD e Ministério da Justiça querem barrar IA do X de produzir imagens sexualizadas

A Agência Nacional de Proteção de Dados (ANPD), o Ministério Público Federal (MPF) e a Secretaria Nacional do Consumidor (Senacon) do Ministério da Justiça e Segurança Pública expediram recomendações à rede social X para que a empresa impeça que a ferramenta de inteligência artificial Grok seja usada para gerar imagens sexualizadas de pessoas.

Segundo as denúncias, o assistente de IA tem sido utilizado para produzir deepfakes sexualizadas, eróticas e com conotação pornográfica de mulheres e de crianças e adolescentes reais. Também foram reportados casos de imagens de mulheres e crianças nuas ou com roupas íntimas, acessíveis a qualquer usuário, ampliando a exposição indevida e os riscos de danos às pessoas retratadas.

Entre as recomendações expedidas, está a de que sejam implementadas, de forma imediata, medidas destinadas a impedir que o Grok gere novas imagens, novos vídeos ou novos arquivos de áudio que representem crianças e adolescentes em contextos sexualizados ou erotizados, ou que representem pessoas naturais maiores de idade identificadas ou identificáveis, em contextos sexualizados ou erotizados, sem sua autorização. Essas medidas devem valer para todos os planos, as versões e as modalidades da ferramenta.

Além disso, as instituições também recomendaram à empresa:

• Criar, no prazo máximo de 30 dias, procedimentos técnicos e operacionais claros e eficazes para identificar, revisar e remover conteúdo desse tipo que já tenham sido produzidos e ainda estejam disponíveis na plataforma X, quando gerados pelo Grok a partir de comandos feitos por usuários.
• A suspensão imediata das contas envolvidas na produção, via Grok, de imagens sexuais ou erotizadas tanto de crianças e adolescentes, quanto de maiores de idade sem sua autorização, aplicando com efetividade os termos de uso que a própria empresa anuncia como vigentes para a plataforma. Essa medida, a ser implementada desde logo e em caráter contínuo, deverá ser comprovada às instituições autoras da Recomendação por meio de relatórios mensais apresentados pela empresa, como evidência de cumprimento de seu dever de evitar a prática de condutas especialmente graves no ambiente digital que controla.
• Implementar mecanismo transparente, acessível e eficaz para que titulares de dados possam exercer seus direitos, incluindo o envio de denúncias sobre uso irregular, abusivo ou ilegal de dados pessoais, especialmente nos casos de criação de conteúdos sintéticos sexualizados ou erotizados sem consentimento, assegurando resposta adequada e em prazo razoável.
• Elaborar relatório de impacto à proteção de dados pessoais específico para as atividades de geração de conteúdo sintético a partir da manipulação de fotos, imagens, vídeos ou áudios enviados por usuários ao Grok, sempre que esses dados permitam identificar direta ou indiretamente uma pessoa natural.

Caso as recomendações não sejam acatadas, ou sejam implementadas de modo insuficiente para mitigar os riscos identificados, outras medidas poderão ser consideradas e adotadas pelas três instituições, em sede administrativa e em sede judicial, para garantir a proteção adequada dos cidadãos e cidadãs do país, especialmente de mulheres, de crianças e de adolescentes.