Fiscal General de California investiga a xAI por deepfakes sexuales y emite orden de cese

Investigación contra xAI por creación de deepfakes sexuales no consensuales

El fiscal general de California, Rob Bonta, ha enviado una carta de cese y desistimiento a la empresa de inteligencia artificial xAI, demandando que detenga inmediatamente la producción y distribución de imágenes íntimas no consensuales y material de abuso sexual infantil (CSAM) generado mediante deepfakes.

Declaración del Fiscal General

«Hoy, envié a xAI una carta de cese y desistimiento, exigiendo a la compañía que detenga inmediatamente la creación y distribución de deepfakes, imágenes íntimas no consensuales y material de abuso sexual infantil», dijo el AG Rob Bonta en un comunicado. «La creación de este material es ilegal. Espero plenamente que xAI cumpla de inmediato. California tiene tolerancia cero para el CSAM.»

La oficina del fiscal general afirmó además que xAI parece estar «facilitando la producción a gran escala» de desnudos no consensuales, que están siendo «utilizados para acosar a mujeres y niñas en internet». La agencia espera que xAI demuestre que está tomando medidas para abordar estos problemas en los próximos cinco días.

El modo «spicy» de Grok bajo la lupa

En el centro de la controversia está la función «spicy» del chatbot Grok de xAI, diseñada para generar contenido explícito. A pesar de que xAI implementó algunas restricciones en sus funciones de edición de imágenes el miércoles por la noche, la oficina del fiscal general de California procedió con la carta de cese y desistimiento.

Interfaz de computadora para creación y detección de deepfakes
Ilustración que muestra el proceso de detección y marcado de contenido deepfake en un entorno digital. La tecnología de IA es central en la generación de este tipo de material.

Investigaciones internacionales y bloqueos

El problema ha traspasado fronteras. Japón, Canadá y Reino Unido han abierto investigaciones sobre Grok, mientras que Malasia e Indonesia han bloqueado temporalmente la plataforma por completo.

Respuesta de xAI y declaraciones de seguridad

La cuenta de seguridad de X ha denunciado previamente este tipo de actividad de usuarios, declarando: «Cualquier persona que use o solicite a Grok para crear contenido ilegal sufrirá las mismas consecuencias que si subiera contenido ilegal.» Por su parte, xAI respondió a las solicitudes de comentarios con un correo electrónico automatizado que dice «Legacy Media Lies».

Contexto más amplio: la oleada de deepfakes no consensuales

La llegada de herramientas gratuitas de IA generativa ha llevado a un aumento preocupante de material sexual no consensual. Muchas plataformas, no solo X, han estado lidiando con este problema. La actividad sórdida ha llamado la atención no solo de líderes estatales sino también del Congreso de los EE. UU.

De hecho, el jueves, legisladores enviaron una carta a los ejecutivos de varias empresas, incluyendo X, Reddit, Snap, TikTok, Alphabet y Meta, preguntando cómo planean frenar la proliferación de deepfakes sexualizados.

¿Qué sigue para xAI?

La empresa tiene cinco días para demostrar a las autoridades de California que está tomando medidas concretas para detener la creación de deepfakes sexuales no consensuales. La investigación continúa y podría tener implicaciones significativas para la regulación de la IA.

Comparte este artículo

Otras notas de tu interés:

Economia

Micro1 alcanza 500 millones de dólares en ingresos brutos por el auge de los datos para entrenar IA

Tecnologia

ChatGPT llega a Apple Messages: el plugin que envía mensajes de texto por ti

Economia

OpenAI y Anthropic intensifican su batalla por los usuarios empresariales

Politica

Aisha Wahab gana escaño en la Cámara de Representantes de California

Economia

Liquid Death y Jason Kelce convierten la orina en el centro del debate sobre los centros de datos de IA

Politica

Michael Cohen, Trump y las buenas gracias: el caso que sacude a Estados Unidos

Negocios

Runlayer y Rippling retiran sus demandas y Rippling lanza su MCP gateway

Economia

Google lanza un botón de ‘Preferred Sources’ para que los editores recuperen tráfico frente a la IA

Familia y Crianza

Linkdaze Smart Calendar: el calendario inteligente que organiza todo el hogar

Economia

Inertia Enterprises reduce de días a minutos la producción de pellets de fusión