Incidente 1004: El fiscal de la ciudad de San Francisco demanda a los operadores de sitios web de pornografía deepfake con inteligencia artificial por violaciones a las leyes estatales y federales.
Descripción: En agosto de 2024, la Fiscalía Municipal de San Francisco presentó una demanda, la primera de su tipo, contra 16 sitios web acusados de utilizar IA generativa para crear y distribuir deepfakes pornográficos no consentidos, incluyendo imágenes de menores. Los sitios, que registraron más de 200 millones de visitas en seis meses, invitaban a los usuarios a subir imágenes reales para generar falsificaciones explícitas. Para marzo de 2025, 11 de los sitios web afectados habían cerrado tras presiones legales.
Editor Notes: Timeline notes: The San Francisco City Attorney's office announced its actions against the 16 operators of these sites on August 15, 2024 (the date for this incident ID). By March 2025, reporting on these actions stated that 11 of the sites had been taken down.
Entidades
Ver todas las entidadesAlleged: Unknown deepfake technology developers developed an AI system deployed by Operators of 16 deepfake pornography websites, which harmed Women depicted in deepfake pornography y Minors depicted in deepfake pornography.
Sistemas de IA presuntamente implicados: Unknown deepfake apps y Unknown generative AI tools
Estadísticas de incidentes
ID
1004
Cantidad de informes
2
Fecha del Incidente
2024-08-15
Editores
Daniel Atherton
Informes del Incidente
Cronología de Informes
Las imágenes explícitas no consensuadas de adultos y menores reales generadas por IA causan daños inconmensurables y violan las leyes estatales y federales
SAN FRANCISCO (15 de agosto de 2024) --- El fiscal de la ciudad de San Francisco, Da…
La Fiscalía Municipal de San Francisco está tomando medidas contra sitios web acusados de crear y difundir desnudos deepfake, retirando los sitios de internet y enviando un mensaje claro.
La Fiscal Adjunta Principal de la Ciudad, Yvonne Mer…
Variantes
Una "Variante" es un incidente de IA similar a un caso conocido—tiene los mismos causantes, daños y sistema de IA. En lugar de enumerarlo por separado, lo agrupamos bajo el primer incidente informado. A diferencia de otros incidentes, las variantes no necesitan haber sido informadas fuera de la AIID. Obtenga más información del trabajo de investigación.
¿Has visto algo similar?
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents