Incidente 366: Los clips de suicidio evadieron la moderación automática de TikTok en un ataque coordinado.
Descripción: Muchos clips que mostraban un suicidio evadieron el sistema automatizado de moderación de contenido de TikTok supuestamente en un ataque coordinado, lo que resultó en la exposición de contenido violatorio a sus usuarios.
Entidades
Ver todas las entidadesPresunto: un sistema de IA desarrollado e implementado por TikTok, perjudicó a TikTok users.
Estadísticas de incidentes
Risk Subdomain
A further 23 subdomains create an accessible and understandable classification of hazards and harms associated with AI
1.2. Exposure to toxic content
Risk Domain
The Domain Taxonomy of AI Risks classifies risks into seven AI risk domains: (1) Discrimination & toxicity, (2) Privacy & security, (3) Misinformation, (4) Malicious actors & misuse, (5) Human-computer interaction, (6) Socioeconomic & environmental harms, and (7) AI system safety, failures & limitations.
- Discrimination and Toxicity
Entity
Which, if any, entity is presented as the main cause of the risk
Human
Timing
The stage in the AI lifecycle at which the risk is presented as occurring
Post-deployment
Intent
Whether the risk is presented as occurring as an expected or unexpected outcome from pursuing a goal
Intentional
Informes del Incidente
Cronología de Informes
TikTok dice que un grupo de enfermos que trabajaban juntos difundió deliberadamente un video espantoso de un hombre que se suicida que se volvió viral en su plataforma.
La compañía encontró evidencia de un "ataque coordinado" cuando investi…
Variantes
Una "Variante" es un incidente de IA similar a un caso conocido—tiene los mismos causantes, daños y sistema de IA. En lugar de enumerarlo por separado, lo agrupamos bajo el primer incidente informado. A diferencia de otros incidentes, las variantes no necesitan haber sido informadas fuera de la AIID. Obtenga más información del trabajo de investigación.
¿Has visto algo similar?
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Google’s YouTube Kids App Presents Inappropriate Content
· 14 informes
Security Robot Rolls Over Child in Mall
· 27 informes
Uber AV Killed Pedestrian in Arizona
· 25 informes
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Google’s YouTube Kids App Presents Inappropriate Content
· 14 informes
Security Robot Rolls Over Child in Mall
· 27 informes
Uber AV Killed Pedestrian in Arizona
· 25 informes