Incidente 588: La herramienta australiana de predicción del terrorismo afecta de forma desigual a las personas con autismo
Descripción: Un informe independiente concluyó que la herramienta Vera-2R, diseñada para predecir el riesgo de futuras actividades terroristas, consideraba el autismo como un factor de riesgo a pesar de carecer de evidencia empírica que respaldara esta afirmación. El informe cuestionó la validez y fiabilidad generales de la herramienta, afirmando que era "extremadamente deficiente" para predecir el riesgo con precisión. La inclusión del autismo como factor de riesgo tuvo implicaciones potencialmente graves para el uso y la credibilidad de la herramienta.
Entidades
Ver todas las entidadesAlleged: Unspecified developed an AI system deployed by New South Wales Government y Australian Federal Government, which harmed people with autism , lawyers and other experts who were not informed of the tool's limitations , Individuals assessed as high-risk based on the flawed criteria y General public.
Estadísticas de incidentes
Risk Subdomain
A further 23 subdomains create an accessible and understandable classification of hazards and harms associated with AI
1.1. Unfair discrimination and misrepresentation
Risk Domain
The Domain Taxonomy of AI Risks classifies risks into seven AI risk domains: (1) Discrimination & toxicity, (2) Privacy & security, (3) Misinformation, (4) Malicious actors & misuse, (5) Human-computer interaction, (6) Socioeconomic & environmental harms, and (7) AI system safety, failures & limitations.
- Discrimination and Toxicity
Entity
Which, if any, entity is presented as the main cause of the risk
Human
Timing
The stage in the AI lifecycle at which the risk is presented as occurring
Post-deployment
Intent
Whether the risk is presented as occurring as an expected or unexpected outcome from pursuing a goal
Unintentional
Informes del Incidente
Cronología de Informes
Una herramienta diseñada para predecir delitos futuros en delincuentes terroristas los consideraba en mayor riesgo de delinquir si eran autistas a pesar de no tener base empírica para hacerlo, según un informe independiente.
El informe sobr…
Variantes
Una "Variante" es un incidente de IA similar a un caso conocido—tiene los mismos causantes, daños y sistema de IA. En lugar de enumerarlo por separado, lo agrupamos bajo el primer incidente informado. A diferencia de otros incidentes, las variantes no necesitan haber sido informadas fuera de la AIID. Obtenga más información del trabajo de investigación.
¿Has visto algo similar?
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents