Incidente 280: Los usuarios informan que el algoritmo de Coffee Meets Bagel les muestra desproporcionadamente coincidencias de su misma etnia a pesar de seleccionar "Sin preferencia".
Descripción: A los usuarios que seleccionaron "sin preferencia" el algoritmo de coincidencia de Coffee Meets Bagels les mostró más coincidencias potenciales con la misma etnia, lo que fue reconocido y justificado por su fundador como un medio para maximizar la tasa de conexión sin suficiente información del usuario.
Entidades
Ver todas las entidadesPresunto: un sistema de IA desarrollado e implementado por Coffee Meets Bagel, perjudicó a Coffee Meets Bagel users having no ethnicity preference y Coffee Meets Bagel users.
Risk Subdomain
A further 23 subdomains create an accessible and understandable classification of hazards and harms associated with AI
1.1. Unfair discrimination and misrepresentation
Risk Domain
The Domain Taxonomy of AI Risks classifies risks into seven AI risk domains: (1) Discrimination & toxicity, (2) Privacy & security, (3) Misinformation, (4) Malicious actors & misuse, (5) Human-computer interaction, (6) Socioeconomic & environmental harms, and (7) AI system safety, failures & limitations.
- Discrimination and Toxicity
Entity
Which, if any, entity is presented as the main cause of the risk
AI
Timing
The stage in the AI lifecycle at which the risk is presented as occurring
Post-deployment
Intent
Whether the risk is presented as occurring as an expected or unexpected outcome from pursuing a goal
Unintentional
Informes del Incidente
Cronología de Informes
No tengo nada en contra de los asiáticos.
De hecho, cuando mi compañero de cuarto me dijo la otra noche que a veces ve a John Cho (Harold, de Harold and Kumar) en su gimnasio, chillé. Consideré brevemente unirme al gimnasio, pero luego reco…
Sin embargo, parece una experiencia relativamente común, incluso si no pertenece a un grupo minoritario.
Amanda Chicago Lewis (que ahora trabaja en BuzzFeed) escribió sobre su experiencia similar en Coffee Meets Bagel para [LA Weekly](http:…
Variantes
Una "Variante" es un incidente de IA similar a un caso conocido—tiene los mismos causantes, daños y sistema de IA. En lugar de enumerarlo por separado, lo agrupamos bajo el primer incidente informado. A diferencia de otros incidentes, las variantes no necesitan haber sido informadas fuera de la AIID. Obtenga más información del trabajo de investigación.
¿Has visto algo similar?
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Bad AI-Written Christmas Carols
· 1 informe
Thoughts App Allegedly Created Toxic Tweets
· 1 informe
Incidentes Similares
Did our AI mess up? Flag the unrelated incidents
Bad AI-Written Christmas Carols
· 1 informe
Thoughts App Allegedly Created Toxic Tweets
· 1 informe