Incident 796: Facebook's Content Moderation System Flagged and Removed Emergency Updates as Spam During Wildfires

Description: Facebook's AI moderation system wrongly flagged and removed dozens of posts containing vital emergency information during California's wildfire season, including real-time updates on evacuations and fire tracking. Posts from official sources like Cal Fire and the U.S. Forest Service were marked as spam, potentially endangering lives by restricting access to crucial updates. Despite user complaints, the issue persisted, with Facebook acknowledging the problem only after media inquiry.

Outils

Nouveau rapportNouveau rapportNouvelle RéponseNouvelle RéponseDécouvrirDécouvrirVoir l'historiqueVoir l'historique

Statistiques d'incidents

ID
796
Nombre de rapports
3
Date de l'incident
2024-06-01
Editeurs
Daniel Atherton
Applied Taxonomies
MIT

Classifications de taxonomie MIT

Machine-Classified
Détails de la taxonomie

Risk Subdomain

7.3. Lack of capability or robustness

Risk Domain

  1. AI system safety, failures, and limitations

Entity

AI

Timing

Post-deployment

Intent

Unintentional

Facebook bloque les alertes d'urgence alors que les incendies de forêt font rage dans l'Ouest
washingtonpost.com · 2024
Traduit par IA

Dimanche après-midi, vers 14 heures, la fille de Lauri Hutchinson a couru à l'intérieur en criant : « Au feu ».

Une colonne de fumée grise montait rapidement de la ville isolée de Clearlake, dans le nord de la Californie, juste en face du l…

Facebook a signalé et supprimé les informations d'urgence sur les incendies de forêt comme « spam »
mashable.com · 2024
Traduit par IA

Facebook supprimerait des informations de sécurité importantes alors que la saison des feux de forêt se propage dans l'ouest du pays.

Une enquête du Washington Post a révélé des dizaines de cas où le géant de la technologie a signalé et sup…

Facebook se retrouve dans une situation délicate après avoir qualifié de spam des avertissements de sécurité essentiels contre les incendies de forêt : « Cela met la vie en danger »
thecooldown.com · 2024
Traduit par IA

Facebook fait l'objet d'une surveillance étroite après avoir signalé comme spam des mises à jour d'urgence sur des événements météorologiques extrêmes publiées par des groupes de bénévoles, des services et des organisations locales.

Le Wash…

Variantes

Une "Variante" est un incident qui partage les mêmes facteurs de causalité, produit des dommages similaires et implique les mêmes systèmes intelligents qu'un incident d'IA connu. Plutôt que d'indexer les variantes comme des incidents entièrement distincts, nous listons les variations d'incidents sous le premier incident similaire soumis à la base de données. Contrairement aux autres types de soumission à la base de données des incidents, les variantes ne sont pas tenues d'avoir des rapports en preuve externes à la base de données des incidents. En savoir plus sur le document de recherche.

Incidents similaires

Par similarité textuelle

Did our AI mess up? Flag the unrelated incidents

Firefighters attempt to contain Bel-Air blaze ahead of the strong winds expected Thursday night

· 22 rapports
Uber AV Killed Pedestrian in Arizona

Tempe police release report, audio, photo

· 25 rapports

Crime-fighting robot hits, rolls over child at Silicon Valley mall

· 27 rapports
Incident précédentProchain incident