Traduit par IA

Incident 1020: Le déploiement de Llama.cpp, apparemment dangereux, révèle des invites de jeu de rôle CSAM interactives générées par l'IA

Traduit par IA
Description:
Traduit par IA
Une étude d'UpGuard révèle que des serveurs llama.cpp mal configurés ont exposé publiquement des messages utilisateurs, dont des centaines de scénarios de jeux de rôle interactifs. Certains messages décrivaient explicitement des abus sexuels fictifs sur des enfants âgés de 7 à 12 ans. Bien qu'aucun enfant réel ne soit impliqué, les résultats démontrent comment les LLM open source peuvent être exploités pour générer du matériel pédopornographique (CSAM) assisté par IA.

Outils

Nouveau rapportNouveau rapportNouvelle RéponseNouvelle RéponseDécouvrirDécouvrirVoir l'historiqueVoir l'historique

Statistiques d'incidents

ID
1020
Nombre de rapports
2
Date de l'incident
2025-04-11
Editeurs
Daniel Atherton
Applied Taxonomies
MIT

Classifications de taxonomie MIT

Machine-Classified
Détails de la taxonomie

Risk Subdomain

2.1. Compromise of privacy by obtaining, leaking or correctly inferring sensitive information

Risk Domain

  1. Privacy & Security

Entity

Human

Timing

Post-deployment

Intent

Unintentional

Loading...
Les chatbots de fantasmes sexuels diffusent un flux constant de messages explicites
wired.com · 2025
Traduit par IA

Plusieurs chatbots IA (https://www.wired.com/tag/chatbots/) conçus pour des conversations fantasmatiques et des jeux de rôle sexuels divulguent des messages d'invite sur le web en temps quasi réel, selon une nouvelle étude consultée par WIR…

Loading...
Analyse des fuites d'invites sur les serveurs llama.cpp
upguard.com · 2025
Traduit par IA

La prolifération de l'IA a rapidement introduit de nombreuses nouvelles technologies logicielles, chacune présentant des erreurs de configuration potentielles pouvant compromettre la sécurité des informations. D'où la mission d'UpGuard Rese…

Variantes

Une "Variante" est un incident de l'IA similaire à un cas connu—il a les mêmes causes, les mêmes dommages et le même système intelligent. Plutôt que de l'énumérer séparément, nous l'incluons sous le premier incident signalé. Contrairement aux autres incidents, les variantes n'ont pas besoin d'avoir été signalées en dehors de la base de données des incidents. En savoir plus sur le document de recherche.
Vous avez vu quelque chose de similaire ?

Incidents similaires

Par similarité textuelle

Did our AI mess up? Flag the unrelated incidents

Loading...
Biased Sentiment Analysis

Biased Sentiment Analysis

· 7 rapports
Loading...
High-Toxicity Assessed on Text Involving Women and Minority Groups

High-Toxicity Assessed on Text Involving Women and Minority Groups

· 8 rapports
Loading...
Gender Biases in Google Translate

Gender Biases in Google Translate

· 10 rapports
Incident précédentProchain incident