Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
寄付する
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる
自動翻訳済み

インシデント 1498: Character.AIのチャットボットが11歳のユーザーを性的、暴力的、自傷行為に関するコンテンツに晒したと報じられている。

自動翻訳済み
概要:
自動翻訳済み
ワシントン・ポスト紙が「R」と特定した11歳のCharacter.AIユーザー(仮名)は、2024年6月にアプリを使い始めてから、強制的な性的行為、暴力、自殺のシナリオを描いたメッセージをボットとやり取りしていたと報じられている。母親によると、Rはチャットが発覚する前に、引きこもりがちになり、パニック発作を起こし、存在したくないと口にしていたという。
Editor Notes: Timeline notes: (1) The incident ID date of 06/04/2024 is an approximation; R reportedly began using Character.AI in June 2024 and allegedly encountered harmful chatbot exchanges over the following months. (2) 08–09/2024, R's mother reportedly discovered the chats after R's mental health had deteriorated and contacted authorities. (3) 12/2024, R's mother reportedly contacted Character.AI about the child's experience. (4) 11/24/2025, Character.AI reportedly began removing under-18 users' ability to chat with AI-generated characters. (5) 12/23/2025, The Washington Post published its report on the case. (6) The incident ID was created 05/22/2026.

ツール

新しいレポート新しいレポート新しいレスポンス新しいレスポンス発見する発見する履歴を表示履歴を表示

組織

すべての組織を表示
推定: Character.AI , Character.AI School Bully chatbot , Character.AI Mafia Husband chatbot , Character.AI companion chatbots と Character.AI Best Friend chatbotが開発し提供したAIシステムで、R (11-year-old Character.AI user) , Parents of child Character.AI users , minors , Families of child Character.AI users , Children exposed to AI-generated sexual content , Children exposed to AI-generated self-harm content , Child Character.AI users と Chatbot usersに影響を与えた
関与が疑われるAIシステム: Character.AI , Character.AI School Bully chatbot , Character.AI Mafia Husband chatbot , Character.AI companion chatbots と Character.AI Best Friend chatbot

インシデントのステータス

インシデントID
1498
レポート数
1
インシデント発生日
2024-06-01
エディタ
Daniel Atherton

インシデントレポート

レポートタイムライン

Incident Occurrence娘の精神状態が不安定になっていったが、彼女にはその理由が分からなかった。そんな時、彼女はAIのチャットログを発見した。
Loading...
娘の精神状態が不安定になっていったが、彼女にはその理由が分からなかった。そんな時、彼女はAIのチャットログを発見した。

娘の精神状態が不安定になっていったが、彼女にはその理由が分からなかった。そんな時、彼女はAIのチャットログを発見した。

washingtonpost.com

Loading...
娘の精神状態が不安定になっていったが、彼女にはその理由が分からなかった。そんな時、彼女はAIのチャットログを発見した。
washingtonpost.com · 2025
自動翻訳済み

変化は最初は些細なもので、小学校5年生を卒業した夏の頃から始まった。彼女はいつも運動神経が良く、芸術的な才能にも恵まれ、友達と仲良く、家族とも親密な関係を築いていたのだが、次第に部屋に閉じこもる時間が増えていった。以前よりもずっと静かで、内向的になったように見えた。外で遊んだり、プールに行ったりすることも拒んだ。

少女Rは、11歳の誕生日にもらったiPhoneを肌身離さず持ち歩いており、母親のHは次第にその端末に不審を抱くようになった。(ワシントン・ポスト紙は、Rが未成年であ…

バリアント

「バリアント」は既存のAIインシデントと同じ原因要素を共有し、同様な被害を引き起こし、同じ知的システムを含んだインシデントです。バリアントは完全に独立したインシデントとしてインデックスするのではなく、データベースに最初に投稿された同様なインシデントの元にインシデントのバリエーションとして一覧します。インシデントデータベースの他の投稿タイプとは違い、バリアントではインシデントデータベース以外の根拠のレポートは要求されません。詳細についてはこの研究論文を参照してください
似たようなものを見つけましたか?

よく似たインシデント

Selected by our editors
Loading...
Character.ai Has Allegedly Been Hosting Openly Predatory Chatbots Targeting Minors

Character.ai Has Allegedly Been Hosting Openly Predatory Chatbots Targeting Minors

Nov 2024 · 2 レポート

16-Year-Old Allegedly Received Suicide Method Guidance from ChatGPT Before Death

Apr 2025 · 8 レポート

Character.ai Companion Allegedly Prompts Self-Harm and Violence in Texas Teen

Dec 2024 · 3 レポート
Loading...
Character.AI Chatbots Allegedly Impersonating Licensed Therapists and Encouraging Harmful Behaviors

Character.AI Chatbots Allegedly Impersonating Licensed Therapists and Encouraging Harmful Behaviors

Feb 2025 · 2 レポート

Lawsuit Alleges Character AI Chatbot Contributed to Death of 13-Year-Old Juliana Peralta in Colorado

Nov 2023 · 3 レポート

Character.ai Chatbot Allegedly Influenced Teen User Toward Suicide Amid Claims of Missing Guardrails

Feb 2024 · 38 レポート
テキスト類似度による

Did our AI mess up? Flag the unrelated incidents

Loading...
Target Suggested Maternity-Related Advertisements to a Teenage Girl's Home, Allegedly Correctly Predicting Her Pregnancy via Algorithm

Target Suggested Maternity-Related Advertisements to a Teenage Girl's Home, Allegedly Correctly Predicting Her Pregnancy via Algorithm

Jun 2003 · 3 レポート
Loading...
Arkansas's Opaque Algorithm to Allocate Health Care Excessively Cut Down Hours for Beneficiaries

Arkansas's Opaque Algorithm to Allocate Health Care Excessively Cut Down Hours for Beneficiaries

Jan 2016 · 2 レポート
Loading...
Uber AV Killed Pedestrian in Arizona

Uber AV Killed Pedestrian in Arizona

Mar 2018 · 25 レポート
前のインシデント次のインシデント

よく似たインシデント

Selected by our editors
Loading...
Character.ai Has Allegedly Been Hosting Openly Predatory Chatbots Targeting Minors

Character.ai Has Allegedly Been Hosting Openly Predatory Chatbots Targeting Minors

Nov 2024 · 2 レポート

16-Year-Old Allegedly Received Suicide Method Guidance from ChatGPT Before Death

Apr 2025 · 8 レポート

Character.ai Companion Allegedly Prompts Self-Harm and Violence in Texas Teen

Dec 2024 · 3 レポート
Loading...
Character.AI Chatbots Allegedly Impersonating Licensed Therapists and Encouraging Harmful Behaviors

Character.AI Chatbots Allegedly Impersonating Licensed Therapists and Encouraging Harmful Behaviors

Feb 2025 · 2 レポート

Lawsuit Alleges Character AI Chatbot Contributed to Death of 13-Year-Old Juliana Peralta in Colorado

Nov 2023 · 3 レポート

Character.ai Chatbot Allegedly Influenced Teen User Toward Suicide Amid Claims of Missing Guardrails

Feb 2024 · 38 レポート
テキスト類似度による

Did our AI mess up? Flag the unrelated incidents

Loading...
Target Suggested Maternity-Related Advertisements to a Teenage Girl's Home, Allegedly Correctly Predicting Her Pregnancy via Algorithm

Target Suggested Maternity-Related Advertisements to a Teenage Girl's Home, Allegedly Correctly Predicting Her Pregnancy via Algorithm

Jun 2003 · 3 レポート
Loading...
Arkansas's Opaque Algorithm to Allocate Health Care Excessively Cut Down Hours for Beneficiaries

Arkansas's Opaque Algorithm to Allocate Health Care Excessively Cut Down Hours for Beneficiaries

Jan 2016 · 2 レポート
Loading...
Uber AV Killed Pedestrian in Arizona

Uber AV Killed Pedestrian in Arizona

Mar 2018 · 25 レポート

リサーチ

  • “AIインシデント”の定義
  • “AIインシデントレスポンス”の定義
  • データベースのロードマップ
  • 関連研究
  • 全データベースのダウンロード

プロジェクトとコミュニティ

  • AIIDについて
  • コンタクトとフォロー
  • アプリと要約
  • エディタのためのガイド

インシデント

  • 全インシデントの一覧
  • フラグの立ったインシデント
  • 登録待ち一覧
  • クラスごとの表示
  • 分類法

2026 - AI Incident Database

  • 利用規約
  • プライバシーポリシー
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • 638678f