Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる

インシデント 530: Telegram Channels Allowed Users to Make Non-Consensual Deepfake Porn as Paid Service

概要: Seven channels were connected in a Telegram ecosystem centered around letting subscribers, as a paid service, generate non-consensual deepfake nudes using a bot from submitted photos of women, including underage girls and women who they know in real life.

ツール

新しいレポート新しいレポート新しいレスポンス新しいレスポンス発見する発見する履歴を表示履歴を表示

組織

すべての組織を表示
Alleged: Telegram channels と Alberto developed an AI system deployed by Telegram channels, which harmed Women , underage girls と female celebrities.

インシデントのステータス

インシデントID
530
レポート数
2
インシデント発生日
2019-07-11
エディタ
Khoa Lam, Daniel Atherton
Applied Taxonomies
MIT

MIT 分類法のクラス

Machine-Classified
分類法の詳細

Risk Subdomain

A further 23 subdomains create an accessible and understandable classification of hazards and harms associated with AI
 

4.3. Fraud, scams, and targeted manipulation

Risk Domain

The Domain Taxonomy of AI Risks classifies risks into seven AI risk domains: (1) Discrimination & toxicity, (2) Privacy & security, (3) Misinformation, (4) Malicious actors & misuse, (5) Human-computer interaction, (6) Socioeconomic & environmental harms, and (7) AI system safety, failures & limitations.
 
  1. Malicious Actors & Misuse

Entity

Which, if any, entity is presented as the main cause of the risk
 

Human

Timing

The stage in the AI lifecycle at which the risk is presented as occurring
 

Post-deployment

Intent

Whether the risk is presented as occurring as an expected or unexpected outcome from pursuing a goal
 

Intentional

インシデントレポート

レポートタイムライン

Incident Occurrence+1
Deepfake bots on Telegram make the work of creating fake nudes dangerously easy
Deepfake bots on Telegram make the work of creating fake nudes dangerously easy

Deepfake bots on Telegram make the work of creating fake nudes dangerously easy

theverge.com

A deepfake bot is being used to “undress” underage girls

A deepfake bot is being used to “undress” underage girls

technologyreview.com

Deepfake bots on Telegram make the work of creating fake nudes dangerously easy
theverge.com · 2020

Researchers have discovered a “deepfake ecosystem” on the messaging app Telegram centered around bots that generate fake nudes on request. Users interacting with these bots say they’re mainly creating nudes of women they know using images t…

A deepfake bot is being used to “undress” underage girls
technologyreview.com · 2020

Within 24 hours, the Vice article had inspired such a backlash that the creators of the app quickly took it down. The DeepNude Twitter account announced that no other versions would be released, and no one else would get access to the techn…

バリアント

「バリアント」は既存のAIインシデントと同じ原因要素を共有し、同様な被害を引き起こし、同じ知的システムを含んだインシデントです。バリアントは完全に独立したインシデントとしてインデックスするのではなく、データベースに最初に投稿された同様なインシデントの元にインシデントのバリエーションとして一覧します。インシデントデータベースの他の投稿タイプとは違い、バリアントではインシデントデータベース以外の根拠のレポートは要求されません。詳細についてはこの研究論文を参照してください
レビュー前
インシデント発生日:
2023-08-03
インシデント状況の説明
なにが、どこで、誰を巻き込み、いつ、なぜ起きたかを理解する助けになるインシデントの周辺状況を伝える客観的なレポート
 

Researchers have discovered a “deepfake ecosystem” on the messaging app Telegram centered around bots that generate fake nudes on

入力/出力
インシデントに関係する知的システムへのデータ入力とシステムによって生成される出力の流れ。チャットボットの場合は、一般に人間とチャットボットの反応が行き来します
 

Raji

12345

Sekar

よく似たインシデント

Selected by our editors
AI 'Nudify' Apps Used as Tools for Blackmail and Extortion

Upload, undress, blackmail: AI 'nudify' apps emerge as new weapons of extortion

Sep 2024 · 1 レポート
FBI Reported Surge of Extortion Cases of AI Media Featuring Sexual Explicit Activities

FBI warns of increasing use of AI-generated deepfakes in sextortion schemes

Apr 2023 · 2 レポート
Child Predators Are Reportedly Generating Deepfake Nudes of Children to Extort Them

Paedophiles create nude AI images of children to extort from them, says charity

Apr 2024 · 1 レポート
テキスト類似度による

Did our AI mess up? Flag the unrelated incidents

Content Using Bestiality Thumbnails Allegedly Evaded YouTube’s Thumbnail Monitoring System

YouTube Hosted Graphic Images Of Bestiality For Months

Apr 2018 · 2 レポート
Bots Allegedly Made up Roughly Half of Twitter Accounts in Discussions Surrounding COVID-19 Related Issues

Twitter Bots Drove the Push to 'Reopen America,' Study Finds

Jan 2020 · 2 レポート
Google’s YouTube Kids App Presents Inappropriate Content

Google’s YouTube Kids App Criticized for ‘Inappropriate Content’

May 2015 · 14 レポート
前のインシデント次のインシデント

よく似たインシデント

Selected by our editors
AI 'Nudify' Apps Used as Tools for Blackmail and Extortion

Upload, undress, blackmail: AI 'nudify' apps emerge as new weapons of extortion

Sep 2024 · 1 レポート
FBI Reported Surge of Extortion Cases of AI Media Featuring Sexual Explicit Activities

FBI warns of increasing use of AI-generated deepfakes in sextortion schemes

Apr 2023 · 2 レポート
Child Predators Are Reportedly Generating Deepfake Nudes of Children to Extort Them

Paedophiles create nude AI images of children to extort from them, says charity

Apr 2024 · 1 レポート
テキスト類似度による

Did our AI mess up? Flag the unrelated incidents

Content Using Bestiality Thumbnails Allegedly Evaded YouTube’s Thumbnail Monitoring System

YouTube Hosted Graphic Images Of Bestiality For Months

Apr 2018 · 2 レポート
Bots Allegedly Made up Roughly Half of Twitter Accounts in Discussions Surrounding COVID-19 Related Issues

Twitter Bots Drove the Push to 'Reopen America,' Study Finds

Jan 2020 · 2 レポート
Google’s YouTube Kids App Presents Inappropriate Content

Google’s YouTube Kids App Criticized for ‘Inappropriate Content’

May 2015 · 14 レポート

リサーチ

  • “AIインシデント”の定義
  • “AIインシデントレスポンス”の定義
  • データベースのロードマップ
  • 関連研究
  • 全データベースのダウンロード

プロジェクトとコミュニティ

  • AIIDについて
  • コンタクトとフォロー
  • アプリと要約
  • エディタのためのガイド

インシデント

  • 全インシデントの一覧
  • フラグの立ったインシデント
  • 登録待ち一覧
  • クラスごとの表示
  • 分類法

2024 - AI Incident Database

  • 利用規約
  • プライバシーポリシー
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • 1420c8e