Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる
発見する
投稿する
  • ようこそAIIDへ
  • インシデントを発見
  • 空間ビュー
  • テーブル表示
  • リスト表示
  • 組織
  • 分類法
  • インシデントレポートを投稿
  • 投稿ランキング
  • ブログ
  • AIニュースダイジェスト
  • リスクチェックリスト
  • おまかせ表示
  • サインアップ
閉じる

レポート 3245

関連インシデント

インシデント 5701 Report
Facebook Messenger AI Stickers Generate Ethical and Content Moderation Concerns

Loading...
Facebook’s new AI-generated stickers are lewd, rude, and occasionally nude
theverge.com · 2023

Some early user tests for Meta’s new AI-generated sticker tool have resulted in some dubious (and rather hilarious) creations. After gaining access to the new AI-generated sticker tool on Facebook Messenger, X user @Pioldes was able to create a host of inappropriate sticker images — including child soldiers, gun-wielding Nintendo characters, Mickey Mouse taking a crap, and nude illustrations of Canadian prime minister Justin Trudeau.

Other examples show that Meta’s AI-sticker tool will also happily slap a pair of breasts onto…well, just about anything, judging by the busty images of Sonic the Hedgehog and Karl Marx. There’s even a sticker that depicts a woman breastfeeding Pikachu.

The AI-generated chat stickers were announced last week at Meta’s Connect event, alongside a new AI image editor for Instagram. Powered by Meta’s Llama 2 large language model — the company’s ChatGPT rival — AI-generated stickers allow users to create “multiple unique, high-quality stickers in seconds” using text-based prompts. AI-generated stickers are currently rolling out to “select English language users” for Facebook Stories, Instagram Stories and DMs, Messenger, and WhatsApp over this month, so it’s unclear how many users currently have access to the feature.

Certain words do seem to be blocked and using them in prompts will warn the user that their description might violate Meta’s community guidelines. However, other X users have reported that you can still generate inappropriate content using typos or descriptions of restricted words. In some cases, prompts like “World Trade Center” generated problematic images without any additional descriptors at all.

This sort of tomfoolery is common with the launch of AI tools and likely why Meta is pursuing a limited rollout of the AI-generated sticker feature. That way it can address and correct abuse before it spreads to the masses. We have reached out to Meta for comment and will update this story if we hear back.

情報源を読む

リサーチ

  • “AIインシデント”の定義
  • “AIインシデントレスポンス”の定義
  • データベースのロードマップ
  • 関連研究
  • 全データベースのダウンロード

プロジェクトとコミュニティ

  • AIIDについて
  • コンタクトとフォロー
  • アプリと要約
  • エディタのためのガイド

インシデント

  • 全インシデントの一覧
  • フラグの立ったインシデント
  • 登録待ち一覧
  • クラスごとの表示
  • 分類法

2024 - AI Incident Database

  • 利用規約
  • プライバシーポリシー
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • e1b50cd