概要: In mid-March 2025, KDE’s GitLab infrastructure was disrupted by aggressive AI web scrapers originating from Alibaba IP ranges. These bots ignored robots.txt and spoofed browser headers, which in turn overwhelmed the site and caused outages for developers. Similar incidents affected other FOSS projects like GNOME, SourceHut, and Fedora. The scraping is tied to large language model training, and reportedly imposes real costs and delays.
推定: Alibaba , Unnamed generative AI companies , KDE , GNOME , GitLab instances , SourceHut infrastructure , Pagure.io (Fedora) , Websites hosting FOSS documentation or bug trackers , AI scrapers と Anubis proof-of-work systemsが開発し提供したAIシステムで、FOSS projects and communities , KDE , GNOME , SourceHut , Fedora , Inkscape , Curl , Linux Weekly News , Read the Docs , Diaspora と Sysadminsに影響を与えた
インシデントのステータス
インシデントID
1001
レポート数
2
インシデント発生日
2025-03-17
エディタ
Daniel Atherton
インシデントレポート
レポートタイムライン
3 日前、SourceHut の創設者兼 CEO である Drew DeVault 氏は、「コストを私に直接押し付けるのはやめてください」というブログ記事を公開し、その中で、LLM 企業が robosts.txt を尊重せずにデータをクロールし、SourceHut に深刻な障害を引き起こしていると不満を述べました。
私は「面白い！」と言い、先に進みました。
そして、昨日の朝、KDE GitLab インフラストラクチャが Alibaba の範囲の IP を持つ別の AI クロ…
ソフトウェア開発者の Xe Iaso 氏は、今年初めに Amazon からの攻撃的な AI クローラー トラフィックが Git リポジトリ サービスを圧倒し、不安定性とダウンタイムを繰り返し引き起こしたため、限界点に達しました。robots.txt の調整、既知のクローラー ユーザー エージェントのブロック、疑わしいトラフィックのフィルタリングなど、標準的な防御策を講じたにもかかわらず、Iaso 氏は AI クローラーがユーザー エージェントを偽装し、プロキシとして住宅 IP…
バリアント
「バリアント」は既存のAIインシデントと同じ原因要素を共有し、同様な被害を引き起こし、同じ知的システムを含んだインシデントです。バリアントは完全に独立したインシデントとしてインデックスするのではなく、データベースに最初に投稿された同様なインシデントの元にインシデントのバリエーションとして一覧します。インシデントデータベースの他の投稿タイプとは違い、バリアントではインシデントデータベース以外の根拠のレポートは要求されません。詳細についてはこの研究論文を参照してください
よく似たインシデント
Did our AI mess up? Flag the unrelated incidents
よく似たインシデント
Did our AI mess up? Flag the unrelated incidents