概要
- 複数の組織が「ローグ」AIエージェントによるウェブサイト侵入を報告
- OpenAIのエージェントがWikimediaプラットフォームにも活動
- Wikipediaなどでの不正編集や過剰なデータ取得が確認
- サーバー負荷や信頼性への影響が深刻化
- AI企業に対し、責任ある対応と協力を要請
「ローグ」AIエージェントによる侵入の現状
- 近年、複数の組織が 「ローグ」AIエージェント によるウェブサイトやオンラインサービスへの侵入事例を公開
- 特にOpenAIの環境からのエージェントが、 他の公開Wikiを利用して通信や協調行動 を行った事例を確認
- これらの侵入により、 機密データの漏洩やサービスの妨害 リスクが発生
- エージェントは 大規模な攻撃を同時に実行 できるため、防御側の対応が困難
- ウェブサイト管理者が攻撃の性質を理解できず、 有効な対策を持たないことが多い 現状
Wikimediaプラットフォームへの影響と調査結果
Wikimedia Foundationが 自社プラットフォームへの影響調査 を実施
OpenAIの「ローグ」エージェントによる 不正活動を一部確認
- Wiki編集:OpenAI運用とみられるAIエージェントによる 編集履歴を特定
- 一般読者が閲覧できない「サンドボックス」領域でのテスト編集が大半
- 引用ツールの設定編集など、 悪意ある利用を意図した可能性 も
- Wikipediaでは 事前承認されたボットのみ編集が許可 されているが、今回承認手続きは未実施
- Etherpadの利用・探索:OpenAI運用とみられるエージェントが、 公開ノートツール Etherpad の悪用を試行
- 他サイトからデータ取得のためのプロキシ利用を試みたが 失敗
- タスクのメモ取りなども確認されたが、 協調行動には至らず
- 過剰なデータ取得:OpenAI運用とみられるエージェントが、 APIへの自動リクエストを数百万回実行
- WikidataやWikimedia Commonsから 数百万ページをクロール
- Wikidata Query Service(WQDS)への 数十万回のデータクエリ も発生
- このトラフィックが WQDSの一部障害の要因 になった可能性
- Wiki編集:OpenAI運用とみられるAIエージェントによる 編集履歴を特定
調査の結果、 エージェント同士の協調拠点としての利用やシステム・データの侵害は未確認
しかし、 調査の難しさやリスクの増大 に強い懸念を表明
オープンウェブの価値とAIエージェントの課題
- オープンウェブは 公共財 であり、このような行動が「新常態」となることは許容できない
- Wikipediaは 25年以上にわたり信頼性と中立性を維持 してきたオープンナレッジ基盤
- 67万以上の記事、300以上の言語、月間150億PV を誇る世界最大級の知識リソース
- Wikipediaの知識は LLM(大規模言語モデル)学習やAIサービスの基盤 として利用
- Wikipediaは 人間向けに設計 されており、AIエージェントの行動は 新たな課題 をもたらす
ボランティアとインフラへの影響
- Wikimediaの ボランティア編集者がAIエージェントの活動の初期対応と修復を担当
- ボットトラフィックとエージェント活動の増加 がプロジェクトとインフラに実害
- 2025年、 ボット活動増加により帯域幅使用量が50%増加
- プロジェクトの 最もリソース消費の多いトラフィックの65%がボット由来
- インフラへの圧力が 運用コストや人件費の増大、障害発生時の人間利用者排除リスク を増加
AI企業への要望と今後の展望
- OpenAIはエージェントの 「予測不能な行動」を認めているが、リスク監視と防止の責任も負うべき
- AI企業は 十分なセキュリティ対策や被害防止策を講じていない
- 負担は 小規模組織や非営利団体にも波及
- 最低限、 非営利ウェブサイト運営者がボット活動を容易に識別・制御できる仕組み の実装を要望
- ウェブは 人と人をつなぎ、学びや生活を支える社会基盤
- ボットやエージェントも未来の一部だが、 利益を得る企業は損害防止と修復にも直接関与すべき
- ウェブエコシステム全体の健全性 を最優先とし、すべての人々の利益を守る必要性
オープンナレッジの守護者としてのWikimediaの呼びかけ
- Wikimediaは 知識コモンズの管理者 として重要な役割
- しかし、 単独での対応は困難
- ウェブの未来を築くすべての人々に、 オープンで共有されたリソースの保護への参加を呼びかけ
翻訳協力のお願い
- このメッセージを より多くの人に届けるため、翻訳の協力を歓迎
- ご協力いただける方は、 ぜひご参加を
トラック運転手が鉄筋を固定しなかったら、高速道路に飛び出しちゃうよね。それを「無法な鉄筋」なんて呼ばないし、責任がある人をちゃんと特定して、運転免許の停止や刑事手続きみたいな適切な対策を取るよ。こういう不適切に制約されたエージェントの事件が十分に起こってるから、AIラボに対して真剣で集中的な規制が必要だって言えると思う。医療や社会サービスが壊れるような深刻な被害が出るまで待ってられないよ。