arXiv論文：事前学習データは公開コメント欄から汚染され得る——HalfLifeで混入可能性を推定

arXivに2026年7月16日投稿された「Pretraining Data Can Be Poisoned through Computational Propaganda」は、AIモデルの事前学習データが公開Web上の投稿機能から汚染され得ると示した論文だ。

結論は、Wikipediaのような有名データ源だけを守っても十分ではなく、公開ディスカッション欄など第三者が書き込める場所が攻撃経路になり得る、というものだ。論文は、事前学習データ汚染がモデルに有害な振る舞いを入れ、後から検出・修正しにくい問題だと整理している。

具体的には、Web規模のコンテンツ注入メカニズムとして公開コメントや議論インターフェースに注目し、悪意ある内容がクローリングとデータ選別を通った後に学習コーパスへ残る可能性を推定する「HalfLife」という分析方法を提案した。自分に関係する点は、AIの安全性はモデル公開時のフィルターだけでなく、学習前のデータ収集とクリーニングに強く依存することだ。

企業がRAGや社内LLMを作る場合も、取り込むWebページやコメント欄の扱いを設計する必要がある。ただし、この論文は特定の商用モデルが実際に汚染されたと断定するものではない。可能性と測定方法を示すプレプリントとして読むべきだ。