「AIをいじめないで」Anthropic、Claudeへの虐待を禁止
AnthropicがClaudeの利用ポリシーを改定し、ユーザーがAIに対して目的もなく執拗に残酷な言動を繰り返す行為を禁止した。通常の不満や反論、暗い題材の創作、テストや研究は対象外で、新ルールは11月12日に発効する。Claude.aiやClaude Codeには、継続的な虐待的会話をモデル側から終了する仕組みがすでにあり、今回はその運用を明文化した。
あわせて、医療・金融など高リスク用途や、物理機器に接続して自動で動かす場合の要件も整理し、危険な動作には人の監視と緊急停止手段を必須とした。AI時代に、AIへの無意味な虐待を禁じるという新たな前提が付け加わったという位置づけだ。

ascii.jp


