LLMのカスのコンサル問題 - ジョイジョイジョイ
LLMは研究提案の査読で新規性や興奮度が高く見えるが、実行すると評価が大きく落ちる。理由は、規模の大きすぎる計画や弱い比較対象の設定など、現実の制約や検証に耐えない設計にある。
筆者は、この構造が「提案が魅力的なら報酬が得られる」という人間界のコンサル問題と同型だと指摘する。企画段階では魅力的だが実行するとしょぼい傾向を前提に、責任の一体化や比較設計の厳格化など、実行面の歯止めが必要だと述べている。

joisino.hatenablog.com









