本文へスキップ
原文
Hacker News · AI· vitaelabitur·· 1 時間前厳選AI スコア67

ベンチマーク「The Slop Index」が公開:最も「AIっぽさ」のない文章を書くAIモデルを評価

The Slop Index: Which AI Model Writes the Least Like AI?

AI ガイド

ベンチマーク評価プラットフォーム「The Slop Index」が正式に公開され、定量的指標と人間によるブラインド投票を通じて、最先端の58の大規模言語モデル(LLM)の文体と本物の人間による表現との乖離を評価している。採点はLLMジャッジに一切依存せず、生成内容を2022年以前の人間のビジネスメール、ツイート、記事と比較。人間のブラインド投票(配点40%)と、簡潔さ、定型度、リズム感、典型的AI構文(各15%)を総合し、0〜100の乖離スコアを算出する。

推薦理由

同ベンチマークは、LLM自身が判定役を務める循環的な評価から脱却し、生成AI登場以前の人間のリアルなコーパスとブラインド投票を組み合わせることで、モデルが残す文章の「AIらしさ」を定量化している。

出典:Hacker News · AI · theslopindex.com