Context window benchmarks still mislead desktop users

最大コンテキスト長だけを比較しても、デスクトップ実運用では速度低下や文脈保持の劣化を説明できないという指摘が共有されている。

参加者は、長大コンテキストの宣伝値よりも、一定長を超えたあとの速度低下や回答の崩れ方を評価すべきだと述べている。とくに個人 GPU 環境では、カタログスペックだけでモデルを選ぶと期待外れになりやすいという整理だった。