既存の LLM が CPU なら、 Jev はその GPU 版みたいなやつ

ARANK

Jev を一晩叩いたので、その感想を書きます。タイトルは超大雑把な要約です。実験結果まず実験ログを置いておきます。 5 Sonnet には全勝LoL をミニマルにしたような MOBA ゲームをリアルタイム操作スプリットプッシュのマクロ戦術やタワーダイブのようなミクロ戦術が観察されました集団戦で、誰がタンクするかの判断で協調できないことがありました(人間もやります....)eslint のエミュレーション実装抜きにルール名とコードだけで Lint の結果を答えさせて、正答率 86%自然言語による確率的な Lint ルールというのが、比較的現実的ですPlaywirght によるブラウザ自動操作簡単なフォームを作り、商品をカートに入れ、購入する、という一連の画面操作をやらせる判断自体は高速ですが、単独ではエラーから復旧できないのが観測されました。Claude にログを監視させ、補助させることで 96% 以上の精度になりましたわかったこと本当に安いMOBA風のゲームを 1戦やらせて、 $0.0001出力無料モデルとしての性能自体がすごく高いというわけではない1リクエスト/レスポンスは 500ms ぐらい真価は並列度。256個の質問を同時に投げて、同時にそのスコアが得られるconfidence 値が便利0.…