7分
Anthropic が Claude に AI を直させた48時間——直せたのは、物差しのある失敗だけだった
48時間と GPU 1枚で、Claude は10種類の欠陥すべてに改善策を見つけた。ただし直せたのは、あらかじめ点数のつく失敗だけだ。測る道具のない失敗は、直っていないのではなく数えられていない。
INDEX · KEYWORD
「ベンチマーク」に関連する公開記事をまとめています。
48時間と GPU 1枚で、Claude は10種類の欠陥すべてに改善策を見つけた。ただし直せたのは、あらかじめ点数のつく失敗だけだ。測る道具のない失敗は、直っていないのではなく数えられていない。
Tencent が 770B のモデルの重みを公開した。誰でも落とせるのは本当だが、置き場は 1.5 テラバイト級で、公式の起動手順は GPU 8 枚を前提にしている。そして「最上位」と採点したのは、出した本人だった。
手元に置ける大きさのモデルに、上位帯に見える数字が付いた。ただしその52は英語のテキストで測られていて、このモデルの目も、日本語も、まだ数字の外にある。