AI開発
ベンチマークが測っていないもの
あるモデルがベンチマークで高い数値を出したという発表は、そのモデルが業務で役に立つという主張とは別のものである。この二つを結ぶには、ベンチマークが何を代理しているかとい…
§ ARCHIVE — 記事一覧
これまでの記事
AI開発
スケーリング則は性能を約束したわけではない
基盤モデルの性能が学習計算量とともに向上するという観測は、2020年以降、この分野でもっとも引用される経験則になった。ただし「向上する」ことと「投資に見合う」ことは別の…