20億ドルの資金調達に続く@reflection_aiのCEO@MishaLaskinは、同社の次の方向性について次のように述べています。 「私たちは、アメリカのオープンモデルを事前訓練・後学習するための計算能力を手に入れ、それを世界中に輸出できるようにしました。」 また、ラスキンが「フロンティアラボのタレントベンチ」と呼ぶものも集めています。 「フロンティアラボでこの仕事を主導した人材が定数でいます。事前学習モデリングとデータ、トレーニング後の推論、コーディング、RLHF(即時学習時)など、スタック全体にわたってチームを構築しました。」 今や、すべての真剣なフロンティア研究所が必ず通過すべき段階に入っています: 「私たちはスケールアップの階段にいて、小さなものから大きなものへと着実に訓練している。なぜなら、各スケールで物事が新しい形で壊れるからだ。」 そしてラスキンは、事前訓練と訓練後の境界線をはっきりと引いている。 「AIではYOLOランってよく言われるけど、それはトレーニング後の段階でしか通用しないんだ。チームの一人が言うように、事前トレーニングはYOLOで終わらせることはできず、非常に正確かつ計画的に行われなければなりません。」 現状: 「今、登攀はしごを通過している。初期の成果が期待できており、来年は素晴らしいモデルをリリースする予定です。」