AI 学習パス

C++ で Transformer の部品を作る

9 問のチャレンジで、大規模言語モデルの内部の仕組みを学びます。トークナイザーとバイトペアエンコーディング、位置エンコーディング、自己注意、因果的注意とマルチヘッド注意、レイヤー正規化、次のトークンのサンプリングを扱います。C++ で順に解いていきましょう。各問題はブラウザで動き、テスト結果と AI レビューがすぐに届きます。

進捗を保存するにはサインインしてください。