総復習 - 機械学習の基本概念

次は機械学習の基本概念を復習しましょう。
ここは試験の心臓部よ。
技術分野すべての土台になるわ。

ももさん、誉め上手ね。
あんずさんもいい調子よ。
その3つを例とセットで覚えれば完璧よ。
名前だけじゃ試験で落ちるから、用例とペアで脳に焼きつけましょう。

鋭い質問ね。
LLM?
の学習は実は3段階なの。

まず自己教師あり学習?
で大量のテキストから言語の統計を学び、

次に教師あり学習?
で質問応答のマナーを身につけ、最後にRLHF?
で人間の好みを学ぶわ。

つまり3つのアプローチがLLMの中で全サークル躍しているのよ。

ももさん、その例えは秀逸! まさにその通りで、「過去問ならパーフェクト、初見は0点」状態が過学習ね。
私も使わせてもらおうかしら。

だから、過去問は「パターンを覚える」ために使うけど、同時に「なぜこの答えになるか」を理解する習慣をつけましょうね。
丸暗記は過学習への第一歩よ。