ファインチューニング

合成データはモデルに書かせた学習データで、足りない量ではなく足りない種類を埋める道具。NVIDIAの公開データセットの内訳と、Nature論文が警告するモデル崩壊・評価データの汚染までを整理しました。