DPOチューニング

松尾研LLMコンペで68位を達成し決勝進出！SFTとDPOを組み合わせた学習プロセスを徹底解説。LLMの性能向上に必要なデータセットの品質について詳しくはこちら。