Hugging Face Trainerによる効率的なFine-tuning: 検証実験を素早く回そう
はじめにHugging Faceで公開されているモデルをfine-tuningする際、皆さんはどのようにコードを書いていますか?僕は基本的にフルスクラッチでコードを書いていました。
しかし、LLM(Large Language Models)をチューニングする際に、学習と評価の処理をラップするSFTTrainerを利用し、Hugging FaceのTrainerクラスの便利さを実感しました。
以来、検証段階ではTrainerを積極的に使うようになりました。
今回は、Huggi