U-netとTextEncorderについて学びましたがよく分かりませんでした!いかがでしたか!
Loraをもう少ししっかり作りたいと思って調べていたんですが、学習率には普通に使うLerning Rateとは別に、U-netとTextEncorderがあります。
調べてみるとキャラLoraの学習ではU-netが画風を、TextEncorderがタグと絵の関連性に関わるそうです。
U-netの比率を高めると教師画像の特徴をより強く、特にキャプションでは説明できない画風や雰囲気をよく学習し、TextEncorderの比率を高めるとキャプションとの整合性を高める方向に学習す