【簡易記述中】ファインチューニング¶
- Dreambooth
- モデル全体を更新する
- https://dreambooth.github.io/
- Textual Inversion
- embeddingされるtokenの重みを更新する
- stable-diffusion-webuiではembeddingsという名前で利用される
- LoRA (Low-Rank Adaptation)
- モデルの一部の重みを更新する
- モデルの更新部分がpromptによって発火しない場合は生成結果に影響しない
- 一部の更新なので学習が早い
- https://arxiv.org/abs/2106.09685
- https://blog.shikoan.com/lora_diffusers/
- Hypernetworks
- 別のモデルを用意する