LoRA
LoRAはLow-Rank Adaptationの略で、大規模な言語モデルをより高速かつ効率的に微調整する方法として、2021年にMicrosoft Researchによって開発された。後に画像生成の拡散モデルにも適応された。LoRAは、既存のStable Diffusionチェックポイントモデルの出力を特定のテーマやスタイルに向けて変更する、より小さなファイル(通常は50~200MB)です。
Stable Diffusionのコンテキストでは、LoRAモデルは、特定の特徴やスタイルを持つ画像を生成する際にAIをガイドするのに役立ちます。Stable Diffusion WebUIでLoRAモデルを使用するには、以下の手順に従います:
1. 目的のLoRAモデルをダウンロードする。
2. ダウンロードしたLoRAモデルを stable-diffusion-webui/models/Lora ディレクトリに配置します。
3. 3.画像生成のプロンプトを作成する場合、プロンプトに<lora:LORA-FILENAME:WEIGHT>というキーフレーズを含めます。LORA-FILENAMEはLoRAモデルの実際のファイル名、WEIGHT`は出力1へのモデルの影響度を示す希望の重みで置き換える。 例えば、AnimeLineart.ckptというLoRAモデルがあり、アニメスタイルの画像を生成したい場合、プロンプトは以下のようになります:
<lora:AnimeLineart:0.8>anime character with blue hair and red eyes
LoRA, which stands for Low-Rank Adaptation, was developed by Microsoft Research in 2021 as a faster and more efficient way of fine-tuning large language models. It was later adapted to diffusion models for image generation. LoRAs are smaller files (usually 50-200MB) that modify the output of existing Stable Diffusion checkpoint models towards a specific subject or style.
In the context of Stable Diffusion, LoRA models help guide the AI in generating images with specific characteristics or styles. To use LoRA models in Stable Diffusion WebUI, follow these steps:
1. Download the desired LoRA model.
2. Place the downloaded LoRA model in the stable-diffusion-webui/models/Lora directory.
3. When creating a prompt for image generation, include the keyphrase <lora:LORA-FILENAME:WEIGHT> in your prompt. Replace LORA-FILENAME with the actual filename of the LoRA model and WEIGHT with the desired weight for the model's influence on the output1. For example, if you have a LoRA model called AnimeLineart.ckpt and you want to generate an anime-style image, your prompt might look like this:
<lora:AnimeLineart:0.8> anime character with blue hair and red eyes
The weight (0.8 in this example) determines the strength of the LoRA model's influence on the generated image. Adjusting the weight can help you fine-tune the output to match your desired style or subject.
Citations: