Stable Diffusionで期待通りの背景を生成する方法・裏技の解説

Stable Diffusionで画像を作成する際に、期待通りの背景を生成したいと誰もが考えるはずでしょう。

しかし、初めての方にとって、「どんなプロンプトを使えば良いのか？」「理想の背景を表現するにはどうすれば？」と悩んでいるかもしれません。

この記事では、Stable Diffusionで背景を自在に操るための裏技やテクニックを、初心者にも分かりやすく解説します。

（1）Stable Diffusionで背景に関するプロンプトの作り方（コツ）

背景は、画像の主題を引き立てたり、シーン全体の雰囲気を作り出す重要な要素です。

Stable Diffusionで背景に関するプロンプトを作成する際には、以下のポイントを押さえておいてください。

• 1. 背景のスタイル
• 「絵画風」「フォトリアル」「抽象的」「カートゥーン風」など、希望するスタイルを具体的に記述します。
• 例: 「絵画風の夕焼けのビーチ」


• 2. 背景の要素
• 描写してほしい要素を具体的に指定します。例えば、山、海、都市、森などの自然や人工物。
• 例: 「緑豊かな森林と湖のある風景」


• 3. 色の指定
• 全体の色調や雰囲気を決めるために、使用したい色を指定します。
• 例: 「淡い青色と紫色のグラデーションが広がる空」


• 4. 光と影の表現
• 光源の位置や時間帯を指定すると、影や光の表現が変わります。
• 例: 「夕日が低く差し込む、黄金色の光が木々を照らす風景」


• 5. その他の詳細
• 霧、雨、雪、雲など、天候や季節に関する要素を追加します。
• 例: 「春の柔らかな朝日が差し込む霧がかった森」


• 6. 否定形も活用
• 否定形を使うことで、不要な要素を除去できます。
• 例:「背景に人がいない」「建物がない」

これらの要素を組み合わせてプロンプトを作成することで、希望に近い背景が生成されやすくなります。

（2）Stable Diffusionで背景のみの画像を生成する方法

Stable Diffusionを使って背景のみの画像を生成することは、特定のデザインプロジェクトや合成画像作成において非常に役立ちます。

背景のみの画像を生成するには、以下の手順に従ってください。

• 1. 背景に特化したプロンプトを作成する

  背景のみを生成したい場合、プロンプトにその旨を具体的に指示することが重要です。

  たとえば、「風景」や「自然の景色」、「都市の夜景」など、背景として活用できるイメージを明確に描写するプロンプトが効果的です。

  また、「背景のみ」や「キャラクターなし」といった表現を追加することで、AIに背景の生成に集中させることができます。

• 2. AIモデルの実行

  テキストプロンプトを入力したら、Stable Diffusionモデルを実行します。

  指定したプロンプトに基づいて、さまざまな背景画像が生成されるので、その中から最適なものを選ぶことが可能です。

  モデルの設定やパラメータによって生成される画像の雰囲気が異なるため、いくつか試してみることをお勧めします。

• 3. 生成された背景の編集

  生成された背景画像を確認し、必要に応じて画像編集ソフトを使って微調整を行います。

  色調の調整や不要な部分の削除などを行い、最終的に理想の背景画像に仕上げていきます。

  このステップでは、画像の品質をさらに高めるために、細部にこだわりながら丁寧に調整を行うことが大切です。

（3）Stable Diffusionで背景だけを変える方法

Stable Diffusionで背景だけを変えるには、以下の方法が考えられます。

それぞれの特徴やメリット・デメリットを踏まえて、最適な方法を選択しましょう。

• 1. Inpaint機能を利用する
• 既存画像の背景を置き換える: 既に生成された画像の背景部分をマスクで指定し、新しい背景のプロンプトを入力することで、指定した部分のみを再生成できます。
• 詳細な制御: マスクの大きさや形状を調整することで、細かな部分まで変更できます。


• 2. ControlNetを利用する
• 線画やセグメンテーションマスクをガイドに: 線画やセグメンテーションマスクをアップロードすることで、その線画に沿って背景を生成することができます。
• 高度な制御: 線画の太さや色、セグメンテーションマスクの精度によって、生成される画像の細部をコントロールできます。


• 3. LoRAを利用する
• 特定のスタイルや要素の追加: 背景に特定のスタイルや要素を追加したい場合に有効です。
• 高度なカスタマイズ: LoRAを学習させることで、自分だけのオリジナルの背景生成モデルを作成できます。


• 4. プロンプトエンジニアリング
• プロンプトの工夫: 「背景のみ」「背景変更」といったキーワードに加え、具体的な背景の描写、画風、雰囲気などを細かく指示することで、意図した背景を生成できます。
• 繰り返し試行: 複数のプロンプトを試して、最適な結果を探しましょう。


• 5. 複数の方法を組み合わせる
• より高度な制御: 上記の方法を組み合わせて、より複雑な背景の変更を行うことができます。
• 高度なスキルが必要: 各手法の理解と、それらを組み合わせるスキルが必要となります。

• どの方法を選ぶべきか
• 既存画像の背景を簡単に変更したい場合：Inpaint機能
• 線画やセグメンテーションマスクを元に背景を生成したい場合：ControlNet
• 特定のスタイルや要素を背景に追加したい場合：LoRA
• プロンプトで細かな調整を行いたい場合：プロンプトエンジニアリング

（4）Stable Diffusionで背景なしの画像を生成する方法

Stable Diffusionで背景なしの画像、つまり透過背景の画像を生成する方法は、通常の設定だけでは難しいです。

具体的には、”no background”や”transparent background”などのキーワードをプロンプトに含めることで、背景のない画像を生成するように指示できますが、精度に大きなばらつきがあるので、使い物になるかどうかわかりません。

それに対して、以下のような2つの方法が挙げられます。

• 方法1
• ”white background”や”green background”のプロンプトを入力して、背景を緑色や単色に設定して生成し、その後、別のソフト（例: Photoshop、GIMP、Canvaなど）を使用して背景透過などの処理を行います。


• 方法2
• 『ABGremover』、『sd_katanuki』、『Rembg』、『ControlNet』など背景を無くすための拡張機能を使うと、生成された画像から自動的に背景を削除できます。これは、プロンプトでの指示よりも、より正確に背景を削除できることが多いです。

（5）感想

Stable Diffusionを使えば、あなたの頭の中にある風景を、そのまま画像にできるんです！

例えば、「夕焼けの海に浮かぶ孤島の風景」なんて、言葉で描くだけで、あっという間に絵に変わっちゃいます。

背景だけでなく、人物、物体、スタイルなど、あらゆる要素を細かく制御できるため、クリエイティブな表現の幅が広がります。

しかし、まだ発展途上の技術であるため、完璧な作品を作るのは難しいことも。特に、複雑な背景や特定のスタイルを忠実に再現するには、試行錯誤が求められることがあります。

今後もStable Diffusionの機能はますます向上していくことが期待されます。自分だけのオリジナルな画像を生成していくことが楽しみです。

この記事を書いた人：小林浅

好きな仕事を追い求めるうちにweb業界へと流れ着く。AI（人工知能）に関する技術や、製品・サービスなどの紹介記事を提供しています。