安定拡散修復の目的は何ですか?
安定した拡散修復の目標は、元のイメージの全体的な構造と外観を維持しながら、イメージの欠落領域に視覚的に妥当で一貫したコンテンツを生成することです。これは、既知の領域から未知の領域に情報や色を拡散するプロセスである画像拡散の概念を活用することでこれを実現します。
安定した拡散修復はどのように機能しますか?
通常、修復プロセスには、伝播と拡散という 2 つの主要なステップが含まれます。欠落領域を囲む既知の領域が伝播ステップで分析され、欠落情報が推定されます。この推定は、テクスチャ合成、パッチ マッチング、エッジ伝播などのさまざまな方法に基づくことができます。
不足している情報が推定されると、拡散ステップが行われます。拡散には、既知の領域から未知の領域への色とテクスチャの情報の段階的な拡散が含まれます。拡散プロセスは、修復された領域と元のコンテンツの間のスムーズな移行を作成し、生成されたイメージの視覚的な一貫性を確保することを目的としています。
安定した拡散修復を使用するにはどうすればよいですか?
修復は、マスクを使用してテキスト プロンプトを含む既存の画像を編集できる機能です。マスクは、AI モデルを使用して画像のどの部分を再生成するかを示す白黒画像です。インペイントを使用すると、欠陥の修正、オブジェクトの追加または削除、色やスタイルの変更などを行うことができます。ユーザーは、公式リンクに従ってローカルにインストールすることも、Web ユーザー インターフェイスを介してその機能を利用することもできます。
指定された手順に従って、実際の実装を検討してみましょう。
ステップ 1: 「txt2img」タブを選択します
を選択 ' txt2img 」タブをクリックし、テキストボックスにテキストプロンプトを入力します。ユーザーは任意の単語やフレーズを使用できますが、AI モデルが理解できるほど説明的で具体的なものであることを確認してください。ユーザーは、「:」、「+」、「-」、「(」、「)」などの修飾子を使用してプロンプトを微調整することもできます。たとえば、「」の画像を生成します。 メガネと帽子をかぶった猫 ' 以下のように：
ステップ 2: モデルのチェックポイントを選択する
ユーザーは、左上隅のドロップダウンからモデル チェックポイントを選択できます。モデル チェックポイントは、イメージ生成のスタイルと品質を決定します。利用可能なチェックポイントがいくつかあります。 モデル.ckpt ”、” sd-v1-5-修復 ”、” sd-v1-5-256 ”、” sd-v1-5-512 ”など：
ステップ 3: 画像サイズを調整する
画像サイズなどはお好みに合わせて調整してください。画像のサイズによって出力画像の解像度が計算されます。その他の設定には、ノイズ除去の強度、CFG スケール、バッチ サイズなどが含まれており、これらは画像生成の速度と品質に影響します。
ステップ 4: 「生成」ボタンをクリックします。
「」を押してください 生成 」ボタンをクリックすると、画像の生成処理が開始されます。ユーザーのプロンプト、モデルのチェックポイント、設定によっては、イメージの生成に数分以上かかる場合があります。
ステップ 5: 「修復に送信」ボタンを押します。
イメージが生成されたら、ユーザーはそれを保存したり、修復を使用してさらに変更したりできます。
ステップ 6: マスクを作成する
修復を使用するには、「 img2img 」タブをクリックし、「 インペイント 」サブタブ。画像上にマスクを作成するにはペイントブラシツールを使用します。黒い領域は、以下のようにテキスト プロンプトに基づいて AI モデルが画像を再生成する場所です。
ノート : ユーザーは、「」をクリックして画像を修復キャンバスにアップロードすることもできます。 アップロードの修復 」ボタンを押すか、既存の画像を使用します。
ステップ 7: 「生成」ボタンをクリックします。
元のイメージの生成に使用したのと同じモデル チェックポイントと設定を選択して適用し、「 生成 ' ボタン：
出力は、安定した拡散修復機能が適用されたことを示しています。
安定拡散のメリットと使い方
安定拡散修復には、他の修復方法に比べて次のようないくつかの利点があります。
- 大きな領域の欠落ピクセルや複雑なテクスチャを管理できます。
- 画像のシャープなエッジや細かい部分を保持できます。
- ブラー、リンギング、過剰なスムージングなどのアーティファクトを回避できます。
- 標準的な数値手法を使用して簡単に実装および並列化できます。
安定した拡散修復は、次のようなさまざまな用途に利用できます。
- 画像修復 : 古い写真、絵画、文書などの破損または劣化した画像を修復します。
- 画像編集 : ロゴ、透かし、傷などの不要なオブジェクトまたは領域を画像から削除します。
- 画像の完成 : オクルージョン、穴、ギャップなど、画像内の欠落している領域を埋めます。
結論
安定拡散修復は、画像内の欠落または損傷した領域を復元するための強力でユーザーフレンドリーなソリューションを提供します。画像拡散の概念を使用することにより、ユーザーはペイントされたコンテンツを元の画像と統合し、視覚的な一貫性を確保し、アーティファクトを最小限に抑えます。直感的な GUI と調整可能なパラメータにより、ユーザーは修復領域を簡単にマークし、修復プロセスを制御できます。この記事では、安定した拡散修復を使用する主な手順と利点、およびそのアプリケーションのいくつかについて説明しました。