Stable Diffusionの修復(inpainting)は画像の損傷領域や欠落部分を埋めるときにユーザーが使える便利な機能です。写真の見たくない部分を削除するのにも便利です。実際この技術はユーザーが望むように表示され、特定の目的に適したリアルな画像を生成します。

Stable Diffusionを使用して画像の生成を行い、更なる成長を求めるデジタルクリエイターにこの記事をオススメします。このブログでは、Stable Diffusionについて知っておくべきことをすべて共有しています。さらに、Stable Diffusionで画像を修復する実践的な方法、さまざまな分野でStable Diffusionを最大限に活用する方法も記載しています。

目次

Part 1.Stable Diffusionの修復とは何か?

修復はテキストプロンプトガイドを使用して、写真の一部を別の写真に置き換えるのに役立つ機能です。Stable Diffusionはユーザーが最も創造力を発揮できるように、多くの編集ツールを提供しています。

ワークフローはシンプルです。オリジナルの写真や置き換えたい部分の輪郭を示すマスク写真、およびテキストプロンプトを提供するだけです。これでStable Diffusionは新しい写真を使用して、マスクされた部分をテキストプロンプトで説明した任意のオブジェクトまたは内容に置き換えます。

how does stable diffusion inpainting work

以上です!

Stable Diffusionの修復ツールは、既存のイメージまたは元のイメージとは異なる新しいイメージを作成する場合に便利です。さらに魅力のない部分をより視覚的に魅力的なオブジェクトに置き換えることにより、古い画像や劣化した画像を修復することができます。

Stable Diffusionのような強力なAIテクノロジーの場合は、エンドツーエンドの修復テストを実行して、元の画像、テキストプロンプト、マスク イメージ、および目的の出力がすべて同期していることを確認する必要があります。次のセクションではこれについて説明します。

Part 2. Stable Diffusionの修復はどのように機能するか?

Stable Diffusionによる修復がどのように機能するか知りたいですか? 次は修復に使用できる3つのStable Diffusion修復ツールについて解説します。

安定した3つの実用的な修復ツール:

1.Hugging Face Multi-Inpainting(ハギングフェイスマルチ修復)

Stable Diffusionの修復の最初の方法は、Hugging Face Multi-Inpainting ツールです。このツールがどのように機能するかを学ぶには、以下のガイドに従ってください。

  • オンラインで Hugging Face Stable Diffusion修復にアクセスしてください。
  • 編集したい画像をドラッグ&ドロップするか、中央のキャンバスをクリックしてデバイスまたはコンピューターから画像をアップロードします。
upload image to hugging face inpainting model
  • オプションにチェックを入れて、削除したい領域をブラシで覆うかマスクしたい部分を入力します。
brush over certain part to remove
  • 説明テキストプロンプトを入力して、ユーザーがマスクされた部分に何を追加するかを指定します。「実行」を選択し最終結果が得られるまで数秒待ちます。満足できない場合は最初からやり直すことも新しいイメージをダウンロードすることもできます。
input text prompts in hugging face inpainting model

2.Getimg.aiエディター

私たちが推奨するStable Diffusionを使用した2番目の実用的な修復ツールは、Getimg.aiエディターです。このツールを使用するには、次のガイドに従ってください。

  • オンラインでGetimg.aiエディターにログオンし、ページ中央の「+」記号をクリックし空白のキャンバスに修復したい新しい画像を追加します。
add new image to Getimg.ai Editor
  • 消しゴムアイコンをクリックしブラシサイズを選択、マスクしたい写真の領域上に消しゴムブラシをドラッグします。置き換えたいものすべてが消しゴムで完全に覆われていることを確認してください。
use eraser tool of Getimg.ai Editor
  • 新しいオブジェクトを追加するには、「インペイント/アウトペイント」を選択し、マスクされた部分を覆うように「生成フレーム」をドラッグします。次に「プロンプト」の下のボックスに移動し、マスクされた領域の上に何を作成したいのか内容を入力します。そして「生成」をクリックします。
inpaint with Getimg.ai Editor
  • プロンプトに基づいて、Stable Diffusion修復エディターは4つの新しいバリエーションを表示します。右矢印をクリックして各画像を表示し、「承認」する前に最も魅力的な新しい画像を選択してください。下の画像では、最後のバリエーションを選択しています。
preview the inpainting result
  • 出力が気に入らない場合は、キャンセルして最初からやり直すこともできます。ただしこのAIエディターが最適な結果に辿り着くまでプロンプトを調整する必要があります。以下は修復プロセスの前後です。
adjust the inpainting result on Getimg.ai Editor

3. Inpainter Vercel アプリ

Inpainter Vercelアプリは、Replicate Stable Diffusion修復オンラインツールを使用して、画像の一部を選択した別の画像に簡単に置き換えます。このツールを使用するには、以下のガイドに従ってください。

  • オンラインで「Replicate Stable Diffusion inpainting」にアクセスし、「Start Painting」ボタンを選択します。
start inpainting with Inpainter Vercel App
  • デバイスのストレージから画像をドラッグ&ドロップするか、説明のテキストプロンプトを入力して最初からペイントをするか2つのオプションが表示されます。まず「生成」をクリックします。
start painting
  • テキストプロンプトを使用した場合は、Inpainterが画像を生成するまで数秒待ちます。変更したい場合はさらにプロンプトを追加します。そうでない場合は、次の段階に進みます。
generate new image
  • コンピュータのマウスまたはスマートフォンの画面で置換する件名を入力し、塗りつぶされた領域に配置するオブジェクトを入力します。ここで、もう一度「生成」を選択します。
replace with new subjects
how does stable diffusion inpainting work

様々な分野、様々な用途で

Stable Diffusionの修復は、以下のように様々な分野、様々な用途で役立ちます。

  • 建築では建物の損傷部分や不完全な部分を修復するために使用でき、建設作業員がより正確で完全な情報を利用し作業できるようになります。
  • 医学では患者の脳のMRI画像検査による最適でない結果を軽減するのに役立ちます。たとえばMRIの処置中に患者の頭部が拘束されると画像が切り取られデータの損失や不正確な診断につながる可能性があります。ここで修復によって高品質なスキャンが保証されます。
  • 写真では修復は写真内の人物の顔や肌の傷を滑らかにしたり除去したりできます。
  • フィルム修復では欠落または破損したフレームを復元するためにも使用されます。

Stable Diffusion修復の長所と短所

長所:

このエディターを使用する主な利点は次のとおりです。

  • 古い写真を当時のまま、あるいはそれ以上に復元することができます。修復ペイントを使用すると画像から傷、ひび割れ、赤目、ほこりの斑点を除去して、画像をより魅力的にすることができます。
  • Stable Diffusionは処理に熱方程式を使っており数学的にも安定しています。これは画像のパッチに強度値をなどを調整する際に不安定性を引き起こすことはありません。それがスムーズで自然な仕上がりにつながります。
  • シームレスな仕上がりで、複雑に構造化された画像、エッジ、テクスチャ、シャープなトランジションの再構築ができます。
  • Stable Diffusionの修復は他のほとんどの編集ツールよりも速く効率的な結果を生成します。
  • 最終的に高品質な画像解像度で生成されるため、さまざまなアートスタイルや組み合わせを模索できます。

短所:

このエディタの主な制限といくつかのバイアスを以下で説明します。

  • この修復モデルを使用しても完全なリアリズムを達成することはできません。
  • より複雑なタスクに関しては、Stable Diffusionの修復は期待どおりに機能しません。パターン化されたサーフェスやテクスチャーはStable Diffusionで編集すると、不自然に見える場合があります。
  • この修復モデルは英語のキャプションを使用して構築されているため、他の言語のプロンプトで説明された画像を生成することは出来ません。実際に実行すると英語のプロンプトの画像よりも悪い結果になります。
  • 機密データなどを用いる場合、このツールを使うことでAIで生成された画像が第三者に渡るというセキュリティリスクがあります。
  • このツールはあなたが望む画像のあらゆる側面を自然な形で追加および置き換えることができるため、現実とは異なり誤解を招く可能性があります。

エキスパートからのヒント:

1. 高品質なソースイメージを使用すれば正確かつ効率的な修復結果が確保できます (高品質のソースイメージを取得するには、 Media.io AI フォトエンハンサーを試してください)。

2. Stable Diffusion InpaintingをMedia.io AI オブジェクト リムーバー(写真から不要なオブジェクトを削除する)、フォト リストアラー(古い画像を新しい画像に変える)、AI BG リムーバー(写真の背景を変更する) などの他のAI画像処理ツールをあなたが望む結果に合わせて使ってください。

3. Stable Diffusion修復のパラメータを調整して最終結果を最適化してください。

4. フォーラムやブログをフォローし、研究論文を読み最新のAI画像処理テクノロジーの情報を入手してください。

結論

この記事では、簡単に使用でき、かつ信頼性の高いエディターであるStable Diffusionを使用してオンラインで画像を修復する方法について知っておくべきことを解説しました。このガイドラインに従うことで、写真から不要なオブジェクトや背景を削除し、古い写真を視覚的に魅力を高め画像やシーンの失われた部分を復元できるようになったはずです。最後に、AIでペイントされた最終的な画像をさらにゴージャスにレベルアップしたいならMedia.io オンラインオールインワンエディターを強くお勧めします。

田中 菜月
田中 菜月 Jan 09, 24

画像高画質化
ai-portrait-generator