ControlNet作者の新作：AI照明がさらに進化！ディテール保持はSD1.5をはるかに上回ります。

ControlNetの作者「ミン・シェン」（張龍民）が新しいプロジェクトを立ち上げました。

IC-Light V2と名付けられたこの製品は、 AI照明の技術を習得したと言えます。

IC-Lightは、張龍敏氏が開発した、AI技術を使用して画像内の照明効果を正確に制御できる画像処理ツールです。

V2 バージョンは、16 チャンネル VAE とネイティブ高解像度を特徴とするFLUXに基づく IC-Light モデルシリーズです。

早速、結果を見てみましょう。

たとえば、任意の写真を入力し、プロンプトメッセージを追加できます。

フリッカー 2008 年の写真。背景には女性、ネオンライト、都市、車、人々が写っています。
2008 年の写真。背景には女性、ネオンライト、街、車、人々が写っています。

最終的な結果は完全に自然に見えます。

ズームインして、前後の比較を詳しく見てみましょう。文字の詳細が保持されていることがさらに明らかになります。

別の例を見てみましょう。

ミン・シェン自身によると：

IC-Light V2 は、より優れたトレーニング方法の恩恵を受けており、 SD1.5 よりもはるかに高いレベルの詳細の保存を実現します。

新しいツールの効果を見たネットユーザーたちは、これは「世界最高の再照明ツールだ」と絶賛した。

様式化された画像も処理できる

SD1.5 をベースにした以前の IC-Light には、スタイル設定された画像を処理する際のパフォーマンスが理想的ではないという問題がありました。

たとえば次のようになります:

元の画像はアメリカンコミック風だったのが分かりますが、出力された画像はよりリアルになっています。

さらに、プロンプトが「シュルレアリスム絵画」というキーワードを提供している場合でも、結果として得られるスタイルには、まだ少し漫画のような感じが残ります。

はい、AIはこのキーワードを単に無視しました。

現在、FLUX をベースにした IC-Light V2 は、以前の欠点を補っています。

ミンシンは、キャラクターに加えて、他の主要な主題の効果も展示しました。

現在、IC-Light V2 は HuggingFace でオンラインテストが可能です。

以下は、マスク氏とテストした写真の例です。

なお、今回ミンシンが発売したIC-Light V2は、実はシリーズ化されたモデルです。

現在利用可能なバージョンは、入力画像の詳細の保持を重視した前景条件付きモデルです。

さらに3つのモデルが順次リリースされます。

最後にミンシン氏はこのモデルに関して次のように付け加えた。

現在のモデルはHuggingFaceでのみ体験でき、より多くの推論コードと重みが後でリリースされる予定です。
ただし、V1 とは異なり、このライセンスは非営利目的でのみ使用されます。

お試しいただけるリンクは下記にありますので、ご興味のある方はぜひお試しください。

体験住所：
https://huggingface.co/spaces...

参考リンク:
[1]https://github.com/lllyasviel... [2]https://x.com/multimodalart/s...