見出し画像

【もう課金不要】無料の画像編集AI『Qwen-Image-Edit』がヤバい。神テキスト編集&デュアル編集の使い方を完全解説。

「Photoshop、さようなら?」言葉で画像を操る魔法のAI、登場。

どうも皆さん!最近、スタンディングデスクのマットを買ったら猫の寝床になりました! 葉加瀬あい(ハカセアイ) です!
ということで今回ご紹介するのは、 「Photoshop、さようなら?」 言葉で画像を操る魔法のAI、 「Qwen-Image-Edit」 です!

https://github.com/QwenLM/Qwen-Image?tab=readme-ov-file

画像

皆さん、画像のちょっとした修正のために、重た〜いデザインソフトを立ち上げるの、正直、面倒くさくないですか?😭

画像

「このロゴの文字の色だけ、ちょっと変えたい…」
「あー!写真の隅に、余計なものが写り込んじゃった…」

たったそれだけのことなのに、ソフトを起動して、ファイルを開いて、レイヤーを選んで…って、なんでこんなに大変なのー!って、叫びたくなった経験、私もあります!  

画像

ですが…!
そんなクリエイターの長年の悩みを、まるで "言葉"だけで解決してくれる魔法のAI が、ついに登場しました!

画像

ということで今回お話しする内容はこんな感じです!

1.  【神業テキスト編集】画像の中の"文字"を直接書き換える、AIの悲願達成の瞬間とは?
2.  【二刀流の魔法】"意味"も"見た目"も自由自在!ジブリ風アバターからバーチャル試着まで!
3.  【今日から試せる!】WebデモからComfyUIまで!Qwen-Image-Editのカンタンな始め方

画像

この記事を最後まで読めば、皆さんの画像編集の常識がガラッと変わってしまうかもしれませんよ…!

画像

なお、Youtube では note の内容をAIで動画に変換して公開しているので、まだの方は noteのフォローYouTubeのチャンネル登録 もお願いします!

https://www.youtube.com/%40AI-Hakase

それでは、本日もよろしくお願いします!

Qwen-Image-Editとは?:"生成"から"編集"の新時代へ

開発元:あのAlibaba Qwenチームが放つ、次なる一手!

まず、この魔法のようなAIを開発したのは、あの AlibabaのQwenチーム です!
高精度な画像 生成 AI「Qwen-Image」で世界を驚かせたあのチームが、今度は画像 編集 の常識を覆しに来ました!

画像生成で培った圧倒的な技術力を、今度は「編集」という、より繊細で、よりクリエイティブな領域に特化させてきたんです。これはもう、期待しかありませんよね!  

画像

Qwen-Imageについては、私もYoutube の動画で解説しているので、そちらもご覧ください!

技術的仕組み:"意味"と"見た目"を操る「デュアル編集」の秘密

Qwen-Image-Editのすごさの秘密は、 「デュアル編集」 という、まさに二刀流の魔法が使える点にあります!

画像

これは、画像の 「意味」「見た目」 、その両方を言葉だけで自由自在に操れる、ということなんです!

画像
  • 意味的編集(セマンティック編集)
    これは、AIが画像の 「意味」をちゃんと理解している からこそできる、とっても賢い編集なんです!

画像

例えば、「 このカピバラを画家にして! 」ってお願いするだけで、ちゃんとベレー帽をかぶって、パレットと筆を持った画家さん風のカピバラさんが生まれるんです!すごいですよね!

https://qwenlm.github.io/blog/qwen-image-edit/

画像
  • 外観的編集(アピアランス編集)
    こちらは、AIが画像の 「見た目」をピクセル単位で正確に認識している からこそできる、超精密な編集です!

画像

写真に写り込んだ、この髪の毛一本だけ消して! 」なんていう、プロのレタッチャーさんがやるような、神業レベルの修正も言葉だけで可能なんです!もう、ため息が出ちゃいますね…!

画像

性能評価:もはや敵なし?公開ベンチマークで「SOTA」を達成!

「でも、それって本当にすごいの?」って思いますよね!
その実力は、客観的なデータでもしっかり証明されています。Qwen-Image-Editは、公開されている複数のベンチマークテストで 「SOTA(State-of-the-Art)」 を達成しているんです!

「SOTA」というのは、「その分野で最も優れた、最先端の性能の証」として与えられる、いわば金メダルみたいなもの!つまり、Qwen-Image-Editは、 画像編集AIの世界チャンピオン クラスの実力を持っている、ということなんです!🥇

画像

実際に、同じく高性能な画像編集AIとして知られる「Flux Kontext」と比較した検証も行われていて、総合的な成功率ではQwen-Image-Editが上回る場面も報告されているんです!

もうこれは、プロの現場でも無視できない、とんでもない実力ですよね!

https://da.gd/12w0t

画像

Qwen-Image-Editの"神業"デモンストレーション

さて、ここからはQwen--Image-Editがなぜ「魔法」と呼ばれるのか、その"神業"と呼ぶにふさわしいデモンストレーションを3つご紹介します!

画像

神業①:AIの悲願達成!驚異の「テキスト編集」

しかも本当にすごいのが、これまでAIが最も苦手としてきた、画像内のテキスト編集…その数々の失敗の歴史が、ガラッと変わったんです!

画像

どういうことかと言いますと、Qwen-Image-Editは、画像内の文字を、まるでWordの文章を扱うように、言葉だけで直接編集できるんです!

画像

看板の文字を追加・削除・変更するのはもちろんのこと、

画像

圧巻なのは 「書道の誤字を段階的に修正していく」 デモンストレーションです!

画像

AIが文字の形だけでなく、その意味や文脈まで理解しているからこそできる、まさに神業ですよね。

画像

元のフォントやスタイルを完全に保ったまま、ここまで精密な編集ができる時代が来たんです…!

画像

神業②:皆さんもジブリの主人公に?夢の「スタイル変換」

意味的編集の真骨頂が、この「スタイル変換」機能です!
皆さんの普通のポートレート写真が、プロンプト一つで、 宮崎駿監督のスタジオジブリ風イラストに一瞬で変身 してしまうんです!

これさえあれば、専門的な知識がなくても、誰でも自分のオリジナルアバターが作れちゃいます!VTuberさんやSNSのアイコン作成にも、無限の可能性が広がります!

画像

神業③:未来のファッション!魔法の「バーチャル試着」

「この服、私に似合うかな…?」そんな悩みを解決する未来が、もうすぐそこまで来ています!

画像

Qwen-Image-Editを使えば、まるで魔法のように 「バーチャル試着」 ができてしまうんです!

https://replicate.com/qwen/qwen-image-edit

画像

言葉の指示だけで、全く違うデザインのドレスやシャツに自然に着替えていますよね!

自分の写真を使って、ECサイトの服を無限に試着…なんて未来も、もうすぐそこまで来ています!

https://is.gd/vx0P0w

画像

今すぐ魔法を体験!カンタンな始め方

アクセス方法:一番簡単なのはコレ!

「この魔法、私もすぐに使ってみたい!」と思った皆さん、ご安心ください!

一番カンタンに試せるのは、 Hugging FaceQwen Chatで公開されている公式デモ です!アカウント登録や難しい設定は一切不要で、ブラウザからすぐにそのすごさを体験できます!

画像

ComfyUIユーザーの皆さんへ

そして、もちろん!私たちの愛する ComfyUIにも、Qwen-Image-Editは公式でネイティブ対応済み です!
https://docs.comfy.org/tutorials/image/qwen/qwen-image-edit

画像

1. モデルをダウンロードして、正しい場所に配置しよう!

使い方はとても簡単!まずは、魔法の杖となるモデルファイルをダウンロードしましょう!以下の4つのファイルが必要です。

画像

ダウンロードしたら、下の図のように、それぞれのファイルを正しいフォルダに入れてあげてください!ここを間違えると動かないので、要注意です!

画像

2. ワークフローを読み込んで、設定しよう!

モデルの準備ができたら、次はワークフローです!
公式ドキュメントページにあるワークフロー画像を、ComfyUIの画面にドラッグ&ドロップするだけで、

画像

基本的な形が自動で読み込まれます。

あとは、下の図の番号に沿って設定していくだけ!とっても便利ですよね!

画像

使いこなしのコツと注意点

さて、ここからはQwen-Image-Editをさらに深く、そして快適に使いこなすための、とっておきのコツと注意点をお話しします!

画像

隠れた機能:画像の"立体"まで理解する?!

実はこのQwen-Image-Edit、ただ画像を平面的に編集するだけじゃない、とんでもないポテンシャルを秘めているんです…!
なんと、プロンプト一つで、 画像の奥行き(深度マップ)や凹凸(法線マップ)まで抽出できてしまう そうなんです!

https://tinyurl.com/24qn8kz4

画像

これって、AIが画像の表面をペタッとした絵としてではなく、 立体的な構造として理解している ということなんです!すごいですよね!

この機能がもっと進化すれば、将来的には ControlNetのように、画像の構造やポーズを保ったまま、全く違う絵を生成する 、なんていう超高度な編集も可能になるかもしれません…!本当に、底知れない可能性を感じます!

画像

注意点:意図しないズームを防ぐには?

「よーし、ComfyUIでQwen-Image-Editを試してみるぞ!」と意気込んだ時に、もしかしたら遭遇するかもしれない、ちょっとした落とし穴についてもお話ししておきます!

コミュニティの報告によると、「 なぜか編集後の画像が、意図せずズームアップされちゃう…! 」という現象が起こることがあるそうなんです。

https://www.reddit.com/r/StableDiffusion/comments/1muiozf/pay_attention_to_qwenimageedits_workflow_to/

画像

でも、ご安心ください!解決策はとってもカンタン!
そんな時は、ワークフローの中にある 『TextEncodeQwenImageEdit』ノードから、VAEに繋がっている線(接続)を切断する だけで解決するそうです!

画像

たったこれだけで、意図しないズームを防いで、イメージ通りの編集ができるようになります。もし困った時は、ぜひこのTipsを思い出してください!

https://tinyurl.com/298omece

画像

そして…実は、公式のネイティブワークフロー、そのままだと少し不安定だったり、もっと効率化できる部分があったりするんですよね…

なので今、 葉加瀬がもっと安定して、もっと皆さんが使いやすいように魔改造した、ワークフローを準備中 です!これについては、また改めて皆さんにご共有したいと思っていますので、ぜひ楽しみにしていてください!

画像

🎈おわりに

いかがだったでしょうか!今回は、まとめると 「画像編集の常識が、"言葉"一つで覆る時代の幕開けを、Qwen-Image-Editが告げに来た!」 ということでした!

画像

1.  Qwen-Image-Editは、画像の"意味"と"見た目"を操る、まさに二刀流の魔法!
2.  AIの長年の悲願だった「画像内テキストの直接編集」を、驚異的な精度でついに実現!
3.  ジブリ風アバター作成やバーチャル試着など、クリエイティブの可能性はもはや無限大!

画像

言葉だけで、ここまで自由自在に画像を操れるようになるなんて、数年前には想像もできませんでしたよね。私も、この技術の進化にただただ感動するばかりです…!

皆様は、 Qwen-Image-Editを使って、どんな魔法の編集をしてみたいですか? ぜひ、皆さんのワクワクするようなアイデアをコメントで教えてください!

画像

今回の記事と動画、楽しんでいただけましたか?

さて、今回の記事と動画、いかがでしたでしょうか?「参考になった!」と思っていただけたら、 Note のフォロー・いいね・グッドボタンの3つも是非よろしくお願いします!

https://note.com/ai_hakase

画像

Youtubeのほう も、まだの方は チャンネル登録 をしていただけると嬉しいです!

https://www.youtube.com/%40AI-Hakase

画像

また、最近は、 海外のAI関連書籍をオーディオブック形式で分かりやすく要約してご紹介 しています⋯!「海外の最新トレンドを知りたい!」という方や、「AI技術のマネタイズ方法に興味がある!」という方には、特におすすめの内容です!

最新のAI技術やマネタイズノウハウ を知りたい方は、ぜひこちらのまとめもチェックしてみてください!

https://note.com/ai_hakase/m/m48b2fac7359a

画像

なお、 マガジン でもジャンルごとに記事や動画をまとめているので、よかったら見てみてください!

https://note.com/ai_hakase/magazines

画像

それでは、また次回の記事か動画でお会いしましょう!

葉加瀬あいでした!バイバイ!



ここから先は

1字

メンバーシップ ¥ 2,599 /月

あいらぼ (Ai-Lab) は、NoteとYouTubeを活用して、皆さんを「生成AIを使いこなす側…

🐾あいらぼ (Ai-Lab):記事/動画/質問プラン

¥2,599 / 月
あと9人募集中

この記事が気に入ったらチップで応援してみませんか?

ピックアップされています

ComfyUI

  • 165本

購入者のコメント

コメントするには、 ログイン または 会員登録 をお願いします。
『初心者からでも分かる最新AI』ということで、生成AIクリエイター向けに Note × YouTube で情報発信する "あいらぼ(Ai-Lab)" を運営しております🧸 ご質問もメンバーシップ掲示板で丁寧に対応していますので、わからないことなどがあれば気軽に聞いてください👌🏻 ̖́-︎
【もう課金不要】無料の画像編集AI『Qwen-Image-Edit』がヤバい。神テキスト編集&デュアル編集の使い方を完全解説。|ハカセ アイ (Ai-Hakase)🐱YouTube × 記事でトレンドAIを解説する為のnote🐾
word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word

mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1