見出し画像

【さよならChatGPT?】HiDream-E1を使って、自然言語(日本語指示だけ)で画像編集をする方法と注意点を初心者向けに解説します💡

どうも皆さん!誰もいないはずなのに自分の名前を呼ばれた気がして、心臓が飛び跳ねる現象、あれは空耳アワーですよね、 葉加瀬あい(ハカセアイ) です!

まず、記事の内容を動画でみたい方は、こちらからどうぞ!

 https://note.com/ai_hakase/n/nd179da242361

HiDream-E1って一体何者!? ✨

今回ご紹介するのは、 「HiDream-E1」 という、とっても賢いAIモデルなんです!

既にご存知の方もいらっしゃるかもしれませんが、以前私のノートでワークフローをお配りしていたものの、さらにパワーアップしたバージョンになるんですよ⋯!

https://note.com/ai_hakase/n/n47859ea93b2b

自然な言葉で画像編集ができちゃう! まるで魔法みたい! 🧙‍♀️

「HiDream-E1」が一体どんなことができるのかと言いますと⋯ なんと! 自然言語 、つまり私たちが普段おしゃべりしている言葉で、画像編集の指示ができちゃうんです! すごいですよね!

具体的にどんなことができるか、ちょっと見ていきましょうか!

画像に新しい要素を「ちょい足し」! ➕

洋服の着せ替えやスタイルチェンジもお手の物! 👗✨

まるで別人!? ちびキャラ化だってお任せあれ! 🧑‍🎨

ということで、今回の記事では、こんなポイントに絞ってお話ししていきます!

  • ① 喋るだけで画像が変わる!?自然言語AI「HiDream-E1」の基本性能と、驚きの編集例を大公開!

  • ② もうプロンプトに悩まない!ComfyUIを使って、日本語の指示だけでサクッと画像編集する具体的な方法とは?

  • ③ 高スペックPCは必須?HiDream-E1を使う上での注意点と、誰でも試せる環境構築のヒント!

ちなみに、Youtube では、Note記事を動画にして公開しています!私のNoteメンバーシップ あいらぼ(Ai-Lab)だけで配信している 限定パートも、公開後、先着数名さまに限定公開しておりますので チャンネル登録 にしておくと見逃しませんよ!

https://www.youtube.com/@AI-Hakase

それと、X (旧Twitter) でも、 AI・トレンドの速報 を発信しておりますので、最新技術やお得情報を見逃したくない方は、こちらのフォローもお願いします!

https://x.com/ai_hakase_  

それでは、本日もよろしくお願いします!


HiDream-E1のヒミツ⋯ 実はオープンソースなんです! 🌍

さて、この素晴らしい「HiDream-E1」ですが、実は 「HiDream-I1」 というモデルに基づいて構築されていて、なんと オープンソース として公開されているんです!

オープンソースということは、誰でも自由に使えるということなので、私たちにとってはとっても嬉しいお知らせですよね!

だから、こちらでも解説した、ベースモデルの「HiDream」で生成した画像との相性もバッチリなんです!

https://note.com/ai_hakase/n/n55ea47af4552

気になる実力は? ベンチマークをチェック! 📊

「じゃあ、HiDream-E1は一体何が得意なの?」って気になりますよね!
こちらのベンチマークを見ていただくと一目瞭然なんですが⋯

テキスト指示による画像の修正 や、 カラーリングの変更画風の変換 、さらには画像内の 不要なものを消し去る 、といったタスクが特に得意なんです!

以前、こちらの記事でもご紹介した「Gemini 2.0 Flash」の画像編集機能と比較しても、一部の項目ではHiDream-E1の方が少し良い成績を収めている⋯と言えば、その実力の高さが伝わるでしょうか?

https://note.com/ai_hakase/n/n8a92685c823e

でも、万能じゃない? 注意点も知っておきましょう! ⚠️

ただ、とっても優秀な「HiDream-E1」ですが、例えば「ChatGPT-4」のように、何でもかんでもパーフェクトにこなせるというわけではないようなんです⋯。

ですので、今回はその辺りの 注意点 なども、しっかりお伝えしていければと思います!

HiDream-E1を体験してみよう! 🚀

「私もHiDream-E1を使ってみたい!」と思ったそこの皆さん!
ご安心ください! まずは手軽に試してみたいという方向けに、 デモページ が用意されているんです!

こちらから簡単にその機能を体験できるので、ぜひぜひアクセスしてみてください!

https://huggingface.co/spaces/HiDream-ai/HiDream-E1-Full

なんとComfyUIでも使えちゃう! 🎨

そしてそして! なんとこの「HiDream-E1」、人気の ComfyUIでも使用できる ようになっているんです!

今回、私もこんな感じで、ちょっとしたワークフローを作成してみました!

① 編集したい画像をセット! 🖼️

設定する項目もとってもシンプルなんです!

まずは、こちらの画像入力部分に、皆さんが編集したい画像を ドラッグアンドドロップ するだけ!

② どんな風に変えたい? 日本語で伝えるだけ! 🗣️

そして次に、どのように画像を変更したいのかを、 日本語で入力 するだけでOK!

たったこれだけのステップで、AIがよしなに画像編集用のプロンプトを自動で作成してくれるんです!

このように、画像の編集や追加などがとっても簡単にできてしまうわけですね!

ただし、実際に試してみたところ、少し注意点もありました。それは、画像生成に必要なPCスペックについてです。

どうやら VRAMの容量は24GB以上は必要 な雰囲気でした⋯!
なかなかのスペックが求められちゃいますよね。

ただ、「そんな高性能なPC持ってないよ~!」という方も、ご安心ください!
私としては、 PaperspaceのGrowthプラン などから利用する方法をおすすめしたいんです!

ただ、「Growthプランはお高い⋯」と感じる方には、 Proプラン からでも、少し品質は落ちてしまうかもしれませんが、お試しいただくことは可能かと思います!

こちらの詳しい説明に関しては、以前に Paperspaceから簡単にComfyUIをワンクリックで起動する方法 について、詳しく解説した記事がありますので、ぜひそちらもご覧になってみてください!
今回は、こちらの記事を元に説明を進めていきたいと思います!

https://note.com/ai_hakase/n/n3a7b93aa12a1?magazine_key=ma5812eb86d3b&from=membership-magazine

まずはモデルをワンクリックインストール!

具体的にどうやって進めていくかと言いますと⋯!

まず、いつものように、こちらのような ワンクリックモデルインストーラー を皆さんにお配りします!

これを使えば、今回必要なモデルを、本当にワンクリックで、ぜーんぶインストールできちゃうんです!

次にワークフローを読み込むだけ!

そしてその後に、こちらのような今回使用する ワークフロー を皆さんにお配りして、実際に画像を生成していく、という流れになります!

AIにお任せ!驚くほどシンプルな画像編集ステップ!

そしてそして!生成のやり方についても、先ほどご紹介したように、こちらの 「画像」と「プロンプト」の2点だけ を設定していただければ、あとはAIがよしなにプロンプトなどを考えてくれて、画像を編集できるようにしてあるんです!

ということで、ここからは私のNoteメンバーシップ「あいらぼ(Ai-Lab)」にご参加の皆さん向けに、さらに詳しい解説をしていきたいと思います!

「あいらぼ(Ai-Lab)」には、現在なんと 400人を超えるAIクリエイターさん が参加されていて、最新のトレンドAI情報はもちろんなんですけど、公式LINEとの連携で、AIに関するお悩み解決なども行っているんです!すごいですよね!

ただ⋯ごめんなさい! 人数制限 を設けているので、もしご興味のある方がいらっしゃいましたら、ぜひお早めにこちらのリンクから入門して、この先の情報もチェックしてみてください!お待ちしています!

https://note.com/ai_hakase/membership

ということで、「あいらぼ(Ai-Lab)」入門者の皆さん、お待たせいたしました!
早速、続きをやっていきましょう!

まずは専用ノートブックをダウンロード!

まずは、今回使用する ノートブックの配布 からですね!
こちらをまずはダウンロードしてください!お願いします!

ここから先は

8,152字 / 49画像 / 3ファイル

あいらぼ (Ai-Lab) は、NoteとYouTubeを活用して、皆さんを「生成AIを使いこなす側…

🐾あいらぼ:記事|動画|ComfyUI ワークフロープラン

¥1,980 / 月
あと6人募集中

🐾あいらぼ:記事|動画|WF プラン(質問・サポート付き)

¥4,980 / 月
あと9人募集中

この記事が気に入ったらチップで応援してみませんか?