Flux Union Pro ControlNet by InstantX ＆ Shakker 改訂版

31.03.2026, updated to fix ComfyUI nodes2.0 and HSWQ fp8e4m3.

以下の動画を参考に、正しく組み直しています。VRAM消費は半分以下に激減し、Flux-dev-16fpであってさえ概ね12GB未満で動作しました。

最初に組んだUnion用のワークフローではVRAM消費が30GB近くになり、devでの動作を諦めてSchnellで組んだ訳ですが。

新しく組み直したノードです。

以下は、Nunchaku版です。

LoRA Loader部分は、以下の私が開発したノードも必要です。

SDXLとSD3で開発された、「Union」という画期的なControlNetモデル形式がありました。一つのsafetensorsファイルのみで、複数のControlNet機能を実現する統合型モデルの事です。

更に、より軽量なfp8動作のVer2.0が開発されたので、それを使う前提で作成しています。フルサイズ版に比して、かなり高速に動作します。

SD3用にUnionを開発したAI開発グループ「InstantX」が、Flux1用にそれを開発していることは事前に知っておりましたが、ComfyUI用のノードが公開され、使用できる状態になりました。

改訂版の肝は是ですね、「AIO Aux Preprocessor」。これに前回は気づかなかった。

Samplerは、私もサポートに関わっているControlAltAIを使用しています。

その後、いつも触れている如く私自身がサポートメンバーになっているAI開発グループ「ControlAltAI」がUnion用のノードを開発し、ワークフロー自体をかなりシンプルに再構成することができました。

上ファイルは、それを反映させています。

…

今日のBGMは…LinkinParkの曲中、私の最愛曲。故Chester Benningtonさんの盟友のMikeさんでさえ、「Too sad」と評した曲です。

私は、人間そのものに対する絶望を知る人間の言葉をこそ、信じています。

Mikeさんは、Chesterさんの死後、この曲をよくライヴで歌っておられた時期があります。

‘Cause I’m only a crack in this castle of glass…このフレーズは、人間そのものに対する絶望を知るChesterさんだからこそ、生みだせたのでしょう。