見出し画像

【Runway】映像監督になれる時代到来第2弾。まさにバーチャル撮影現場。動画生成AIの新機能 & Midjourney 画像生成AIプロンプト と V1 Videoモデル。

こんにちは!さきすたです!
先日こんなnoteを書きました!

今回は、前回ご紹介できなかった
Runway Gen-4 Referencesのさらなる新技術をご紹介!
これを覚えておくと、構図やキャラクターの使いまわしが自由自在…!
作品づくりの表現力が、文字通り格段に広がります!
第1弾と合わせて覚えておくと、もうバーチャル映画撮影現場といった世界です…。

リリースニュース!!!
Runway(ランウェイ)から2025年6月12日にチャットモードが公開されました!
チャットモードについても後日 note に書きます!

それでは、ここから本題です。

まずは、Runwayを使って不要な背景を処理する方法をご紹介します。
いわゆる「グリーンバックを使ったクロマキー合成」。
といってもグリーンバックを用意するわけではなく…すべてRunwayを使って処理できるんです。

このひと手間を加えるだけで、画像参照の精度がグッと上がります!


1.背景をグリーンバック(グリーンスクリーン)にする

グリーンバックとは
グリーンバック(グリーンスクリーン)の効果とは、映像や画像の背景を自由に差し替えるための技術で、主に映画・テレビ・YouTube・写真撮影などで活用されます。人間の肌の色(赤系)と一番離れている色が緑なので、誤検出が起きにくいです。

Runwayでは素材を参照して他の画像で利用する歳、グリーンバックで無駄な情報がないほうが理想通りの画像を生成しやすいです。
背景など他の要素が含まれると、参照先に影響することがあります。

まずは、使いたい画像を用意します。

Midjourney で生成した画像

Runway Gen 4 Referencesで背景をグリーンスクリーンにする。

元画像を「Cast_A」としました。
@で登録した画像を呼び出すことができます。

詳しい解説は前回のnoteをご覧ください。

Runway Gen-4 References

デフォルトのIMG_1みたいな形のままでもOKです。

Runway Gen-4 Referencesでプロンプトを入力

プロンプト

Remove the background and ground from @Cast_A and place the girl against a flat green background (hex #04F404). Maintain the exact composition of the scene, and remove all contact shadows.

日本語訳:@Cast_Aから背景と地面を取り除き、女の子をフラットな緑色(カラーコード:#04F404)の背景に配置してください。シーンの構図はそのまま保ち、接地している影(コンタクトシャドウ)はすべて削除してください。

細かい髪の毛まできれいにグリーンスクリーン化できました。

Runway Gen-4 Referencesで生成した画像

Referrenceボタンを押して、完成した画像をリファレンスに使います。

生成した画像をReferencesに使います

Cast_A_GSと登録しました。

Runway Gen-4 Referencesで名前を登録

背景画像を用意します。

Midjourney で生成した画像

プロンプト

@Cast_A_GS is sitting at the table in @Location_1. Please ensure she is placed naturally within the scene, maintaining lighting and perspective consistent with @Location_1.

日本語訳:@Cast_A_GSが@Location_1のテーブルに座っています。彼女が自然にシーンに溶け込むように配置し、@Location_1の光や視点と整合性を保ってください。

完成した画像

アスペクト比を16:9で生成しました。

Runway Gen-4 Referencesで生成した画像

人物画像をグリーンスクリーンで背景要素の情報をカットしたため、
カフェの画像は影響を受けずに人物だけきれいに合わせることができました。

テーブルにパンケーキを置いてみる

まずは素材を用意します。

Midjourney で生成した画像

プロンプト

Remove the background and surface from @Pancakes and place the plate of pancakes against a flat green background (hex #04F404). Maintain the exact composition of the scene and remove all contact shadows.

@Pancakesから背景とテーブル面を取り除き、パンケーキが乗ったお皿をフラットな緑色(カラーコード:#04F404)の背景に配置してください。シーンの構図はそのまま保ち、接地している影(コンタクトシャドウ)はすべて削除してください。

Runway Gen-4 Referencesで背景をグリーンスクリーン化

プロンプト

Keep the original composition of @Scene_1, and place a small version of the two-stack pancakes from @Pancakes_GS on the table. Make sure the placement looks natural and matches the lighting and perspective of the scene.

@Scene_1の構図はそのままにして、@Pancakes_GSの2段重ねのパンケーキを小さくしてテーブルの上に置いてください。自然に見えるように配置し、シーンの光と視点に合うようにしてください。

Runway Gen-4 Referencesで生成した画像

動画にする

Runway Gen-4 で生成した動画

完成した動画

動画生成プロンプト

The woman gazes out at the horizon. Behind her, the ocean waves roll in and out in a rhythmic flow. Nearby, people play and splash in the shallow water. A curtain above the rooftop sways gently in the wind. The camera remains fixed, capturing the entire scene with a subtle sense of atmosphere. Smooth, cinematic live-action style.

翻訳:女性は地平線を見つめている。彼女の背後では、海の波がリズミカルに寄せては返している。近くでは、人々が浅瀬で遊び、水しぶきを上げている。屋上の上にあるカーテンが、風に揺られてそっとたなびいている。カメラは固定されたまま、繊細な空気の動きを伴いながら、全体の情景を捉えている。なめらかで映画のような実写スタイル。

環境音は「ElevenLabs」を使いました。

音楽生成用のプロンプト

From a beachside cafe, the gentle sound of waves rolling in and out with a calm, rhythmic pattern. Only the soft, soothing sound of the sea continues peacefully. No voices, no music just the ocean.

ビーチ沿いのカフェから聞こえる、穏やかな海辺の音。波が静かに岸に打ち寄せては引いていく、規則的なリズム。ただ波のやさしい音が続く。

2.画像を使ったキャラ配置(構図)の方法

今度はキャラを増やしつつ、「どのような構図にするのか」を画像を使いながらプロンプトを作る方法です。

まずは使いたいキャラクターの画像を用意します。

Midjourney で生成した画像

先ほどと同様にグリーンスクリーン化します。
今回は「Yuki」と「Kana」という名前を登録。

Runway Gen-4 Referencesに名前を登録

構図用の画像を用意

以下のような簡単な画像で問題ありません。

構図用の簡単な画像を用意

素材が揃ったらプロンプトを入力します。

Runway Gen-4 References

プロンプト

@Yuki and @Kana are standing back-to-back as shown in @IMG_1, with both shown in profile (side view). The background is a vast grassy field stretching to the horizon under a cloudy sky.

日本語訳:@Yukiと@Kanaが@IMG_1のように背中合わせで立っており、2人とも横顔(サイドビュー)で描写されています。背景には、地平線まで広がる草原と曇り空が広がっています。

Runway Gen-4 Referencesで生成した画像

参考画像通りの配置で生成できましたが…!
これぐらいならプロンプトだけでも指示通りに生成可能そうですよね!笑

少し複雑にしてみる

構図用の画像
Runway Gen-4 References

プロンプト

@Yuki and @Kana are standing back-to-back as shown in @IMG_2, with both shown in profile (side view). The background replicates @IMG_2, featuring a sandy beach, an ocean stretching to the horizon, and a yacht floating in the upper right corner.

日本語訳:@Yukiと@Kanaが@IMG_2のように背中合わせで立っており、2人とも横顔(サイドビュー)で描写されています。背景は@IMG_2を再現しており、砂浜、地平線まで広がる海、右上にはヨットが描かれています。

生成結果

Runway Gen-4 Referencesで生成した画像

別の構図を試す

Runway Gen-4 References

プロンプト

@Yuki and @Kana are sitting on the hood of a yellow classic car, as shown in @IMG_3. Reference @IMG_3 to place an American diner in the upper left of the background. The scene is set at night, with cinematic lighting and atmosphere.

日本語訳:@Yukiと@Kanaが@IMG_3のように黄色いクラシックカーのボンネットに腰掛けています。背景左上には@IMG_3を参考にアメリカンダイナーを配置してください。シーンは夜で、映画的な照明と雰囲気で描写してください。

Runway Gen-4 Referencesで生成した画像

3.画像に一貫性をもたせる方法

次はスタイル(Styles)機能を使った生成について紹介します!
作品づくりにおいて、一貫性(トンマナ)をもたせることは非常に大事です!
そのうえで、Runway Gen 4のStylesは非常に強力なツールになります!

まずはStylesを押す

デフォルトのスタイルもありますが、今回は新規で作成します。
「+」ボタンを押してください。

Runway Gen-4 Styles

クリエイト画面が表示されました。
方法は2つあって、直接プロンプトを記載する方法と、参考画像を使う方法です。
今回は先程の画像をスタイルにアップロードします。

Runway Gen-4 Stylesに使いたいスタイルの画像をアップロード

画像の解析が始まりました。

Runway Gen-4 Styles

スタイル用プロンプトが表示されました!
AIが自動で解析してくれるので、とても楽です。

Runway Gen-4 Stylesを使って自動で生成したスタイル用プロンプト

「Styles」に作ったプロンプトが表示されました。
Neonoir(ネオ・ノワール)は自動でネーミングされたものを使っています。もちろん変更も可能です。フランス語で「新しい(neo)」と「黒(noir)」を組み合わせた表現でしょうか。

Runway Gen-4 Stylesで先程作った画像を使う

リファレンス画像を入れて、プロンプトを入力する。

Stylesにチェックを入れてください。
ちなみにスタイルを使う場合、プロンプトにはスタイルに関する表現は極力避けるほうが良いです。Runway Academyで確認しました。

プロンプト

@Yuki and @Kana are sitting at the counter of an American diner. Behind them, a window reveals a view of a nighttime parking lot.

@Yukiと@Kanaがアメリカンダイナーのカウンターに腰掛けています。背景の窓越しには、夜の駐車場が見えています。

Runway Gen-4 Stylesで使いたいスタイルにチェックを入れる

生成結果

Runway Gen-4 で生成した画像

「Styles」を使っているおかげで、プロンプトが非常にシンプルで綺麗。
これなら構図に集中できるので、修正なども行いやすいです!

完成した動画

動画生成プロンプト

The white-haired woman quietly speaks while the black-haired woman nods gently in response. A slow left-to-right dolly movement reveals the two seated at a reflective glass table in a retro American diner at night. Outside the neon-lit window, a vintage car rolls by, its headlights glinting on the glass. Purple-tinged smoke drifts lazily through the room as moody neo-noir lighting casts shifting shadows across the booth. The atmosphere feels still and cinematic, accompanied by a subtle background of soft jazz. Smooth live-action with a dreamy, stylized flow.

日本語訳:白髪の女性が静かに話しかけると、黒髪の女性がやさしくうなずいて応える。ゆっくりとした左から右へのドリー移動で、夜のレトロなアメリカンダイナーの中、反射するガラステーブルに向かい合って座る二人の姿が映し出される。ネオンで彩られた窓の外を、ヴィンテージカーが通り過ぎ、そのヘッドライトがガラスにきらめきを与える。紫がかった煙がゆっくりと店内を漂い、ムーディーなネオノワール調の照明がブースの中に揺らめく影を落とす。空気は静まり返り、シネマティックな雰囲気が漂い、控えめなソフトジャズが背景で流れている。映像はなめらかで実写的、夢のようなスタイライズドな流れをもっている。

環境音、BGMは「ElevenLabs」で生成しました。

AIっぽくないリアルなモデルを生成する方法は以下。

Runway Gen-4 Referencesについては、今回はここまで!
楽しんでいただけましたでしょうか?
少しでも参考になったなら、とても嬉しいです!

…ですが、実はまだあるんです。
今回ご紹介しきれなかった「面白い使い方」!

ひとつにまとめると内容がごちゃついてしまうので、
別のnoteとして、改めてお届けしたいと思います。

よければ、フォローしてお待ちいただけると嬉しいです!

Midjourney V7のリファレンスについては以下のnoteで紹介しています。

最後にMidjourneyのNEWSとプロンプトをご紹介!

Midjourney V1 Video Modelがまもなくリリース!

2025年6月12日、Midjourney(ミッドジャーニー)からVideo Rating Partyがスタートしました。
Rating PartyとはMidjourneyのリリース前に行われる恒例のイベントです。

簡単に言うと、「2つの作品の中、どちらが良いか?」をタップして選ぶだけです。世界のレーティング結果を元に新規機能がリリースされます。

Midjourney V1 Video Model

注意点

  • 明らかに壊れている動画は選ばないでください(面白くても)

  • キーボードの「1(左)」「2(右)」で選択可能

  • 迷ったら「スキップ(3キー)」を押してください

  • NSFW(不適切)な内容を見た場合は「報告」してください

  • 今回の動画は最終モデルの品質を表すものではありません

  • あえて質の低い動画が含まれており、好みを学習させるためのデータ収集中です

美的センスに優れたMidjourneyのVideoモデル、楽しみですね!

Midjourney プロンプト

Midjourney V7がリリースされ、数週間おきにアップデートが続いております。
とくにOmni Reference、EXP、Q4は注目度の高い機能です。

パラメータ:EXP

EXPが何なのか?については以下のnoteを参考にしてください!

ディティール、創造性、ダイナミックに定評あるパラメータは、モーションブラー(ブレ)との相性も良いです。

Midjourneyを使って生成した画像

プロンプト

On a cloudy beach, an 18-year-old Japanese girl and a cat appear as a two-piece pair in a full-body shot. The girl has a bob haircut, and their motion is captured with strong blur. Shot from a low angle with shallow depth of field, the photo is in color with low contrast and natural tones. It was taken on 35mm film with prominently visible grain, giving it a raw, analog texture. --ar 2:3 --exp 5 --v 7

曇り空のビーチで、18歳の日本人の女の子と猫がツーピースとして全身で写っている。女の子はボブヘアで、猫と共に動きのあるシーン。ローアングルで撮影されており、強いモーションブラーと浅い被写界深度が印象的。写真はカラーで、低コントラストかつ自然な色調。35mmフィルム特有の粒子が強く出ており、アナログ感のある質感がある。

高クオリティーのダイナミックな表現との相性が良い

Midjourneyを使って生成した画像

In the clear waters of the Caribbean, a group of meerkats swims toward the camera in a selfie-style composition, making direct eye contact. Sunlight pierces the surface, casting magical beams throughout the scene. A colorful coral reef stretches behind them, and a Caribbean island is faintly visible above the waterline. Captured with a Canon EOS R5 and RF 15-35mm F2.8L lens inside a Nauticam housing, the photo is ultra-realistic and highly detailed, showcasing the textures of the meerkats’ fur and the serene, weightless atmosphere of the underwater world. --ar 3:2 --exp 15 --v 7

カリブ海の透明な水中で、たくさんのミーアキャットがカメラに向かって泳いでいる。自撮り風の構図で、ミーアキャットたちはカメラ目線。水面からは太陽光が差し込み、幻想的な光の帯が水中を照らす。背景にはカラフルなサンゴ礁が広がり、水面越しにはカリブ海の島がぼんやりと見える。Canon EOS R5とRF 15-35mm F2.8Lレンズ、Nauticamハウジングで撮影されたこの写真は、超リアルかつ高精細。ミーアキャットの毛並みや動き、水中の浮遊感まで繊細に描かれている。

新パラメータ:Q4

「--q [X]」パラメータは品質パラメータとも言います。
V6までは --q 2 だったのが、V7で --q 4 がリリースされました。
生成画像のクオリティー(品質)を上げたい方は使ってみてください!

Midjourneyを使って生成した画像

プロンプト

A hyper-realistic, high-resolution view of a Caribbean beach, shot from just above the water surface. The clear sea reveals coral and fish beneath the surface, while the white sandy beach is dotted with large rocks and palm trees. Gentle afternoon sunlight illuminates the entire scene, with distant clouds and the horizon visible in the background. The image features vivid but natural colors, evoking a calm, tropical atmosphere. --ar 3:4 --quality 4 --v 7

透き通るカリブ海の水面上から撮影された、超リアルで高精細なビーチ風景。白い砂浜には大きな岩とヤシの木が点在し、透明な海の中にはサンゴや魚が見えている。穏やかな午後の太陽光がシーン全体をやさしく照らし、遠くには雲と水平線が広がる。鮮やかで自然な色調で描かれたこの構図は、落ち着いた南国の空気感を持つ。

パラメータ:EXPとQ4を使ったプロンプトまとめ

Midjourneyを使って生成した画像

プロンプト

On a boat under bright sunlight, an 18-year-old Japanese girl with a pink bob haircut poses for a selfie, looking directly at the camera. She wears a Korean-style fashion, sitting with her legs widely spread and leaning forward in a dramatic pose. The scene is softly lit with natural light. The photo is ultra-realistic, with vivid colors and a shallow depth of field that brings strong focus to her expression and posture. The background is a grassy field and a cloudy sky. --ar 16:9 --exp 20 --v 7

明るい日差しが降り注ぐ船上で、ピンクのボブヘアの18歳の日本人女性がカメラをまっすぐ見つめ、自撮り写真を撮っている。韓国風のファッションに身を包み、脚を大きく広げて前かがみになり、ドラマチックなポーズをとっている。自然光が柔らかく照らし出されており、鮮やかな色彩と浅い被写界深度によって、彼女の表情と姿勢が際立つ超写実的な写真となっている。背景には草原と曇り空が広がっている。

Midjourneyを使って生成した画像

プロンプト

An 18-year-old Japanese girl stands on a bright sandy beach, facing the camera with her arms extended outward. She has pale skin and white bob-cut hair, with a neutral but slightly cheerful expression. She wears a wet, oversized white t-shirt and a dark gray plaid pleated mini skirt. The background features a vivid tropical seascape with calm turquoise waters, distant landforms, and a bright blue sky dotted with cumulus clouds. Strong natural sunlight highlights the vibrant colors and casts minimal shadows, giving the image a youthful, bright, and carefree feel. --ar 2:3 --exp 3 --quality 4 --v 7

18歳の日本人女性が明るい砂浜に立ち、両腕を広げた姿でカメラに向かって正面を向いています。彼女は色白の肌に、ホワイトのボブヘアを持ち、表情は中立的ながらわずかに楽しげです。濡れた白いオーバーサイズのTシャツと、濃いグレーのチェック柄プリーツスカートを身につけています。背景にはエメラルドブルーの穏やかな海、遠くの陸地、そして積雲が浮かぶ鮮やかな青空が広がっており、強い自然光が色彩のコントラストを際立たせ、影はほとんどありません。全体の雰囲気は明るく、若々しく、自由な印象です。

Midjourneyを使って生成した画像

A close-up portrait of an 18-year-old Japanese woman taken on a hot summer day at a sports ground. Her black bob haircut gently moves in the breeze, while beads of sweat glisten naturally on her forehead and cheeks. She's wearing a simple white T-shirt, reflecting a casual summer sports style. Her skin is illuminated by the strong midday sun, creating a natural, realistic glow with slight redness on her cheeks. The background shows a softly blurred sports field with fence lines and hints of dust or chalk, evoking a calm and candid everyday moment. --ar 2:3 --quality 4 --v 7

18歳の日本人女性が夏の運動場で撮影された、顔のクローズアップポートレート。黒髪のボブヘアが風に揺れ、額や頬には汗がにじみ、真夏の直射日光に照らされた肌が自然に光っている。白いTシャツのシンプルな部活スタイルで、背景にはぼんやりとしたフェンスやグラウンドの白線が映っている。頬にはほのかな赤みが差し、全体がリアルで日常的な空気感に包まれている。

Midjourneyを使って生成した画像

A powerful black muscle car is captured mid-air in a dramatic low-angle shot as it jumps over rugged, rocky terrain at high speed. Its front wheels are lifted off the ground while the rear wheels are just beginning to rise, sending clouds of dust and flying debris into the air. Behind it, two grey military helicopters hover low above the treetops, tilted slightly forward in a tense, aggressive pursuit. A massive plume of black and brown smoke billows in the background, suggesting a recent explosion. The terrain is uneven, dotted with green vegetation and exposed brown rock, while mist-covered mountains rise beneath a cloudy sky, adding atmospheric depth. The entire scene conveys a cinematic intensity filled with speed, danger, and adrenaline-fueled action. --ar 3:2 --exp 20 --quality 4 --v 7

黒く力強いマッスルカーが、岩の多い起伏の激しい地形を猛スピードで飛び越え、空中に浮かぶ瞬間をローポジションから捉えたアクションシーン。前輪が高く持ち上がり、後輪はまだ地面を離れたばかりで、周囲には土埃や岩の破片が舞い上がっている。背景では、2機の灰色の軍用ヘリコプターが木の梢をかすめる高さでホバリングし、やや前傾姿勢で追跡中。さらに車の後方には、直前に爆発があったと見られる黒と茶色の煙が激しく立ち上っている。曇り空の下、霧のかかった山々と濃い緑の植生、むき出しの岩がシーン全体に自然の荒々しさを与えている。全体は映画的で、スピード、スリル、緊張感に満ちた迫力ある瞬間を描写している。

最後までご覧いただき、ありがとうございました!
それでは、また次回の note でお会いしましょう!


いいなと思ったら応援しよう!

さきすた よろしければサポートお願いします! いただいたサポートはクリエイターとしての活動費に使わせていただきます!