見出し画像

【解説】静止画に文字を入れていく動画の作り方丨PolloAIxしろねんコンテスト

テレレッテッテ🎵テレレッテッテ🎵
テレレッテッテッテ テテテテテ🎵(某3分のテーマ)

🐱本日作る料理はこちらです。

🐶わー。
  インスタとかで使えそうですね〜。
  でも難しそう…。

🐱今はAI時代ですから、どなたでも
  簡単に作ることができますよ。

🐶では早速作り方を見ていきましょう。
  材料はこちらです。

🐱それらしき画像、100グラム

チャッピー

🐶AIでテキトーに作ったものでぇす。

🐱妖しげなツール、1玉

🐶キタコレ氏製作の便利なものでぇす。
  今回は1玉まるまる使いまぁす。

🐱Pollo AI のクレジット、ひとつまみ

https://pollo.ai/ja

🐶1回10クレジットなので
  広告を2日見れば1回作れまぁす。

🐱まずは SNAP KAITRO で
  画像に文字などを入れるための
  プロンプトを作ります。

🐶ポチポチ選ぶだけだから簡単ですね。

🐱今回はこちらを選択しました。

🐱できたプロンプトがこちらです。

Add hand-drawn annotations directly onto the uploaded photo. Look at each element in the photo and attach lines, text, and short comments to them. Keep all handwritten captions in natural Japanese.

[Subjects]
(write the items in the photo here)

[Line work]
thick crayon strokes, wobbly scribbly out-of-bounds lines

[Text & tone]
rounded warm cafe chalkboard lettering, friendly tone

[Comments]
drink -> a recommendation-of-the-day tone; food -> fresh-baked appeal; space -> a welcoming feel; overall -> a thank-you line

[Decoration]
lots of stars, hearts, swirls, puffy bubble letters

[Mood]
Instagram story aesthetic, rough magazine memo, relaxed stylish with negative space

[Aspect ratio]
9:16

SNAP KAITARO

🐱これと元画像をAIに入れるんですが
  ひとつ注意点があります。

🐶先生、何ですか?

🐱AIが画像を描き直すことで
  サイズや形が変わったり位置ズレ
  してしまうことがあります。
  そのため、次のプロンプトを
  冒頭に入れておくと良いでしょう。

[CRITICAL RULE FOR IMAGE PRESERVATION]DO NOT recreate, regenerate, or alter the original uploaded photo in any way.The original photo must remain 100% identical to the source: zero changes to the pixel structure, object sizes, positions, shapes, textures, colors, and any pre-existing text or line breaks.Treat the original photo as a completely locked, immutable background.ONLY apply the hand-drawn annotations, lines, text, and decorations as a transparent overlay directly on top of the unmodified original photo.Absolute pixel-perfect preservation of the original image is required.

Gemini

🐱これらをおチャピ(ChatGPT)に入れ
  1分コトコトやります。

🐶1分経ったものがこちらでぇす。

おチャピ

🐶イイ感じに仕上がりましたね。
  やっぱりちょっとズレてますが
  雲が別物になる程ではないです。

🐱それではこれを終点として
  元の画像から文字が浮かび上がる
  動画を作っていきましょう。
  ジェミィ(Gemini)に加工前後の順で
  画像を入れて次のように炒めます。

あなたは動画生成AIの性能、性質、癖、起きがちな思わぬ失敗とそれを未然に防ぐ方法、を熟知した天才プログラマーです。

一枚目の画像を「Start Frame」、二枚目の画像を「End Frame」として、次の動画を作るための英文プロンプトをPollo 2.0の「リファレンスから動画」を作る用に作成してください。

4秒間の動画。
一枚目の画像はフリーズフレームとして一切変更を加えない。
その上に二枚目の文字や線が画像の上から順に、透明なレイヤーから浮き上がるように出現する。
文字や線は書いていくような演出で出現する。

【プロンプト内容の要望】
プロンプトに画像内の日本語の文字列を組み込み、ハルシネーションを防ぐ。
各文字列や線の出現場所を指定する。
タイムスタンプを1秒毎に組み、3.0s〜4.0sはEnd Frameで静止させる。
ジッター現象やモーフィング現象を防ぐ。
1900文字以内で作成する。

🐱

🐱要望部分は超重要です。

🐶先生、何故チャッピーじゃなく
  Geminiなんですか?

🐱おチャピは今寝ています。

🐶無料版ですか?ひもじいんですね。

😼・・・・・・・・

🐱できたプロンプトがこちらです。

[Camera & Base: 100% Frozen, Zero Motion] Base photo of Santorini cafe remains completely static. No camera/background movement, warping, or jitter. All colorful handwritten Japanese texts and speech bubbles animate over 4.0s onto a transparent overlay from top to bottom.
​0.0s to 1.0s (Upper Area Drawing):
​White bubble "本日のおすすめ!" (top-left) with orange accent lines and a pink heart draw smoothly.
​White text "青空と海に包まれて...最高のカフェ日和☀️" (top-right) and yellow stars draw smoothly.
​1.0s to 2.0s (Middle Area Drawing):
​Text on a yellow brush stroke "この景色がごちそうデス" (mid-left) with a yellow arrow pointing down, and a pink bubble "オリーブの木ものんびり気分だね〜💗" (mid-right) with a pink arrow pointing to the olive plant draw smoothly.
​2.0s to 3.0s (Bottom Area Drawing):
​Pink bubble "本日の手作りケーキ 焼きたてフレッシュ!サクサク食感がたまらない〜♡" (bottom-left) and its pink arrow pointing to the cake draw smoothly.
​Yellow bubble "本日のおすすめラテ やさしい甘さでほっと一息♪" (bottom-right) and its yellow arrow pointing to the latte cup draw smoothly.
​Yellow bubble "ご来店ありがとうございます!素敵な時間になりますように" with a pink heart (bottom-left corner) draws smoothly.
​White text "ゆっくりしていってね♪" with a white loop underline (bottom-right corner) draws smoothly.
​3.0s to 4.0s (Final Hold):
​All text, colored bubbles, and hand-drawn lines freeze 100% sharp, perfectly matching the second reference image. Clean stroke-by-stroke write-on animation. Zero noise. 

ジェミィ

🐶Canvasの選択をお忘れなく!

🐱同じように画像とプロンプトを
  Pollo AI に入れ、カラッと揚げます。

Pollo AI

🐶3分経ったものがこちらでぇす。
  gif化してまぁす。

Pollo 2.0

🐱これで完成です。
  KAITAROで作る画像に合わせて
  ジェミィで炒める時の
  塩コショウは調節してください。

🐶AIで作る動画なので
  100%成功するとは限りません。
  またジッター(ガタガタ揺れるの)は
  奇跡が起きない限り防げません。

🐱失敗してもクレジットは
  戻ってきませんので、ご承知の上
  自己責任でお試しください。
  失敗内容をAIに相談すると
  成功に近づく場合もあります。

🐶それでは良きKAITAROライフを
  お送りください。また来週〜。


テレレッテッテ🎵テレレッテッテ🎵
テレレッテッテッテ テテテテテ🎵

この番組は
PolloAIxしろねんコンテストストーリー部門応募作と
AIフェスティバル応募作と

(終了しています)

(終了しています)

(元気に稼働しています)

ご覧のスポンサーの提供でお送りしました。



【CM】


シンプルなやーつー。
右中央の "にょ〜ん感" がスキ。
超強風…
文字がシンプルすぎて手持ち無沙汰だったか…
付箋の出現の仕方が最高。
キラキラもイイネ✨
うるさー。
1回失敗。
最後のホールド無くして4秒フルで使って
ひとつ前のverに。
こっちのスタンプ感を残せず残念。
コレのジッターをゼロにしたかった…
Geminiが『Frame to Frame ならジッター防げます』
と言うから「フレームから」でやってみたものの
Pollo 3.0 ⇨高い Pollo1.6 ⇨文字数足りない
で、Pollo 1.5 使った結果がコレ。
哀れな感じがよく表現されとります。
Pollo 1.5 でアレだったのでリファレンスに戻し
ジッター防止をとにかく強化させたら
日本語文字もタイムスタンプも消えててコレ。
Geminiに入れるプロンプトを改良。
ゲームUIはかなりの確率で同じウィンドウが2つ出る…
出方によっては終盤カットで対応可能だけど
複雑すぎかなぁ…雰囲気はいいのに…
End に指定した画像。
えっ?


その②⇩

その③⇩


いいなと思ったら応援しよう!