【初心者向け!】Runway Gen-3 Alphaでプロンプト自動生成して簡単動画制作

RunwayGen-3とプロンプトジェネレーターを使用して、初心者でも簡単に高品質な動画を制作する方法を解説。ステップバイステップのガイドと実例を紹介。

AICU mediaライター・ AIクリエイターのぽんず(@ponzponz15)です!
今回紹介する記事は『プロンプトジェネレーター』というものを使用して、私が約一時間で作成したビデオ です

最新の動画生成AIの『RunwayGen-3 Alpha』『プロンプトジェネレーター』を使用すれば、誰でも簡単に、映画のようなハイクオリティ動画を制作すことができます
本来であれば、一ヶ月近くかけてクレジットを消費しながら動画生成のコツを掴むものですが、これがあればわずか数日で、初心者でもつかいこなすことができます。

画像
Runway Gen-3 でめっちゃ動画を作りまくっているイメージ

1. プロ級の映像表現が誰でも簡単に

私ぽんずは、Runway Gen-3がリリースされたその日に95ドルを課金して、毎日200回以上動画生成している動画生成オタクですので、十分なご説明ができます。お任せください。
最近は、このGen-3に夢中で新しい動画を沢山生成しています。そんな私が自信を持っておすすめするのが、今回のテーマである「プロンプト自動生成ジェネレーター」です。初心者の方はGPTsを使うことをお勧めしますが、そんなの知らないよって方でもこれを使用すれば問題ありません。

2. 完全初心者でも大丈夫!準備するもの

あなたも今日から映像クリエイターの仲間入りです。
必要なのは以下の3つだけです。

  1. Runway Gen-3 Alphaアカウント: https://www.runwayml.com/ からアカウントを作成できます。課金が必要です。
  2. ChatGPTなどのAIサービス: https://chat.openai.com/ など、無料で使えるAIサービスを利用しましょう。(GeminiClaudeなど)
  3. ちょっとの勇気: 難しいことは何もありません。あとは、この記事を参考にしていただき、どんどんチャレンジしていくだけです!

3. プロンプトって? – 映像表現のためのプロンプトとは

プロンプトとは、AIへの指示のこと。例えば、これまでの画像生成AIでは「美しい女性」や「犬」と書くだけで、クオリティの高い画像が生成できましたよね。

しかし、Runway Gen-3 Alphaでは、5秒から10秒間の動画が生成されるため、それだけでは不十分になります。それは動画が始まってからの1秒にもみたない部分の指示でしかありません。もちろん、それだけでも十分すごいのですが、使いこなすためには「カメラの動き」や「雰囲気」といった映像表現を伝えるための指示が必要になってきます。

例えば、「夕焼けの海」というプロンプトだけでは、ただ夕焼けの海が映っているだけの動画になってしまいます。

①夕焼けの海 (AからBに移行)

「夕焼けの海に沈む太陽をすごい速さですすむカメラで捉え、海の中にもぐっていく」といったように、具体的な指示が必要になります。

4. なぜプロンプトジェネレーターが必要なの? – 動画のためのプロンプトは難しい

動画のためのプロンプトには、カメラワークや専門用語など、少し難しい知識が必要になります。

例えば、公式ガイドに記載されているのがこちらです。
[camera movement]: [establishing scene]. [additional details]
こういった構造でプロンプトを書くことが推奨されています。

「カメラワーク」や「専門用語」は、最初は戸惑ってしまうかもしれません。

でも、大丈夫。
専門知識がなくても、誰でも簡単に、効果的なプロンプトを作成できます。

画像

Runwayの公式ガイドで学ぶのが最適です。

https://help.runwayml.com/hc/en-us/articles/30586818553107-Gen-3-Alpha-Prompting-Guide

このジェネレーターは、Runway公式が推奨するプロンプト構造や、カメラワークなどの知識を組み込んでいます。このジェネレーターは、あなたの動画生成の補助輪のようなもの。

補助輪を付けて、自転車に乗る練習をするように、このジェネレーターを使って、動画生成AIに必要な用語を徐々に覚えていきましょう。
ゆくゆくは覚えた方がいいこともありますしね。

本来であれば1ヶ月近くかけてクレジットを消費しながら動画生成のコツを掴むものですが、これがあればわずか数日でつかいこなすようになります。

画像

5. プロンプトジェネレーターの使い方 – ステップバイステップ解説

ステップ1:AIサービスにアクセス

画像

Google AI Studio

https://ai.google.dev/aistudio?hl=ja

ChatGPTやGeminiなどのAIサービスを開きましょう。まだアカウントをお持ちでない場合は、無料で作成することができます。

ステップ2:プロンプトジェネレーターのソースコードをコピー

このブログ最下部のソースコードをコピーします。

ステップ3:ChatGPTやGeminiに貼り付けて実行

コピーしたソースコードをChatGPTやGeminiに貼り付け、実行ボタンをおします。

ステップ4:希望する動画の内容を入力

その後、あなたが生成したい動画のプロンプトを作成します。日本語でも問題ありませんが、英語の方が精度が高いかもしれません。
プロンプトには、カメラワーク、シーン設定、追加の詳細など、細かく項目が分かれていますので、迷わずに入力できます。現状、Gen-3 Alphaには500字しか入力できませんので、全部は入れられないかもしれませんが、あまり気にせず問題ありません。

ステップ5:完成したプロンプトをGen-3 Alphaに入力

画像

生成されたプロンプトをコピーし、Runway Gen-3 Alphaに入力して、動画を生成しましょう。5秒か10秒を選択しGenerateボタンを押せば生成が始まります。

その際、秒数によってそれぞれ消費するクレジットが違いますのでご注意ください。

6. 実際に作られた動画例

例1:サーフィン
入力例『サーフィンからシームレスにスケボーしてる感じにして』

④サーフィン (シームレスにAからBに)

例2:黒い玉
入力例『荒野の黒い球をシームレスに別の形態に変化させて』

Gen-3 Alphaを使いたいけど迷っている人はこの『比較動画』見て頂くと良いかもしれません。
画像のプロンプトと違って、動きや変化を指示しないと全然動かないので課金前に知っておいたらクレジット節約になります。もう使ってる方も1000回以上生成してわかったコツをnote等に纏めていれば「バズる」ためのヒントになるはずです👌

例3:ゴッホの世界
『ゴッホの空の街をFPVで進んでいって』
まるでゴッホが描いたパリの街並みがあったら、行ってみたいと思いませんか?
Gen-3 Alphaが描いたゴッホの筆使いが息づく世界を探索しましょう〜🍽️

 例4:タイタニック風
『沈んだ船の外観、船内に入ったら当時の豪華絢爛な風景が広がっている』

これまでの動画生成AIとは次元が違うのがGen-3 Alphaが特別な技術や才能がなくとも、自分のアイデアを映画級に仕上げることができるためです。

必要なのは、あなたの想像力。

7. まとめ

プロンプトジェネレーターを使えば、動画制作の知識がなくても、AIと会話しながら誰でも簡単に高品質な動画を制作できます。そして、これを使いながら映像技術に関わる知識を学び、さらに素晴らしい動画を生成していくことができます。ぜひ活用して、あなたの創造力を爆発させてください!

プロンプトは(みんなが無料で使えてしまうとオリジナリティが薄れてしまうので)メンバーシップ向け有料配布といたしますが、こちらのポストをシェアしていただければ無償で提供いたします!

素敵な作品ができたらメンバーシップ掲示板で共有してくださいね!

https://note.com/aicu/membership/boards/61ab0aa9374e/posts/1aa202bf314a

作例:プロンプトジェネレーターのソースコード

こちらから各種テキスト生成AIへプロンプトとして与えてみてください

Generated Prompt Template 

Video Scene Prompt Generation Template for Gen-3 AlphaIntroductionThis template will guide you through creating dynamic scene prompts for Gen-3 Alpha. By following the provided structure, you'll be able to craft coherent and visually compelling prompts that effectively communicate your artistic intentions.

Template StructurePrompts should be divided into sections detailing the camera movement, the establishing scene, and additional details:

     [camera movement]: [establishing scene]. [additional details].

Example Prompts1. Woman in a Tropical Rainforest

     Low angle static shot: The camera is angled up at a woman wearing all orange as she stands in a tropical rainforest with colorful flora. The dramatic sky is overcast and gray.

2. Seamless Transitions

     Continuous hyperspeed FPV footage: The camera seamlessly flies through a glacial canyon to a dreamy cloudscape.

3. Camera Movement      A glowing ocean at night time with bioluminescent creatures under water. The camera starts with a macro close-up of a glowing jellyfish and then expands to reveal the entire ocean lit up with various glowing colors under a starry sky. Camera Movement: Begin with a macro shot of the jellyfish, then gently pull back and up to showcase the glowing ocean.

4. Text Title Cards

     A title screen with dynamic movement. The scene starts at a colorful paint-covered wall. Suddenly, black paint pours on the wall to form the word "Runway". The dripping paint is detailed and textured, centered, superb cinematic lighting.

KeywordsUse the following keywords to enhance the style and clarity of your scenes:

Camera Styles- Low angle- High angle- Overhead- FPV- Handheld- Wide angle- Close-up- Macro cinematography- Over the shoulder- Tracking- Establishing wide- 50mm lens- SnorriCam- Realistic documentary- Camcorder

Lighting Styles- Diffused lighting- Silhouette- Lens flare- Backlit- Side lit- [color] gel lighting- Venetian lighting

Movement Speeds- Dynamic motion- Slow motion- Fast motion- Timelapse

Movement Types- Grows- Emerges- Explodes- Ascends- Undulates- Warps- Transforms- Ripples- Shatters- Unfolds- Vortex

Style and Aesthetic- Moody- Cinematic- Iridescent- Home video VHS- Glitchcore 

Text Styles- Bold- Graffiti- Neon- Varsity- Embroidery

Sample Good Templates1. Graffiti Scene

     Handheld camera moving fast, flashlight light, in a white old wall in an old alley at night a black graffiti that spells 'Runway'

2. 3D Letter Scene     The word "Blizaine" in large 3D letters on a city street at night with various superhero movie scenes playing on the letters as textures, reminiscent MARVEL MCU intro.

3. Morphing Hand Scene     A cinematic first person POV shot of a hand holding a small fish morphing into a field mouse.

4. Tattoo Ink Scene

     Extreme close-up shot, A tattoo artist's needle injects ink into the skin, and as the ink spreads, it forms the word "Art". Intricate details and precision of the needle work. Cinematic.

5. Liquid Gold Rabbit Scene

     A rabbit made of liquid gold with a dark background, liquefy, cinematic, vfx.

6. Blooming Tree Scene     Close-up time lapse of a tree, suddenly blooming, lots of flowers and fruits, birds and butterflies, fresh, symmetrical, film grain, also with text "flourish".

Specific Object, Location, and Camera Movement Sample1. Floating Object Scene

     Object: [OBJECT]Location: [LOCATION]Prompt: The object floats along a bright blue road cutting straight through the stunning location before approaching and entering a very short tunnel that is completely white at the end of the tunnel.Camera Movement: FPV 100x.

2. Chef Carving Scene     Close-up shot, a chef uses a knife to carve a roast, and as the slices fall, they form the word "your text". Captures the succulent texture of the meat and the precision of the cuts.

3. Titanic Wreck Scene     Continuous hyperspeed FPV footage: the camera moves at fast speed under the ocean and passes slowly through the Titanic wreck.

4. Mansion Portal Scene

     Thrilling, fast, FPV shot flying through the front door of a classic British mansion, revealing a portal to another world, of waterfalls, in the living room.

Final ExampleMeteorite Impact Scene

     Overhead dynamic motion shot: From above, the camera follows a meteorite streaking through a cloudy New York City sky. The meteorite slams into Earth with a thunderous crash, triggering a cascade of smaller meteorites that rain down on the city. Explosions rock the skyline, shattering buildings and vehicles in a chaotic storm of debris. Pedestrians look up in terror as the sky fills with falling rocks, scrambling desperately to escape the destruction unfolding, cinematic.

Vortex Transformation Scene

     Continuous hyperspeed FPV of interiors of a house, vortex, blankets, newspaper, tissue paper are flying, leading out to a calm still grass moving in breeze, cardboard box transforms into an aeroplane and flies, organic rock formations, moss, ripples, Lens flare, Home video VHS.

この記事に「いいね!」と思ったら、いいねとフォロー、おすすめをお願いします!
https://note.com/aicu/ X(Twitter)@AICUai

Originally published at https://note.com/ on July 15, 2024.