【Sora2】神動画を生成させる為のpromptの鉄則をまとめてみた
sankomenenContents
Sora2は非常に高性能な動画生成AIですが、
「なぜか壊れる」「言うことを聞かない」「再生成しても同じ失敗をする」
と感じたことはないでしょうか。
それらの多くは偶然ではなく、かなり再現性のある失敗パターンです。
この記事では、私の試行錯誤と分析から抽出したSora2 Prompt最適化の鉄則を9項目にまとめて紹介します。
鉄則1：世界観の構築を行う
説明
Sora2に動画を生成させる前に、主題・主人公・脇役・場所・年代・実写／アニメ・解像度・カメラ位置・照明・セリフ・音楽など、世界観の前提条件を明確に定義することが重要です。
これらは基本的には排他的な概念、つまり衝突する概念ではないので、それぞれをしっかりと記述して設定することにより、我々が期待する世界をSora2に正しく生成してもらえる可能性が高まります。
対策方針
項目別に列挙するテンプレートを作り、世界観を最初に固めてから生成を行います。
【追記】
以下の記事にて、詳細なPrompt Template Sampleを紹介していますので、ご覧ください。
【Sora2】Prompt Template Sample（非公式・優先順位付）
鉄則2：矛盾・衝突する条件を書くとSora2 Panicを起こす
説明
同時に成立しない指示や、解釈が難しい指示を含めると、一部条件が無視されたり、動画自体が破綻することがあります。
特に、行動、動作の指示の矛盾は、最も破綻し易いですから気を付けましょう。
対策方針
指示同士が矛盾・衝突していないかを事前に十分チェックが必要です。
鉄則3：通常速度映像には強いが、速度変更やeffect追加を多重化すると破綻する
説明
Sora2は通常速度の映像生成には非常に強い一方、slow motion や映像効果を重ねると負荷が増大し、破綻しやすくなります。
対策方針
まず通常速度で安定した動画を作り、その後 remix を使って段階的に効果を追加します。
鉄則4：主人公(cameo)と脇役(character)は扱いが違う
説明
主人公は正面左右の動画で規定される為、一貫性が保たれやすいですが、脇役は姿・衣装・動作が崩れやすい傾向があります。
対策方針
脇役には過度な精度を求めず、衣装や役割を固定した方が安定します。
鉄則5：主人公や場所、調度品の画像を参照させることが可能
説明
cameo や sub character を作成していなくても、画像を upload することで主人公の外見的特徴を強く参照させることができます。言わゆるPhoto to Video (Image to Video)と言われる方法です。
対策方針
ただし参照はその生成1回限りであり、永続的に記憶されるわけではありません。
鉄則6：Sora2には左右の概念はない
説明
画面の右・左といった配置指定は、無視されるか不定になることが多いです。
正確に言うと、画面の右・左という指示はほぼ通るのですが、人の右手・左手という概念は無い、という事になります。
野球で「右投手が、右打者へ投げる場面」と指示しても、確率論的に成功・不成功のどちらにも成り得る、という結果ですｗ。
対策方針
左右の位置指定には期待せず、試行回数を増やして成功を待ちましょう。
鉄則7：remixや通常生成でも履歴は残る
説明
remixはもちろん、通常のpromptでも、削除→再生成を繰り返すと直前の履歴が残ることがあります。
対策方針
破綻が続く場合は時間を置くか、思い切って新規生成を行います。
鉄則8：英語字幕・テロップは成功するが、漢字には弱い
説明
英語字幕は成功しますが、漢字では文字化けが起きやすい傾向があります。
対策方針
漢字生成は期待せず、必要であれば英語表記を使用します。
鉄則9：行動が複雑な場合はstoryboardでscene割を行う
説明
複雑な行動や演出を一度に指定すると破綻しやすいため、sceneごとに役割を分離して記述するのが有効です。
対策方針
世界観固定なら時間指定、場面変更を伴う場合は storyboard を使います。
まとめ
Sora2へ与えるpromptは詳細に書きすぎてダメになる場合も多くあり、だったら少なめに書いた方が良いのかというと、そういう訳でもありません。
要点を押さえて、必要十分なpromptを作成して与えることが必要です。
今回の9つの鉄則は、仕様解説ではなく 私の失敗の積み重ねから抽出した経験則です。
これを参考にして頂いて、無駄な再生成と試行錯誤が削減されるのであれば、幸いです。
【参考LINK】
Sora2 プロンプト完全ガイド｜上手に指示するための7つのルール - 株式会社MoMo
Sora 2プロンプトガイドを読み解いた上で動画を生成してみた
Pollo.ai 画像生成AI[Sora2] プロンプトを研究してみた[スポンサー企画]
