SORAを活用した短編動画のクリエイターがAI生成動画の長所と限界を解説

SORAを活用した短編動画のクリエイターがAI生成動画の長所と限界を解説

OpenAIの動画生成ツールSoraは2月、競合他社をはるかに凌駕する滑らかでリアルな動画でAIコミュニティを驚かせました。しかし、綿密に演出されたこのデビュー作には多くの詳細が抜け落ちていました。しかし、Soraを使った短編映画制作に早期アクセスを与えられたある映画制作者が、その詳細を補ってくれました。

Shy Kidsはトロントを拠点とするデジタル制作チームで、OpenAIから数少ない短編映画制作チームの一つとして選ばれました。OpenAIのプロモーション目的の作品ですが、「エアヘッド」の制作においてはかなりの創造的自由が与えられました。視覚効果ニュースメディアfxguideのインタビューで、ポストプロダクション・アーティストのパトリック・セダーバーグ氏は、作品の一部として「実際にSoraを使った」と述べています。

おそらく、ほとんどの人にとって最も重要なポイントは、OpenAIのショートフィルム特集記事を読むと、読者はそれらがほぼ完全にSoraから生まれたものだと想像してしまうかもしれない。しかし実際には、これらはプロフェッショナルな制作物であり、綿密なストーリーボード、編集、色補正、そしてロトスコープやVFXといったポストワークが完備されている。Appleが「iPhoneで撮影」と謳いながら、スタジオのセットアップ、プロ仕様の照明、そして事後の色彩作業については何も明かしていないように、Soraの記事はSoraで何ができるのかを語るだけで、実際にどのように制作されたのかは語っていない。

セダーバーグ氏のインタビューは興味深く、技術的な話はほぼありません。もし少しでもご興味があれば、fxguide にアクセスして読んでみてください。しかし、Sora の使用に関する興味深い情報をいくつかご紹介します。このモデルは確かに素晴らしいものですが、私たちが考えていたほど大きな進歩ではないかもしれません。

コントロールは、現時点では依然として最も望ましいと同時に、最も捉えにくいものです。…私たちが最も近づけたのは、プロンプトで過度に詳細な説明をすることだけでした。キャラクターの衣装や風船の種類を説明することで一貫性を保つことができました。ショットごと、世代ごとに一貫性を完全にコントロールできる機能がまだ整っていないからです。

つまり、従来の映画制作では単純な作業、例えば登場人物の服の色選びなども、ジェネレーティブシステムでは各ショットが独立して作成されるため、複雑な回避策や検証が必要となるのです。もちろん状況は変わる可能性もありますが、現時点でははるかに手間がかかるのは確かです。

テッククランチイベント

サンフランシスコ | 2025年10月27日~29日

ソラの出力には、不要な要素も含まれているかどうか確認する必要がありました。セダーバーグ氏によると、モデルは主人公の頭にあたる風船に顔を生成したり、前面から垂れ下がっている紐を生成したりすることが常態化していました。これらの要素は、プロンプトが表示されない場合はポストプロダクションで削除する必要があり、これもまた時間のかかる作業でした。

キャラクターやカメラの正確なタイミングや動きは実際には不可能だ。「実際の生成では、これらのさまざまなアクションがどこで発生するかについては、多少の時間的制御はありますが、正確ではありません。いわば当てずっぽうです」とセダーバーグ氏は語った。

例えば、手を振るといったジェスチャーのタイミングは、手作業のアニメーションとは異なり、非常に大まかで、推測に基づいたプロセスです。また、キャラクターの体を上向きにパンするようなショットは、映画制作者の意図を反映しているかどうかはわかりません。そのため、今回の制作チームは縦向きで構成されたショットをレンダリングし、後処理でパンク処理を行いました。生成されたクリップは、特に理由もなくスローモーションになることも多々ありました。

ソラが撮影したショットと、それがショートフィルムにどのように採用されたかの一例。画像提供: Shy Kids

実際、「右にパンする」や「トラッキングショット」といった映画製作の日常的な言葉遣いは全体的に一貫性がなく、チームはそれにかなり驚いたとセダーバーグ氏は語った。

「研究者たちは、アーティストにこのツールを使ってもらう前は、映画製作者のようには考えていなかった」と彼は言う。

結果として、チームは10秒から20秒ずつの世代を何百回も繰り返し、最終的にほんの数世代しか使用しませんでした。セダーバーグ氏はその比率を300:1と推定しましたが、もちろん、通常の撮影でこの比率に驚く人は多いでしょう。

ご興味があれば、チームは実際に舞台裏の短い動画を公開しており、そこで遭遇した問題のいくつかを説明しています。AI関連のコンテンツの多くと同様に、コメント欄ではこの取り組み全体に対してかなり批判的な意見が寄せられています。ただし、最近批判されたAIアシスト広告ほど激しいものではありません。

一方で、それは完全に理にかなっている。しかし、疑問が湧いてくる。Soraがこれらのコンテンツを認識しているのであれば、モデルは著作権侵害をより適切に認識するために、そのコンテンツでトレーニングされたということだろうか?OpenAIはトレーニングデータの詳細を秘密にしており、CTOのミラ・ムラティがジョアンナ・スターンにインタビューしたように、その秘密は不条理とさえ言えるほどだ。OpenAIは、おそらく決して私たちにそれを明かさないだろう。

ソラとその映画製作における活用については、ソラは用途に応じて強力かつ有用なツールであることは明らかですが、「ゼロから映画を創り出す」という用途には今のところは適していません。かつて別の悪役が言ったように、「それは後から」です。

デヴィン・コールドウェイはシアトルを拠点とする作家兼写真家です。

彼の個人ウェブサイトは coldewey.cc です。

バイオを見る