テクニカルレポート:Video generation models as world simulators | OpenAIによると、Soraでは、テキスト(プロンプト)から動画を作るだけではなく、静止画から動画作成も可能だ。
正確には、「静止画」+「プロンプト」(と思われる)から、動画作成が可能だ。
以下は、冒頭の静止画から作られた動画だ。
広告
スポンサーリンク
静止画 to 動画
から
から
から
プロンプト?
In an ornate, historical hall, a massive tidal wave peaks and begins to crash. Two surfers, seizing the moment, skillfully navigate the face of the wave.
装飾的で歴史的なホールの中で、巨大な津波が頂点に達し、崩れ始めます。その瞬間を捉えた二人のサーファーが、波の面を巧みにナビゲートします。
動画 to 動画 ビデオの拡張
ビデオを時間的に前後に拡張することもできます。
最後が、上記の動画(フレームで)となる動画から、前半を3パターンで作った例
(1)
(2)
(3)
ビデオを前方と後方の両方に拡張し、シームレスな無限ループを生成
ビデオからビデオへの編集
から、
緑豊かなジャングルに変換
出典:
OpenAI Sora: Sora | OpenAI
テクニカルレポート:Video generation models as world simulators | OpenAI