水曜日に、OpenAI が新たにリリースした Sora AI ビデオ ジェネレーターからのビデオが公開されました。 行った バイラル ソーシャルメディアでは、オリンピックスタイルの床演技中に余分な手足が生え、一時的に頭を失う体操選手を特集しました。
結局のところ、ビデオ内の無意味な合成エラー (私たちが「ジャバウォッキー」と呼びたいもの) は、AI ビデオ ジェネレーターがどのように機能するのか、そして将来どのように改善されるのかについての技術的な詳細を示唆しています。
詳細を掘り下げる前に、ビデオ自体を見てみましょう。
OpenAI Sora で作成された、不可能な体操選手の AI 生成ビデオ。
ビデオでは、次のように見える景色が見られます。 床体操 オリンピックのようなスポーツイベントで行われるルーチン。ビデオの主題はひっくり返り、はためき、新しい脚と腕が急速かつ流動的に現れ、彼女のくるくると変形する体から変形します。ある時点、約 9 秒で彼女は頭を失い、それが自然に彼女の体に再び取り付けられました。
「新しいソラと同じくらいクールだが、体操は依然としてAIビデオのチューリングテストである」とベンチャーキャピタリストは書いた ディーディ・ダス 彼がもともと ビデオを共有しました このビデオは、次のような多くのリアクションジョークを引き起こしました。 返事 ブルースカイの同様の投稿には、「こんにちは、体操の専門家です！これは面白くありません。体操選手は極度の苦痛に陥ったときにのみこれを行います。」
私たちは Das に連絡を取ったところ、Sora を使用してビデオを生成したことを確認しました。彼はまた、Anthropic のクロードが生成した非常に長く 4 つの部分に分かれたプロンプトを提供しました。「体操選手は右後ろ隅から開始し、B プラス スタンスで右足を後ろに向けて位置を取る」などの複雑な指示を使用しました。
「過去 6 か月間、テキストをビデオに変換するモデルを使って遊んできましたが、体操のような複雑な物理的な動きに苦労していることは分かっていました」と Das 氏は会話の中で語った。 「キャラクターの一貫性が改善されたように見えたので、（ソラで）試してみなければなりませんでした。全体的には改善でした。なぜなら、以前は…体操選手はフリップ中にテレポートするか、衣装を変えるだけだったからです。しかし、全体的には依然としてまったく恐ろしいものに見えます。 AI ビデオがデフォルトで物理学を学習することを期待していましたが、まだそうなっていません。」
