東京AI映画祭を観た後、ChatGPT Soraにできないエフェクトとは?

日本 AI 映画祭（AIFJ）は東京有楽町の東京イノベーション基地（TIB）で盛大に開催され、観客に貴重な体験を提供し、人工知能と映画芸術の融合から生まれる革新のエネルギーを目の当たりにしました。本年度の映画祭では、70本以上のAI技術を用いて制作された短編映画が上映され、ジャンルはドラマ、アニメーション、ドキュメンタリー、実験映画など多岐にわたります。ここでは、映画祭で公式特別紹介を受けた優れた作品『To The Bones』を紹介します。この短編映画はYouTubeでも視聴可能で、監督のClaudio Saは自身のYouTubeチャンネルで、ChatGPT Sora、Midjourney、RunwayなどのAIツールを伝統的なPhotoshopやPremiereと組み合わせて3Dアニメーションを制作する方法を詳しく解説しています。

To The Bonesについて

To The Bonesの監督はClaudio Saで、彼はPistachio Studiosの創設者兼アニメーションディレクターであり、10年以上のアニメ制作経験があります。この短編映画は、彼がChatGPT Soraや他のAIツールをPhotoshop、Premiereなどの従来のソフトウェアと組み合わせて制作したアニメーションです。

To The Bonesのストーリーテリング

疲れた旅人は小人に出会い、小人は彼にキラキラと光る赤い宝石を贈ります。彼はその宝石を身につけると無限の欲望が生まれ、最終的には代償を払うことになります。本作はジョーダン・ピーターソンの童話からインスパイアを受けています。

To The Bones 30日間AIアニメーション制作チャレンジ

To The Bones の監督は、非常に限られた予算で AI ツールを使って 30 日以内に 3D アニメーションを制作するという挑戦をしました。監督は、作品が AI によって生成されたように見えないことを望んでおり、最初のスケッチストーリーボードと彼の映画制作スタイルを通じて、より手作り感があり、より一貫性があり、物語性に重点を置いた作品を創作したいと考えています。この 6 分間の短編には、OpenAI が最近発表した Sora ChatGPT Open Art プラットフォーム、Runway、Photoshop、Premiere Pro、After Effects などの従来のソフトウェアが含まれています。

ChatGPT + その他のAI創作ツールでアニメーション動画を制作する

まず、ClaudioはPhotoshopを使って主人公のキャラクタースケッチを描き、Midjourneyを利用して背景と衣装を生成しました。Claudioは手描きの主人公とストーリーの草稿をChatGPTに送り、AIにいくつかのテキストヒント(prompt)を与えて、物語の詳細をより具体的にしました。Claudioは物語がまだ十分に緊張感がないことに気づき、他のキャラクターを追加してChatGPTの機能を活用し、脚本作業を簡素化し、さらに多くのプロットを追加しました。

ChatGPT Sora 360 機能はキャラクターが自然に向きを変えることを可能にします

Soraのグリーンスクリーン機能を開くことで、異なる背景を置き換えることができます。Claudioは360度回転機能を使用して、キャラクターが向きを変えられるようにします。アニメーションでは、キャラクターが自然に体を動かせないと、非常にぎこちなくなり奇妙に見えます。映画祭では、多くの作品がこの困難を克服できませんでしたが、Claudioは長年のアニメーション制作の経験を基に、AIに一部の作業を完了させることができました。ChatGPTはストーリーの草稿を脚本に変え、ElevenLabsを使ってキャラクターに声を当て、可能な限り多くの生き生きとしたフレームを追加して、ストーリーと映像をより自然で感動的にします。

OpenAI ChatGPT ソラにはできない

Soraは、高度な料理器具、例えば圧力鍋やオーブンとして理解できます。料理が調理された後に入れられると、より早く美味しい料理に変わります。To The Bonesの成功の要因は、「前準備」と「後処理」をAIが手伝っていることです。OpenArtがストーリーを生成し、ClaudioがシーンをPhotoshopに持ち込み、各フレームを処理します。彼は特に初稿や画像生成にRunwayとOpenArtを推奨しています。また、OpenAIを訓練してさらに多くの画像を生成していますが、AIを用いたアニメーション制作の最大の課題は「物語の一貫性」です。ストーリーのあるアニメーションは、物語とシーンを一幕一幕つなげる必要があります。アニメーションを制作すること自体は難しくありませんが、物語を感動的に伝えるには強い視覚効果と逆転のプロットが必要です。この時、映画制作の背景と脚本の経験を持つ人だけがこれらの技術的課題を解決できます。多くの物語の転換点は、現在のAIが予知できる結果ではありません。ここで、最近日本が二十年以上の未解決事件を解決したことを思い出しました。日本のある主婦が自宅で殺害され、警察は犯行動機や犯人に全く手がかりがありませんでした。DNAの科学的手法があっても、犯人を見つけることができませんでした。最終的に事件の犯罪動機は、犯人がこの女性が自分の好きな男性を得たことに単純に嫉妬していたことでした。これが人間の脳の複雑な働きとアート(犯罪)の才能が人工知能によって完全に置き換えられない理由です。逆転のある論理的な物語には、やはり人間の脳、そして人間の思考ロジックが必要です。機械は決して完全に予測することはできません。ハリウッドの脚本家たちは、当面は食べていけるようです。

参照：

骨まで

私はAIで映画を作りました。これが起こったことです。

ツールを使って骨に:

OpenAIによるChatGPTソラ

AI アシスタント Kling

スクリプト ランウェイ

AIがElevenlabsでナレーションを生成

この記事は、日本東京のAI映画祭の感想であり、ChatGPT Soraが達成できない効果とは何か？最初に登場したのは、チェーンニュースABMediaです。