日本東京 AI 電影節觀後感，什麼是 ChatGPT Sora 做不到的效果？

日本 AI 電影節（AIFJ）於東京有樂町的東京創新基地（TIB）盛大舉行，為觀眾帶來一次難得的體驗，見證人工智慧與電影藝術交融所激發的創新能量。本屆影展共放映超過 70 部運用 AI 技術製作的短片，類型橫跨劇情片、動畫片、紀錄片與實驗電影等多元形式。這裡介紹一部在影展獲得官方特別介紹的佳作 To The Bones，這部短片在 Youtube 上也看的到，導演 Claudio Sa 在他的 Youtube 頻道上詳細解說他如何用 ChatGPT Sora、Midjourney 和 Runway 等 AI 工具結合傳統的 Photoshop 和 Premiere 做出一部 3D 動畫片。

To The Bones 簡介

To The Bones 導演為 Claudio Sa，他是 Pistachio Studios 的創辦人暨動畫總監導演，有十幾年動畫製作經驗，本短片為他嘗試用 ChatGPT Sora 和其他 AI 工具結合 Photoshop、Premiere 等傳統軟體製作而成的動畫片。

To The Bones 故事介紹

疲憊的旅人遇到一個小矮人，小矮人送他一顆閃閃發光的紅色寶石，他帶著這顆寶石在身上後卻產生出無窮的慾望，最後付出了代價。本片靈感來自喬丹彼得森的童話。

To The Bones 30 天 AI 動畫製作挑戰

To The Bones 導演挑戰在 30 天內以非常有限的預算用 AI 工具製作了一部 3D 動畫片，導演不想讓片子看起來像是人工智慧生成的，希望藉著最初的草圖故事板和他的電影製作風格，創作一部更具手工質感、更連貫、更注重故事性的作品，這部 6 分鐘的短片工具包括 OpenAI 最新推出的 Sora ChatGPT Open Art 平台、Runway 以及 Photoshop、Premiere Pro 和 After Effects 等傳統軟體。

ChatGPT + 其他 AI 創作工具製作動畫影片

首先，Claudio 先用 Photoshop 畫出主人翁的造型草圖，利用 Midjourney 生成背景與服裝。Claudio 將手繪的主人翁與故事草稿丟上 ChatGPT 給 AI 一些文字提示 (prompt) 讓劇情細節更加具體，Claudio 發現故事還不夠張力後，又加入了其他角色，讓 ChatGPT 發揮功能，簡化腳本作業，添加更多劇情。

ChatGPT Sora 360 功能讓人物可以自然轉向

打開 Sora 的綠屏功能，可以替換不同的背景，Claudio 使用 360 度旋轉功能，讓人物可以轉向，動畫片中如果角色不能自然移動身軀，就會變得很呆滯奇怪，在影展中許多部片子都不能克服這個困難，但是 Claudio 基於多年的動畫製作經驗，讓 AI 完成部分工作。ChatGPT 把故事草稿變成劇本，用 ElevenLabs 幫角色配音，然後盡可能的加入許多生動的 Frame，讓劇情和畫面更自然動人。

OpenAI ChatGPT Sora 做不到的事

可以把 Sora 理解成一個高階的食物調理器像是快鍋或是烤箱，食物如果調理後丟進去的成品就會更快速變成一道美味料理， To The Bones 成功之處為「前置作業」和「後製作業」都運用 AI 幫忙處理，OpenArt 生成故事情節，Claudio 把場景帶回 Photoshop 處理每個 Frame （幀） ，他特別推薦 Runway 和 OpenArt 用來生成初稿與圖片，同時訓練 OpenAI 生成更多圖片，但是用 AI 製作動畫最大的挑戰為「敘事的連貫性」，有劇情的動畫片，必須把故事與場景一幕接著一幕做連結，要做一部動畫片不難，但把故事說的動人，就要靠強烈的視覺效果和反轉的劇情，這時候，有電影製作背景和劇本經歷的人才可以解決這些技術難題，許多故事的轉折還不是現有的 AI 能預知的結果，這時忽然想到日本最近宣布偵破一起二十多年的懸案，日本一名主婦在家中被謀殺，警方對作案動機與兇手毫無線索頭緒，即便有了 DNA 科學辦案，也找不到兇手，最後案件的犯罪動機卻只是因爲兇手單純嫉妒這名婦人得到自己心儀男人的忌妒心，這就是人腦的複雜運作和藝術(作案)天份無法被人工智慧完全取代的原因。要有一個反轉又是反轉的故事還要合乎邏輯，還是需要人類的大腦，人類的思考邏輯，機器永遠無法完全預測到，好萊塢的編劇暫時還是有飯吃。

參考資料：

To The Bones

I Made a Film With AI. This Is What Happened

To The Bones 使用工具：

ChatGPT Sora by OpenAI

AI 助理 Kling

腳本 Runway

AI 生成配音 Elevenlabs

這篇文章 日本東京 AI 電影節觀後感，什麼是 ChatGPT Sora 做不到的效果？ 最早出現於 鏈新聞 ABMedia。