一門 X+AI 特色課程的成果報告。我們在元宇宙教室裡,讓 LED 虛擬棚、生成式 AI 與 VR 360 沉浸式影像 三條軸線交會,帶領學生從拍攝、生成到後期,完整走過一次新科技的影像創作流程。
本課程探索新興科技媒體在電影與電視製作中的創意應用,聚焦技術理論、實務操作,以及創意與人工智慧的整合。今年特別著重生成式 AI 在影視創作流程中的實際應用——從圖像生成、動態化到敘事編排,協助學生理解 AI 在影像製作中的效益與挑戰。
在元宇宙教室的 LED 大型螢幕上,以 VJ 即時影像播放的方式進行虛擬製片,結合前景演員表演與道具,創造背景與表演的趣味關聯。
以 Google 生態系為主軸,運用 Gemini、Google Flow 與 Google AI Pro 生成圖像並讓畫面動起來,並嘗試 Runway 強化提示詞與動態表現。
使用 Insta360 Titan 進行 360 度實拍,學習全景展開、接縫修補與 VR 後期剪輯,完成從拍攝到沉浸式呈現的完整流程。
課程前半段以張國甫老師的虛擬製作為主軸。我們在元宇宙教室的 LED 螢幕上播放動態背景——採取 VJ 即時影像播放的方式,而非即時連動 Unreal Engine。為了讓背景更豐富,課程導入多種 AI 生成工具,讓學生先生成圖像、再讓圖像動起來,最後與前景演員的表演及道具結合,產生有趣的敘事關聯。
主軸是 Google 生態系。去年 Google 鼓勵學生申請 Google AI Pro 帳號,期末時也為全班添購了 Google AI Pro 帳號(每個帳號可含五位家庭成員),讓全班有足夠的額度進行創作。
對話式生成與圖像生成的核心,用於發想、圖片產生與語意分析。
將生成圖像轉為動態影片,串接鏡頭語言與運鏡,產出虛擬棚背景素材。
全班共享的進階帳號,提供充足額度與 2TB 空間,支援圖片生成、腳本與報表分析。
以免費帳號嘗試,讓提示詞更能呼應影片內容;學生也實際體驗了它的限制與取捨。
四組同學以 AI 生成的動態背景為舞台,加上前景演員的表演與道具,創作出四部風格各異的短片。背景與前景的趣味關聯,正是這個模組的核心練習。
動態奔跑的逃跑情境,前景演員與不斷流動的背景產生追逐張力。
同樣以動態奔跑為主軸的逃離敘事,幽默詮釋學生心境。
讓兩隻魚化身格鬥對戰選手,前方還有主持人即時講解的趣味設定。
一隻恐龍化身外送員,穿梭世界各地送餐的小故事。
課程後半段進入 VR。學校配備 Insta360 Titan 專業 360 度攝影機,學生需完成兩場實拍。陳嘉暐老師的教學涵蓋全景影像的原理、VR 剪輯思維、Equirectangular 圖層編輯,以及在 Premiere 中開啟 VR Mode 進行剪輯與遮罩去除——一步步建立沉浸式影像的完整製作觀念。
互動式說明全景(Panorama)球體是如何形成、又是如何讓觀者「進入」其中觀看的。
開啟互動頁從畫框大小、視角切換到後期工作流,重新理解 VR 影片剪輯與一般影片的差異。
開啟互動頁運用 Photoshop 在全景影像上做簡單生成,蓋掉原場景;重點在掌握視角的切換。
在 Adobe Premiere 中思考畫框大小、開啟 VR Mode 進入視角觀看與編輯,並以遮罩移除多餘元素。
從 VR 概論、Insta360 Titan 操作,到電腦上的全景後期與剪輯教學——學生在課堂中一步步熟悉沉浸式影像的工作流。
兩場 360 度實拍分別於 5/22 與 5/29 進行,以 Insta360 Titan 記錄學生的拍攝現場。
集結兩個年度、橫跨一首影視作品的 VR180 沉浸式測試總結。這是本課程最重要的成果呈現之一。為完整體驗 VR180 環視,點擊將於 YouTube 開啟。
● VR180 沉浸式影片 ・ 於 YouTube 以官方播放器拖曳環視四月初,陳嘉暐老師利用元宇宙教室的場域,在課堂前用一個下午以 Vibe Coding 做出一款 AI 體感互動小遊戲,提醒同學:在 AI 的時代,我們其實可以動手做一些好玩的事。
遊戲透過攝影機即時偵測玩家骨架,學生要擺出各種電影工作人員的姿勢,去符合畫面中的目標骨架框架。當相似度達到 80% 以上並維持 2 秒,即可過關。
它結合 MediaPipe 姿勢辨識與 Three.js 3D 渲染,所有運算都在瀏覽器本地完成、影像不回傳伺服器——把電影美學與科技互動,玩成了一場課堂裡的體感挑戰。
實際操作畫面:T-Pose 校準、即時骨架比對與過關判定,看看 AI 體感互動在元宇宙教室裡是怎麼玩的。
以影片回顧本學期「元宇宙 VR 影片製作」課程的教學歷程、課堂操作與學生創作成果。
完整呈現課程成果與學習歷程,作為本頁的最終影音總結。