忙著搞定 AI 產片流程,字幕就一直擱著沒做

我現在自己用 AI 做哥布林系列的短影音,一隻 3D 哥布林跟他人類女友的情侶日常。從劇本、配圖、配音到生成影片,每一段都是邊做邊摸索,光是讓角色每一鏡長得一樣,就花掉我大部分的力氣。

我知道 AI 可以上字幕,但前面的產製流程都還沒搞定,沒有時間去跟 AI 討論這件事,就被我擱著。

可是上了幾支之後,發現沒有字幕的影片真的比較難吸收。短影音大家都是邊滑邊看,有字幕還是比較快看懂這支在演什麼。所以我就隨口問 AI,你要怎麼幫我上字幕,本來預計要花些時間討論,結果卻快得令我稱奇。

從自己匯入字幕檔,到說一句話就拿到上好字幕的完整影片

第一版:AI 寫好字幕檔,我自己匯入剪輯軟體

第一版的分工是這樣:

  • AI 照定案臺詞寫好字幕檔,每條字幕標好第幾秒到第幾秒,中文一行、英文一行。
  • 我在剪映用免費的「匯入字幕」功能把檔案拉進來,調好字體跟位置,再匯出影片。
  • YouTube 的字幕是一種語言一軌,所以 AI 另外給我中文、英文各一個檔,我再去後台分開上傳。

〈隨便解碼工程〉是第一支用這個流程上中英字幕的片。字幕終於有了,只是每支片剪完,我還是要自己匯入,調整,再匯出,YouTube 還要多傳兩個檔。

第二版:我說不想再上字幕,它直接交出完整影片

做到〈轉行抓綠鬣蜥〉那支,我跟 AI 說:「我都不想上傳字幕了,以後我完片之後,你幫我做有帶中英字幕的發布版就好了。」

我本來以為還要來回溝通,字幕放哪,字多大,一項一項跟它對。結果我一問完,它就直接交給我一支字幕已經燒進畫面的完整影片,中英雙語都在上面,連 YouTube 那兩個字幕檔都不用再傳了。

每支片都有兩個上好字幕的版本

  • 4K 版:給 YouTube,我自己上傳。
  • 1080 版:給 IG。
  • 字幕在畫面中下方,中文一行、英文一行。中文是臺詞原文,英文是意譯,讓看不懂中文的觀眾光看字幕也跟得上劇情。
  • 原本沒有字幕的完片保留一份,之後要改還有乾淨的底片可以用。

我這邊只剩把片剪好

從那次之後,我每支短影音剪完放進資料夾,AI 就會做出帶中英字幕的發布版,我就沒再自己上傳過字幕。

AI 上字幕的四個步驟,還有中間翻車的地方

這段幾乎都是 AI 做的,我比較沒出到力。但它做的事值得攤開來看,因為中間翻車的點,剛好就是自己上字幕最容易漏掉的地方。

從剪好的成片重新對時間

  • 字幕的時間軸要對我剪好的成片,照當初規劃的配音長度排會對不上。
  • 我剪輯時常常會修短。〈轉行抓綠鬣蜥〉規劃是 18.16 秒,我剪完只剩 15.77 秒,照原本時間上字幕,整條都會錯位。
  • AI 的做法是拿定案的配音去比對成片的聲音,找出每一句實際從第幾秒開始講,再照這個時間排字幕。

中英兩行燒進畫面,一次出兩個尺寸

  • 字幕直接燒進畫面,平台不用另外上傳字幕檔。
  • 位置、字級、顏色先討論後寫成固定樣式,每支片長得一樣。
  • 翻車一:中文長句衝出畫面。有一句臺詞 21 個字,燒出來左右兩邊都超出去。英文靠空格換行,中文沒有空格,工具不知道該在哪裡斷。後來規則是太長的句子拆成兩條字幕,拆開之後也更貼角色講話的節奏。
  • 翻車二:失敗了卻沒有報錯。AI 一開始連試好幾次,檔案都順利產出,打開畫面卻是乾淨的,字幕根本沒燒上去。換成比較穩的做法之後才成功。這個翻車我沒看到,是它自己抽畫面才發現的。

畫面本身有字的鏡頭,字幕讓位

  • 翻車三:字幕蓋掉新聞畫面的字。〈轉行抓綠鬣蜥〉第一鏡是一段新聞畫面,底部本來就有新聞字幕。我看片時發現 AI 的字幕剛好疊在上面,兩層字糊在一起,誰都讀不清楚。
  • 我問它怎麼辦,它的建議是那一鏡的字幕整段拿掉。那個畫面只有一秒半,新聞標題已經把事情講完了,切到下一鏡再接字幕,觀眾也不會漏掉劇情。
  • 之後寫成規則:新聞畫面、螢幕截圖、字卡這種畫面自己有字的鏡頭,字幕一律讓位。
  • 〈道歉信〉又往前走一步,畫面上已經有很大的中文字,那一條就只留英文,中文不重複放。

燒完一定抽畫面看一眼

  • 撞字這種問題,只看字幕檔完全看不出來,一定要看到畫面才知道。
  • 所以現在每次燒完,AI 都會把有風險的那幾格畫面截出來檢查,確認字幕有出現,沒超框,也沒蓋到畫面上的字,才交給我。
  • 這一步在〈道歉信〉又救了一次,最後一格右下角冒出一串莫名其妙的數字「1536」,該出現的字幕卻不見了,原因是 AI 調整字幕位置時把數字填錯欄位。抽畫面當場抓到,修好重燒才交片。

沒有複雜的字幕需求,直接開口問就好

回頭看,字幕一點都不難做,卡住我的是我一直懶得去想「請 AI 上字幕會怎樣」。字幕先擱了好幾支片,開始上字幕之後,我也還以為最後一步一定要自己在剪輯軟體裡做,直到我說出不想再弄,它馬上就做好了,我真的超級驚訝。

如果你也在做短影片,字幕沒有什麼特別的設計需求,只要清楚、對得上、中英都有,我覺得直接交給 AI 就非常方便。我這邊要做的只剩把片剪好,再看一眼畫面有沒有字撞在一起。