【新時代】AI 翻唱工具 4 選

「最近常聽到的 AI 翻唱想自己試試看」
「想用 AI 翻唱，讓喜歡的藝人來演唱喜歡的歌曲」
是不是有很多人都這樣想呢？
近年來，AI 技術的進步令人驚艷，每天都有新技術和服務誕生。
其中在 YouTube 和社群平台上備受矚目的，就是「AI 翻唱」。
本文將為您詳細介紹：能製作 AI 翻唱的工具、具體製作方法，以及將 AI 翻唱歌曲影片化的方式等內容，全方位完整解說。
也會針對許多人上傳時最關心的「違法性」問題進行說明，請務必看到最後！

想將 AI 翻唱歌曲影片化，推薦使用 Filmora

Part1. 什麼是 AI 翻唱

AI 翻唱是運用人工智慧（AI）技術，模擬特定人物的歌聲來生成新歌曲的技術。
透過讓 AI 模型學習歌手的聲音和唱法等數據，將該歌聲套用在既有歌曲上，就能創作出彷彿由該歌手演唱的作品。
AI 翻唱的魅力主要有以下 3 點：
・實現夢幻合作：
過去難以實現的不同藝人之間合作，現在能輕鬆達成
・原創歌曲的全新表現：
在既有歌曲加入新的歌聲，能創造出全新的表現方式
・歌手的新可能性：
不受聲帶狀況影響，能挑戰各種類型的歌曲
等
此外，AI 翻唱雖然是劃時代的技術，但也存在「著作權和肖像權問題」、「藝人個性流失」、「無法達到完全自然的聲音」等課題。
由於目前仍是發展中的技術，這些課題將隨著技術進步逐步解決。
而關於著作權和肖像權問題，因為是現階段許多人關心的話題，將在「Part4」中更詳細說明。

Part2. 精選 4 款 AI 翻唱製作工具

本章為您精選介紹 5 款能製作 AI 翻唱的工具。
雖然都是優秀的 AI 翻唱工具，但每個工具都有各自的特色、優缺點。
請將本章作為選擇適合自己工具的參考！

2-1. Jammable

「Jammable（前身為 Voicify AI）」是能在短短數秒內製作高品質 AI 翻唱的線上工具。
特色是搭載了非常多的聲音模型。
此外，操作方式簡單易懂，能輕鬆製作 AI 翻唱。
之前以「Voicify AI」之名已成為知名的 AI 翻唱專門服務，但為了脫離「AI 語音平台」定位並邁向新境界，因而更改了品牌名稱。
不過平台本身與之前差異不大，帳號資訊和製作記錄也都保留，因此 Voicify AI 用戶可以安心繼續使用！
此外，能用多個聲音製作 AI 翻唱的「對唱功能」、清唱提取、人聲移除等 AI 人聲工具組也很吸引人。
但沒有提供免費版，要製作 AI 翻唱「必須」付費。
因此對於想避免付費的使用者來說，可能不太適合。

2-2. Musicfy

「Musicfy」是擁有極高精準度和豐富功能的線上 AI 翻唱製作工具。
製作 AI 翻唱時，不僅能移除 BGM、殘響/回音，還能進行音高和共振峰轉換等細部設定，其高功能性可說是獨一無二。
輸入歌詞文字即可製作 AI 翻唱的功能，以及精準度極高的人聲移除功能也作為專業工具提供，可評價為專業取向的線上工具。
此外，生成的 AI 翻唱可分為「伴奏」、「混合」、「人聲」分別下載，因此不僅能作為完成品，也能作為素材靈活運用。
對於想在 AI 翻唱生成時講究細節、自行調整的使用者來說，是非常適合的工具。
不過介面稍微複雜，不擅長電腦操作的人需要時間熟悉。

2-3. Covers.AI

以簡單介面為特色的 AI 翻唱線上工具就是「Covers.AI」。
只需簡單操作，就能從上傳或選擇的歌曲和選定的模型生成歌曲。
生成的 AI 翻唱還能調整音高，下載流程也非常順暢。
此外，也搭載對唱功能，付費後即可解鎖。
更進一步，也搭載了用自己的聲音製作 AI 翻唱的功能。
不過要注意，製作原創自訂聲音需要 4,999 日圓。
下載完整歌曲需要加入付費方案，但免費也能製作 45 秒的 AI 翻唱，建議先實際使用看看！

2-4. So-VITS-SVC

「So-VITS-SVC」是開源且完全免費公開的深度學習模型。
雖然完全免費，但自由度極高，能無限制製作高品質的 AI 翻唱。
不過，相對於其他 4 個工具都是服務型態，So-VITS-SVC 是開源軟體。因此環境建置需要一定程度的電腦知識和編程技術。
此外，在本機部署時，也需要高規格電腦配備（建議 GPU：GTX3080 以上、記憶體：8GB 以上）。

除了本機建置外，還有運用 Google Colaboratory 或 Discord 伺服器「AI World」的方法。
也就是說，可以想像成與之前介紹的圖像生成 AI「Stable Diffusion web UI」類似的概念。
老實說，其他工具也能簡單製作出高品質的 AI 翻唱，因此不建議初學者使用。
擅長電腦操作的人、已經導入過「Stable Diffusion web UI」的人，或想完全免費製作 AI 翻唱的人，可以從 GitHub 下載原始碼挑戰看看！
關連記事：Stable Diffusion web UI（AUTOMATIC1111版)）的安裝方法【Windows/Mac】

】

Part3. AI 翻唱的製作方法
透過以上內容，對 AI 翻唱的理解更加深入了吧。

不過「想知道實際具體的製作方法」的人應該也不少吧。因此本章將使用前述的「Jammable」，以淺顯易懂的方式解說 AI 翻唱的製作方法。
Jammable 相較於其他工具，能以非常簡單的操作製作 AI 翻唱，而且可選擇的聲音模型也很豐富。

此外，使用 Jammable 製作 AI 翻唱只需「3 個步驟」即可完成，推薦給不想花太多時間或不熟悉電腦操作的人。
接下來就一起來看詳細的 AI 翻唱製作步驟吧！

Step1. 選擇 AI 聲音模型

首先，Jammable進入網站。
從上方下拉選單點擊「Create」中的「Voice Library」。接著會顯示 AI 聲音模型選擇畫面，從 [Music]、[Cartoon]、[Gaming]、[Korean] 等分類中，選擇想用於 AI 翻唱的模型並點擊進入下一步。

在選定的 AI 聲音模型畫面中，可透過「Conversion」「Text To Speech」「Duet」「Microphone」四種形式進行 AI 翻唱。點擊一般常用的「Conversion」繼續。

Step2. 上傳音訊檔案

接著會進入上傳音訊檔案的畫面。可以貼上 YouTube 連結，或直接拖曳選擇檔案來上傳歌曲。
以上述任一方式上傳歌曲後，點擊畫面下方的 [Continue]。

之後可以新增其他聲音來生成合作翻唱。猶豫時也會顯示常用的合作選項。

所有設定完成後，點擊 [Convert!] 即可進入生成流程。

Step3. AI 翻唱完成

接下來只需等待 AI 生成作業完成。
依據歌曲長度和檔案格式而定,大約 1 分鐘左右即可完成 AI 翻唱生成。
生成完成後，就能確認音訊並下載。

Part4. AI 翻唱違法嗎？

結論來說，AI 翻唱在「私人使用」的範圍內並不違法。
但若以商業用途製作 AI 翻唱，並上傳到各影音網站或販售音源，很可能會構成違法。
目前關於 AI 翻唱，多方正在協議中，法規也在完善階段，因此這點需要謹慎判斷。
另外，AI 翻唱是使用「藝人的聲音」生成的產物，因此在法律上涉及「肖像權」這項權利。
此外，與 AI 翻唱相關性高的內容還有「翻唱」或「演奏」類影片。
這些影片因為音樂著作權管理機構「JASRAC」有提供概括性使用許可,因此可以上傳到 YouTube 或 TikTok。
AI 翻唱涉及「肖像權」，翻唱・演奏類則涉及「著作權」，兩者在權利觀點上不同，請注意不要混淆。
考量目前的法規完善狀況，AI 翻唱應視為「娛樂程度」，在私人使用範圍內製作及使用的意識很重要。

Part5. AI 翻唱要製作成影片就用 Filmora！

製作完 AI 翻唱後，想做成音樂錄影帶（MV）形式影片的人應該也很多吧。
要運用 AI 翻唱製作影片，影片編輯軟體是不可或缺的。
因此，這次推薦的影片編輯軟體是連初學者也能輕鬆將 AI 翻唱影片化的「Filmora」。
使用 Filmora，就能將製作的 AI 翻唱進一步打造成充滿原創性的魅力作品。

本章將詳細解說影片編輯軟體「Filmora」的概要、特色及實用功能！
關連記事：【2024年版】MV（音樂錄影帶)）製作方法完整解說【初學者也安心！】

5-1. 什麼是 Filmora？

「Filmora」是由 Wondershare 公司開發發行的高性能影片編輯軟體。
目前在全球 130 多個國家和地區擁有超過 1 億用戶，從影片編輯初學者到進階使用者，廣受各層級好評。

Filmora 在國內外獲得【G2 Crowd】影片編輯產品部門領導者GetApp 影片編輯部門最優秀獎、第 40 屆 Vector 專業註冊大獎 Mac 特別獎、等多項獎項肯定，評價極高，可安心使用。Filmora 的主要特色包括以下 5 點：

可直覺操作的介面

• 搭載進階 AI 功能和影片編輯功能
• 運作流暢
• 音訊編輯也能自由運用
• 素材/特效/範本超過 1,000 萬種，資源豐富
• Filmora 的「操作畫面」非常簡潔，什麼功能在哪裡一目了然，設計清晰易懂。

即使是過去認為「影片編輯好像很難」的人，也能安心使用。
此外，目前影片編輯業界備受矚目的「AI」相關功能也很充實，能擔任創作者的得力助手。
只要有 AI 翻唱影片的概念，就能用 Filmora 輕鬆完成理想作品！
Filmora 是實現影片編輯「希望有這個功能」的全方位高性能軟體。
5-2. Filmora 的豐富 AI 功能

將 AI 翻唱影片化時，可運用的功能例如「AI 人聲移除」「AI 翻譯」「AI 文字編輯」等。

AI 人聲移除：

可一鍵將任何歌曲的人聲部分和背景音樂部分分離的功能。

使用精準度極高的 AI，能達到極為自然的分離效果。
此外，提取的人聲和背景音樂都能維持高音質，因此在製作 AI 翻唱時也很實用。

AI 翻譯：

支援 23 種語言的 AI 翻譯功能。

不只是單純翻譯功能，AI 會自動辨識影片中的語音，並將翻譯後的文字「製作成字幕」和「配音」。
能瞬間讓影片對應外語市場的劃時代功能，在 AI 翻唱影片化時也很有幫助。
AI 文字編輯：

可將影片中的語音或歌詞自動轉換為文字，並用內建文字編輯器編輯的功能。

能在短時間內精準且適當的時機點加入歌詞，也能匯出為文字檔。
此外，AI 文字編輯也支援多種語言，為 AI 翻唱加入歌詞時能有效提升作業效率！

其他 AI 功能：

Filmora 還搭載了以下豐富的 AI 功能。

功能名稱

Filmora 的 AI 功能超過「20 種以上」，皆為其他軟體所沒有的魅力功能。
善用 Filmora 的 AI 功能，不僅能提升編輯作業效率，即使是初學者也能製作出高品質的影片。
此外，還能輕鬆編輯音樂、快速製作符合歌曲氛圍的 MV，是製作 AI 翻唱影片的完美功能組合！
立即免費下載 Filmora，完成只有你能創作的魅力 AI 翻唱影片吧！

總結：來製作 AI 翻唱的原創 MV 吧！

本文詳細介紹了 AI 翻唱的概要、推薦製作工具及合法性等資訊。
製作 AI 翻唱乍看之下似乎很困難，但只要善用工具，任何人都能輕鬆完成。
特別是在 AI 翻唱製作方法中介紹的「Media.io」，操作相對簡單，且聲音模型的選擇也相當豐富。
不妨用你喜歡的歌曲試試看製作 AI 翻唱吧！
此外，如果想將 AI 翻唱製作成音樂影片形式，推薦使用影片編輯軟體「Filmora」。

Filmora 內建豐富的 AI 功能，是想將 AI 翻唱製作成影片的使用者最佳選擇。
結合 AI 翻唱製作工具與 Filmora，就能創作出前所未有、充滿魅力的原創影片！