Seed Audio 1.0 是我今年測試過最具雄心的 AI 音訊模型。ByteDance 的統一系統可在單次生成中產生語音、音效和音樂——截至 2025 年中,沒有任何主要競品以單一整合管線提供這樣的組合。經過幾次使用白名單 demo 後,我的結論是:它在多說話者對話的真實感上優於 ElevenLabs,且在音樂質感上可與 Stable Audio 2.0 相媲美,但其 2 分鐘的輸出上限以及僅支援英語/中文的語言限制,讓它目前還無法成為日常可用的生產工具。如果你製作的是這兩種語言的短影音內容,這個模型現在就值得你關注。
什麼是 Seed Audio 1.0?
ByteDance 於 2025 年初推出 Seed Audio 1.0,團隊將其描述為「場景作曲器」,而非傳統的單軌生成器。核心概念是:你只需在一個提示中描述整個音訊場景——對話、環境聲、背景音樂——模型就能生成連貫的混音輸出。根據 ByteDance 發布的技術報告,該模型據稱採用帶有跨注意力層的潛在擴散架構,可在長達 120 秒的音訊中維持時間一致性。由於該模型並非開源,這些架構上的主張尚未透過程式碼檢視獲得獨立驗證。
這個區別很重要。像 ElevenLabs 這類工具專注於語音合成。Stable Audio 專注於音樂。AudioCraft(Meta)則將音樂與音效分開處理。Seed Audio 1.0 嘗試同時處理這三者,在一次推理呼叫中解決說話者身份、背景混音與音效時序。ByteDance 公布的規格顯示,所有輸出都採用 44.1 kHz 取樣率與 16-bit 位深,符合 CD 品質標準。這裡有必要先說明:44.1 kHz 取樣率定義了輸出檔案每秒包含多少個數位取樣,而有效頻率內容——也就是模型實際產生有意義音訊細節的範圍——上限約為 16 kHz。這種落差在神經音訊模型中很常見,並會在下方的品質評估章節進一步討論。
核心功能與能力
該模型接受文字提示、參考音訊片段(最多 3 段,每段 30 秒),甚至也可接受圖像輸入來作為生成條件。這種多模態彈性相當值得注意——截至撰寫時,我尚未見過其他可供正式使用的音訊 AI 也能接受圖像作為場景上下文。
零樣本語音克隆
我把一段自己朗讀產品評論的 12 秒語音片段餵給了系統。輸出結果與我的音高輪廓和鼻腔共鳴非常相近——考慮到 ElevenLabs 通常需要 30 多秒才能達到相近的保真度,這表現令人印象深刻。這個模型也能處理我略帶非母語口音的英文,而不會把它抹平成一般的美式發音。從感知上來看,這個複製音色抓住了我聲音的核心特質,但將一些細微的音色細節做了平滑處理;如果參考片段更長,或許能保留這些細節。
它的弱點在於:情緒極端。以耳語方式說出的諷刺台詞,回傳時只聽起來比較輕聲,而不是帶有挖苦意味。嵌在語句中的笑聲也失去了自發性。對於中性到中等表情豐富的對話,這個複製音色已可用於正式製作。若是需要寬廣動態範圍的有聲書旁白,你仍然需要手動編輯,或使用一個以較長參考資料調校過的專用 TTS 模型。
多說話者場景生成
這是 Seed Audio 1.0 真的讓我驚艷的地方。我生成了一個 2 人訪談場景,接著擴展到 5 人圓桌討論。在 2 人測試中,聲音區分完全無瑕——音高、語速,甚至模擬的房間位置(些微立體聲偏移)都各自明確。5 人版本則在大約 90 秒內維持了身份區隔,但之後兩個較低音的男聲開始彼此混在一起。
ByteDance 的技術報告聲稱,該模型最多可追蹤 8 位獨立說話者,並為每位說話者分配獨特的音色、情感輪廓與說話節奏。我在試用期間只能測試到最多 5 位說話者。實際上,3–4 位說話者是品質能穩定維持在高水準的最佳區間。這仍然領先於 ElevenLabs 或 Bark 在不經人工後製拼接的情況下,原生所能做到的任何效果。
可控混合
混音介面可讓你針對每個圖層以 0–100 的比例尺度設定對話、音樂和效果音的相對音量。我測試了極端情況:對話 90、音樂 10,對比對話 50、音樂 50。模型確實遵守了這些比例,但在對話 50 時,聲音清晰度明顯下降——這不只是音量的問題,而是擴散模型在音樂權重提高時,似乎分配給語音音素清晰度的注意力 token 變少了。
與像 Logic Pro 這樣正規的 DAW 相比,你會失去逐頻段 EQ 控制和真正的空間聲像定位。不過,對於以社群媒體為目的的初步混音來說,反正響度標準化也會壓縮動態,Seed Audio 內建的混音器直接省掉了工作流程中的一整個步驟。對於平常會匯出 stems、在 CapCut 中加入音樂,然後重新調整音量的創作者來說,這每個片段可節省 10–15 分鐘。
音訊品質評估
我對 20 個生成樣本進行了聆聽測試(10 個對話、5 個純音樂、5 個混合場景)。測試是透過 Focusrite Scarlett 2i2 介面,使用 Audio-Technica ATH-M50x 耳機進行的。下文所述的頻譜分析是使用 Adobe Audition 的頻率分析檢視完成的。
取樣率 vs. 有效頻率範圍:Seed Audio 以 44.1 kHz 取樣率輸出檔案,理論上可支援最高 22.05 kHz 的頻率。然而,模型實際生成的內容顯示,只有在約 16 kHz 以前才有乾淨的頻率分布,之後便會明顯快速衰減。這表示該檔案在格式上屬於 CD 音質,但神經編解碼器並未充分填滿可用頻寬——這是目前以擴散模型為基礎的音訊模型常見的特性。對大多數聽眾與多數播放情境(手機喇叭、耳機、社群媒體壓縮)而言,這個差距是聽不出來的。經過訓練的耳朵在錄音室監聽喇叭上會注意到缺少較高的泛音,特別是在鈸聲與齒擦音子音上。
在僅有語音的生成中,噪聲底約為 -68 dB SNR;在混合了音樂與音效的場景中,則約為 -52 dB。相較之下,ElevenLabs Turbo v2 在純語音上的 SNR 大約可達 -72 dB。這些測量結果來自我使用 Adobe Audition 對生成樣本進行的頻譜分析,應視為單一測試者環境下的近似觀察,而非實驗室等級的基準測試。
關於方法論的說明:我進行了一項非正式的盲聽測試,參與者共有 5 人——同事與音訊專業人士,並非隨機抽樣。這個群體的規模太小,不足以達到統計顯著性。以下結果僅作為趨勢性印象呈現,而非嚴謹的感知研究。若要進行妥善控制的 MOS 評估,至少需要 20 位以上未經訓練的聽者、標準化的播放條件,以及錨定樣本。
在與真實 podcast 錄音相比時,5 位聽眾中有 3 位正確辨識出這段 AI 生成的雙人對話。最主要的線索不是瑕疵或故障,而是過於一致的房間底噪——真實錄音中的環境噪音會有微小波動,而 diffusion models 仍會將其過度平滑化。
在同一個非正式小組中,我請聽眾以 1–5 分量表評分自然度。Seed Audio 在對話場景的平均分為 3.8,而純音樂輸出為 4.1。ElevenLabs 在對話方面得分為 4.2,但無法生成混合場景以供比較。
什麼會強化此評估: 嵌入可播放的音訊範例和頻譜截圖將使這些說法可供驗證。由於白名單存取條款限制了在研究預覽期間對生成輸出的再分發,我無法將它們納入。若 ByteDance 放寬這些條款——或當該模型達到正式全面開放時——我會以嵌入式音訊比較和完整的頻譜擷取更新此部分。目前,請將這些品質觀察視為一位評論者的專業印象。
如何使用 Seed Audio 1.0 — 逐步教學
目前存取需要透過 ByteDance 的研究計畫取得白名單核准。沒有獨立 App 或公開 URL——互動是透過核准後提供的網頁式示範介面進行。以下是我在 2025 年年中示範期間所遵循的端到端流程。請注意,在正式全面開放前,介面和存取流程可能會變更。
步驟 1 — 申請存取權。 前往 ByteDance Seed Audio 研究頁面(可從其官方研究出版物中找到連結)並提交您的使用案例說明。以我的情況來說,核准花了 6 個工作天(於 2025 年 5 月申請)。一些在 r/generativeAI 上的 Reddit 使用者回報等待時間為 2–4 週。這不保證一定會核准 — ByteDance 似乎會優先考慮具有特定研究或內容創作使用案例的申請者,而非單純出於興趣的申請。
步驟 2 — 撰寫你的場景提示詞。 模型對結構化提示詞的反應最佳。格式:[SPEAKER_1: description] [SPEAKER_2: description] [MUSIC: genre, tempo, mood] [SFX: specific sounds]。每個方括號區段在內部會對應到一個生成通道。
這是一個我用來生成 45 秒產品評論開頭的完整範例提示詞:
[SPEAKER_1: 男性,35歲左右,美式英語,自信且健談的語氣]
"歡迎回到頻道。今天我們要測試一些可能改變你對 AI 音訊看法的東西。"
[MUSIC: Lo-fi hip-hop, 85 BPM,輕鬆、低音量]
[SFX: 柔和的鍵盤打字聲在 3 秒時逐漸進入,咖啡杯在 8 秒時放下]
步驟 3 — 附加參考音訊(選填)。 上傳 WAV 或 FLAC 檔案以獲得最佳效果。MP3 也可以,但會引入壓縮失真,降低複製品質——在我的並排比較中,以 MP3 為來源的複製品聽起來一貫比以 WAV 為來源的略微更「平滑」,對氣息感與齒擦音的再現也不夠準確。盡可能使用無損格式。
第 4 步 — 設定混音參數。 調整對話/音樂/音效滑桿。對於敘事內容,我建議先從 75/20/5 開始;對於電影預告片,則建議從 40/50/10 開始。
步驟 5 — 生成並反覆調整。 在我的測試中(2025 年中,白名單示範版),雲端端點上對一段 60 秒的片段進行推論大約花了 45 秒。延遲可能會因伺服器負載和模型更新而有所不同。你可以只重新生成個別說話者,而不必重做整個場景——這是非常省時的一大優點。如果某次生成聽起來不太對,先試著改寫說話者描述,再重新生成;加入像「沙啞」或「氣聲」這類具體形容詞,通常比用數值調整音高更能穩定地引導結果。
並非每次生成都會成功。我的嘗試中大約每 5 次就有 1 次至少出現一個明顯問題:講者聲音未遵循描述、音效放置在錯誤的時間戳,或音樂在音調上與對話不協調。重新生成通常能在再嘗試 1–2 次內修正問題,但你應該預留迭代時間,而不是期待一次就達到完美。
步驟 6 — 匯出並整合。 輸出會以單一 44.1 kHz WAV 檔案的形式提供。對於影片整合,我會直接將其管線輸入 FFmpeg:ffmpeg -i video.mp4 -i seed_output.wav -c:v copy -map 0:v -map 1:a final.mp4。如果你使用像 Veo 或 Kling 這類 AI 影片生成器,這個工作流程也能自然搭配。
Seed Audio 1.0 與 ElevenLabs、Stable Audio、AudioCraft 的比較
功能 | Seed Audio 1.0 | ElevenLabs | Stable Audio 2.0 | AudioCraft (Meta) |
|---|---|---|---|---|
輸入模態 | 文字 + 音訊 + 圖像 | 文字 + 音訊 | 文字 + 音訊 | 文字 |
輸出類型 | 語音 + 音樂 + SFX(混合) | 僅語音 | 音樂 + SFX | 音樂 + SFX |
最長時長 | 120 秒 | 無限制(串流) | 180 秒 | 30 秒(MusicGen 預設;可透過自訂設定延展) |
語言 | 英語、中文 | 29 種語言 | 語言無關(音樂) | 語言無關(音樂) |
語音克隆 | Zero-shot(≤3 個片段,每個 30 秒) | 即時 + 專業 | 否 | 否 |
多說話者 | 最多 8 位說話者(ByteDance 宣稱);我在測試中驗證為 5 位 | 每個聲音手動生成 | 不適用 | 不適用 |
API 狀態 | 僅白名單 | 公開 | 公開 | 開源(自行架設) |
定價 | 免費(研究預覽) | $5–$330/月 | $12–$48/月 | 免費(計算成本) |
開源 | 否 | 否 | 否 | 是(Apache 2.0) |

測試說明:Seed Audio 是在我於 2025 年中旬的白名單示範存取期間,針對 20+ 個生成樣本進行測試。ElevenLabs 的比較使用 Creator 計畫上的 Turbo v2。Stable Audio 2.0 則透過其公開 API 進行測試。AudioCraft 的結果則基於使用開源 MusicGen 版本的自架推論;請注意,MusicGen 的預設設定可生成最多 30 秒,儘管自訂設定可延長此時間。所有比較皆反映撰寫本文時可用的版本,未來更新後可能不再適用。
依使用情境而定,哪個工具更勝一籌
上方的表格顯示了原始功能覆蓋範圍。以下是根據實際工作流程的選擇結果:
短格式社群影片(TikTok、Reels、YouTube Shorts): Seed Audio 1.0 —— 一體化場景生成消除了工具切換,而 120 秒上限對於 60 秒以下的片段並不是限制。
Podcast 與長篇對話: ElevenLabs —— 無限串流輸出、29 種語言,以及成熟的公開 API,使其成為超過 2 分鐘內容的實用選擇。
音樂製作與配樂: Stable Audio 2.0 —— 180 秒輸出、更強的旋律一致性,以及專用的音樂控制,讓它在配樂工作上更具優勢。
遊戲音訊原型設計: 具備多說話者 NPC 對話與內建環境音效的 Seed Audio 1.0。若你需要完整的本地控制並且能夠接受自行託管,則改用 AudioCraft。
大規模企業 API 整合: 目前選 ElevenLabs —— 它是唯一具備公開 API、SLA 文件與商業授權條款的選項。只有在 ByteDance 宣布正式可用之後,Seed Audio 才會成為競爭者。
預算導向的實驗: AudioCraft —— 完全開源、沒有 API 費用,而且基礎設施由你掌控。Seed Audio 的免費預覽是暫時性的;AudioCraft 的免費方案則是永久性的。
定價與 API 可用性
截至 2025 年中,Seed Audio 1.0 在研究預覽階段對白名單使用者免費。ByteDance 尚未公布正式定價。
推測性定價估算 — 非官方:以下數字是我基於兩個資料點做出的個人預測:ByteDance 現有的 Seed-TTS API 定價結構,以及「多層生成(voice + music + SFX)大約需要比純語音合成多 2–3 倍運算資源」這一假設。這只是根據經驗的猜測,並非洩露數字、分析師共識,或 ByteDance 的官方聲明。實際定價可能會有相當大的差異。
在此假設下,我會預期按秒計費的模式約為每秒生成音訊 $0.03–$0.08。
作為背景:ElevenLabs 的最有效率方案每 1,000 個字元收費約 $0.18,以一般朗讀速度計算,約相當於每秒語音 $0.024。若 ByteDance 針對混合場景(人聲 + 音樂 + 音效)定價為 $0.05/秒,那大約是 ElevenLabs 只生成人聲成本的 2 倍——但你可以在一次呼叫中取得三個層次,而不必分開組裝。
依使用量估算的假設成本(假設每秒 $0.05,這是我推測範圍的中點):
使用情境 | 每月音訊 | 預估成本 | 可比較的替代成本 |
|---|---|---|---|
休閒創作者(每週 5 支短片,每支 45 秒) | 約 15 分鐘 | 約 $45/月 | ElevenLabs Creator($22)+ stock music($50+) |
中量產製作者(每週 20 支短片,每支 60 秒) | 約 80 分鐘 | 約 $240/月 | ElevenLabs Scale($99)+ stock music($150+) |
高量產工作室(每週 100 支短片,每支 60 秒) | 約 400 分鐘 | 約 $1,200/月 | Enterprise ElevenLabs + Epidemic Sound($300+) |
這些數字完全是假設性的。實際定價、計費模式(按秒、按次生成或訂閱制)以及分級結構,在 ByteDance 公布之前都還未知。
目前限制
在承諾採用 Seed Audio 工作流程之前,你應該先了解五項限制:
語言支援僅限英文與中文。 西班牙文、印地文、阿拉伯文——都無法使用。如果你的受眾是多語言的,支援 29 種語言的 ElevenLabs 仍然是必要的。
最大輸出為 120 秒。 對於播客、有聲書或任何長篇內容,你必須使用 Continuation mode 串接多次生成。接縫處的拼接瑕疵大約有 30% 的機率會被聽見。
目前尚無公開 API。 若沒有白名單存取權,今天你無法將其整合進生產流程。ByteDance 尚未給出正式開放的一確切日期。
隱私與版權的灰色地帶。 訓練資料來源未公開。聲音複製引發了同意方面的疑慮——ByteDance 未提供內建的同意驗證機制,不像 ElevenLabs 的 voice verification 功能。
運算延遲。 生成 60 秒音訊大約需要 45 秒(這是我在 2025 年中期 demo 存取期間測得的),對批次工作流程來說尚可,但對即時應用如直播或互動遊戲則太慢。
誰應該使用 Seed Audio 1.0?
獨立影片創作者(YouTube、TikTok、Reels):如果您以英文或中文製作 2 分鐘以下的短影音內容,並且目前需要在語音、音樂和 SFX 之間切換不同工具——Seed Audio 可將您的流程整合為一步。預估每支影片可節省 15–25 分鐘。
遊戲音訊團隊(獨立規模): 為 NPC 對話快速原型製作,並內建環境音效。一天內生成 50 種場景變化供 A/B 測試玩家反應。多說話者功能以單一語音工具無法比擬的方式,讓這件事變得可行。
企業內容工廠:等等。缺乏公開 API、SLA 保證,以及商業授權清晰度,讓這在大規模生產環境中仍為時過早。等 ByteDance 宣布 GA 後再回來檢視。
常見問題
Seed Audio 1.0 對於音響發燒友來說夠好嗎?
還不算。雖然輸出檔案使用 44.1 kHz 取樣率(CD 級容器),但模型的有效頻率內容在約 16 kHz 附近會明顯急遽衰減——也就是說,可聽頻譜最上方約 6 kHz 幾乎沒有多少有意義的能量。再加上瞬態中偶爾出現的微小偽影,經過訓練、使用錄音室監聽喇叭的耳朵會聽出差異。它非常適合社群媒體,也足以用於企業影片,但仍達不到 hi-fi 標準或專業廣播品質。
如何取得 Seed Audio 1.0 的白名單資格?
造訪 ByteDance 的 Seed Audio 研究頁面(可從他們已發表的論文和研究部落格中找到連結),填入您的姓名、組織以及預定用途。審核通常需要 1–4 週。r/generativeAI 上的使用者回報,相較於泛泛寫「只是想試用看看」的申請,明確說明具體的研究或內容創作用途可加快核准速度。
Seed Audio 1.0 可以免費使用嗎?
是的,在目前的研究預覽期間。尚未推出付費方案。ByteDance 尚未宣布何時開始付費存取,但預計在一般 API 可用性上線後,免費期間就會結束。
Seed Audio 1.0 可以複製任何聲音嗎?
它可以從少至 10 秒的參考音訊中複製大多數聲音,但準確度會有所不同。帶有強烈口音、特殊音高範圍,或大量聲帶沙啞音(vocal fry)的聲音,複製得不那麼忠實。系統沒有內建同意機制——您有責任確保您有權複製您上傳的任何聲音。
最終建議:這份 Seed 音訊評測歸根結底取決於時機。Seed Audio 1.0 的確是一項令人印象深刻的技術——根據我的測試,它能提供我所見過最強的場景級音訊生成,將多位說話者對話、音樂與音效在一次生成中結合起來,而且其品質水準是競爭工具作為整合式方案尚未能達到的。但「可用」這個說法有點勉強,因為要取得使用權需要白名單,且目前沒有商業 API。如果你能被加入白名單,而且你的內容符合英文/中文、2 分鐘以內的限制,就請立刻開始試用。多位說話者對話與一次性混音所代表的能力,競爭對手要複製出來,將需要相當大的開發投入。對其他所有人來說,請先把這個模型加入書籤,保持你的 ElevenLabs 訂閱有效,並在 ByteDance 開放門檻的那一刻立刻切換。
