Vocoflex 是一個(gè)極具前沿創(chuàng)新力的實(shí)驗(yàn)性項(xiàng)目，可以將任何歌聲轉(zhuǎn)化為全新的、用戶自定義的聲音。用戶僅需導(dǎo)入長度 10 秒的音頻片段，或是通過隨機(jī)功能自定義性別與音調(diào)參數(shù)，即可創(chuàng)造出新的歌聲，并使用其實(shí)時(shí)歌唱。
 

關(guān)于 Vocoflex

Vocoflex 是一個(gè)極具前沿創(chuàng)新力的實(shí)驗(yàn)性項(xiàng)目，可以將任何歌聲轉(zhuǎn)化為全新的、用戶自定義的聲音。用戶僅需導(dǎo)入長度 10 秒的音頻片段，或是通過隨機(jī)功能自定義性別與音調(diào)參數(shù)，即可創(chuàng)造出新的歌聲，并使用其實(shí)時(shí)歌唱。Vocoflex 能夠廣泛適用于音樂制作與現(xiàn)場表演，能夠通過動(dòng)態(tài)改變音色實(shí)時(shí)改變輸出的聲音，并提供低至 45 毫秒的動(dòng)態(tài)延遲調(diào)整。

中文官網(wǎng)：https://dreamtonics.com/zh-CN/vocoflex/

Vocoflex 采用極簡主義用戶界面，通過新穎、直觀的方法，引導(dǎo)用戶通過操作光點(diǎn)來混合語音的不同“輪廓”，通過混合光與影來設(shè)計(jì)出新的歌聲。該界面以光點(diǎn)與曲線的形式展示了用戶導(dǎo)入的樣本及軟件生成的語音輪廓，并依照聲音特征的相似性自動(dòng)放置在相近的位置，從而允許用戶直觀而輕松地組合不同樣本之間的聲音特征。希望保留的聲音特質(zhì)被光點(diǎn)照亮，而需要舍棄的特質(zhì)則留在陰影中。

Vocoflex 能夠廣泛適用于音樂制作與現(xiàn)場表演，能夠通過動(dòng)態(tài)改變音色實(shí)時(shí)改變輸出的聲音，并提供低至 45 毫秒的動(dòng)態(tài)延遲調(diào)整。

Vocoflex 與 Synthesizer V Studio 共同使用

在轉(zhuǎn)換與變形真實(shí)人聲之外，Vocoflex 還能夠與 Dreamtonics 旗下旗艦級歌聲合成軟件 Synthesizer V Studio 插件版本進(jìn)行協(xié)作。Synthesizer V Studio 能夠根據(jù)用戶輸入的旋律與歌詞，使用專門制作的 AI 歌聲數(shù)據(jù)庫合成高品質(zhì)歌聲。通過將 Vocoflex 放置于 Synthesizer V Studio 插件之后的效果鏈中，用戶可以基于有限的歌聲數(shù)據(jù)庫陣容盡情擴(kuò)展出不同的歌聲音色，從而設(shè)計(jì)出更加豐富的人聲編排。

如何使用 Vocoflex

1. 導(dǎo)入一段音頻：Vocoflex 能夠自動(dòng)分析用戶導(dǎo)入的歌聲音頻并轉(zhuǎn)化為可視化曲線，曲線上的每一個(gè)點(diǎn)都代表導(dǎo)入音頻的其中一部分。
2. 或者創(chuàng)造一種歌聲：聲音的“調(diào)色盤”就在你眼前。通過隨機(jī)化聲音的“色彩”來制作獨(dú)屬于你的歌聲，并通過簡單的代碼與你的朋友分享！
3. 輸入你的歌聲：只需插入麥克風(fēng)，或是將 Vocoflex 作為插件加載，Vocoflex 就能夠根據(jù)你導(dǎo)入或創(chuàng)造的音色實(shí)時(shí)變換你的歌聲。
4. 開始混合：移動(dòng)軟件界面中的光點(diǎn)，實(shí)時(shí)創(chuàng)建超越想象的人聲效果。光點(diǎn)照亮的聲音特質(zhì)將被混合到一起。陰影里的聲音特質(zhì)將被“減去”。全新的歌聲，將在光與影的變化間誕生。

保護(hù) Vocoflex 免受誤用

盡管 Vocoflex 是為音樂創(chuàng)作活動(dòng)而設(shè)計(jì)的，但 Dreamtonics 深知將產(chǎn)品使用在設(shè)計(jì)目的之外的用途可能帶來的道德影響與潛在風(fēng)險(xiǎn)。為了防止對Vocoflex的濫用，Vocoflex 專門針對演唱歌聲進(jìn)行了優(yōu)化，以避免將Vocoflex用于對普通語音（如說話）的模仿可能造成的潛在風(fēng)險(xiǎn)。

為防止用戶使用未經(jīng)歌手同意的歌聲作為“參考”樣本從而形成對該歌手的侵權(quán)——這是 Vocoflex 軟件授權(quán)許可協(xié)議嚴(yán)格禁止的行為，Vocoflex 引入了聲紋水印功能。水印不會(huì)影響 Vocoflex 創(chuàng)制的歌聲質(zhì)量，但會(huì)將用戶專屬的軟件許可證 ID 嵌入到聲音中。Dreamtonics 能夠使用專用工具識別通過 Vocoflex 創(chuàng)建的音頻樣本的創(chuàng)作者，從而協(xié)助被侵權(quán)歌手向侵權(quán)者追責(zé)。

Vocoflex 先進(jìn)的水印技術(shù)直接集成到其歌聲生成模型中，旨在防止其遭到刪除或篡改，從而確保程序的完整性，防止非法使用者繞過水印生成的意圖。此外，該水印技術(shù)能夠抵御各類音頻加工操作：即使將歌聲通過電話等渠道傳播，或是將其與背景音樂混合，或是進(jìn)行有損壓縮，也能夠確保水印可識別。
 

參與 Beta 版測試計(jì)劃

Dreamtonics 目前正在為 Vocoflex 組織非公開測試，期待與有興趣探索 Vocoflex 創(chuàng)造潛力的創(chuàng)作者共同探討 Vocoflex 的未來形態(tài)，并就軟件的性能、功能、使用場景等方面進(jìn)行廣泛測試與交流。

為確保軟件得以在安全、建設(shè)性的環(huán)境下披露并接受測試，Dreamtonics 現(xiàn)推出一項(xiàng)提供有限名額的測試計(jì)劃。有興趣參與的創(chuàng)作者可通過公開表格申請報(bào)名，Dreamtonics 將在核實(shí)報(bào)名者真實(shí)身份并完成驗(yàn)證后，免費(fèi)提供 Vocoflex 評估副本。

您可以通過以下鏈接進(jìn)行報(bào)名，如果入選，Dreamtonics 將在一周內(nèi)與您取得聯(lián)系：

https://9g8iss2t1ch.typeform.com/to/HxfCTaGm

* Vocoflex 目前尚無面向公眾公開發(fā)布或發(fā)售的計(jì)劃。

軟件規(guī)格

• 操作系統(tǒng)：
  • Windows 11
  • macOS 11.0+
• CPU: 最低 i5-7300U / Ryzen 3 3300U
• 內(nèi)存: 4 GB 以上
• 可用硬盤空間: 200 MB 以上
• 最高質(zhì)量模式：160 毫秒往返延遲
• 最低延遲模式：45 毫秒往返延遲
• 插件格式
  • VST3 效果器
  • AU 效果器

常見問題解答

Vocoflex 和既有的“聲音克隆”或“語音轉(zhuǎn)換”應(yīng)用有什么不同？

為創(chuàng)建新的聲音，Vocoflex 不需要收集大量聲音樣本并進(jìn)行模型訓(xùn)練才可使用。用戶僅需導(dǎo)入長度不低于 10 秒的音頻片段，或透過拾色器功能即可指定變換對象。同時(shí)，Vocoflex 是一款離線應(yīng)用程序，可接受來自麥克風(fēng)或音頻插件接口的實(shí)時(shí)輸入。

盡管 Vocoflex 可以自由改變輸入聲音的音色，但是軟件除了簡單的變調(diào)外，不會(huì)對輸入的音高作任何修改。輸入聲音的發(fā)音習(xí)慣、節(jié)奏及語調(diào)將會(huì)忠實(shí)保留。

Vocoflex 有什么限制或局限？

Vocoflex 無法處理失真或包含背景音樂的輸入音頻。

我可以使用 Vocoflex 轉(zhuǎn)換說話語音而不是歌聲嗎？

考慮到語音變形與轉(zhuǎn)換技術(shù)潛在的安全性問題和道德風(fēng)險(xiǎn)，Vocoflex 有意面向歌聲而非語音進(jìn)行專門調(diào)整優(yōu)化。從技術(shù)角度上 Vocoflex 確實(shí)可以處理說話語音，但是其轉(zhuǎn)換效果、音質(zhì)將不如歌聲。

既然 Vocoflex 已經(jīng)能提供多種音色，我還需要多個(gè) Synthesizer V 歌聲數(shù)據(jù)庫嗎？

Vocoflex 可以透過插件接口和 Synthesizer V Studio Plugin 聯(lián)動(dòng)，擴(kuò)展 Synthesizer V 的音色范圍。然而，Vocoflex 在改變歌聲音色的同時(shí)，會(huì)忠實(shí)地保留歌聲原有的發(fā)音習(xí)慣及演唱技巧。

通過將 Vocoflex 與多種 Synthesizer V 歌聲數(shù)據(jù)庫結(jié)合使用，您能夠發(fā)掘出更加豐富的歌聲編排與表達(dá)。

我不能使用 Vocoflex 來做什么？

您不得在未經(jīng)原始表演者明確知情與同意的前提下，將其音頻樣本用于 Vocoflex。

您可以使用由 Dreamtonics 發(fā)行的 Synthesizer V 歌聲數(shù)據(jù)庫，經(jīng)過 Synthesizer V Studio 軟件合成歌聲作為 Vocoflex 的實(shí)時(shí)輸入。然而，除非我們的合作伙伴另有聲明或明確許可，否則您只能對 Dreamtonics 發(fā)行的歌聲數(shù)據(jù)庫使用 Vocoflex 進(jìn)行處理，而不得與非 Dreamtonics 發(fā)行的歌聲數(shù)據(jù)庫一同使用 Vocoflex。

無論是 Dreamtonics 發(fā)行的 Synthesizer V 歌聲數(shù)據(jù)庫，還是 Dreamtonics 合作伙伴發(fā)行的歌聲數(shù)據(jù)庫，您都不得使用 Vocoflex 模仿或試圖還原 Synthesizer V 歌聲數(shù)據(jù)庫的音色。

在使用 Vocoflex 時(shí)，我是否需要專門的 GPU 硬件或互聯(lián)網(wǎng)連接？

Vocoflex 完全采用 CPU 離線運(yùn)行，歌聲處理過程不需要 GPU 硬件或互聯(lián)網(wǎng)連接。但是，軟件的許可驗(yàn)證仍需要互聯(lián)網(wǎng)連接。

“減去”一種聲音是什么意思？

當(dāng)陰影覆蓋了代表聲音特征的端點(diǎn)時(shí)，Vocoflex 將弱化該特征的表達(dá)，并將輸出的音色推向與之相反的方向。例如，當(dāng)光線投射到呼吸聲特征較強(qiáng)的聲音樣本上，而另一個(gè)質(zhì)感清晰的聲音樣本位于陰影中時(shí)，Vocoflex 輸出的歌聲中的氣息感將會(huì)被進(jìn)一步放大。

哪里可以購買 Vocoflex？

目前，Vocoflex 作為 Dreamtonics 的實(shí)驗(yàn)性項(xiàng)目推出，僅接受有限數(shù)量的測試申請，尚無面向公眾公開發(fā)布或發(fā)售的計(jì)劃。