Synthesizer V
File:Synthesizer V R2 logo.svg | |
基本資料 | |
軟件名 | Synthesizer V |
---|---|
作業系統 | Windows / Linux / macOS |
語言 | 日語、英語、華語、粵語、西班牙語 |
軟件類型 | 歌聲合成 |
首次發佈 | 技術預覽版 (2018年8月19日) |
測試版本 | Synthesizer V Studio 1.11.2b2 (2024年7月11日) |
圖片大小 | 420px |
別稱 | SynthV、SV |
開發商 | Dreamtonics Co,. Ltd. |
最新版本 | Synthesizer V Studio 1.11.0 (2024年4月4日) |
代表色 | SynthV綠(15E879) |
Synthesizer V(簡稱SynthV)是由以華侃如(Kanru Hua)為首的Dreamtonics Co,. Ltd.開發的歌聲合成引擎及編輯器軟件(V表示第5次架構迭代)。該引擎採用了自主研發的基於人工神經網絡及拼接合成算法的LLSM(底層語音模型)技術,僅使用少量採樣數據即能生成自然的聲音。
Synthesizer V使用的歌聲數據庫具有Standard和AI兩種不同版本,分別對應WaveNet vocoder[1]強化的傳統拼接歌聲合成(Standard)和基於機器學習的歌聲合成(AI)。[2]
發展歷程
編輯器和引擎
第一代 |
---|
|
第二代 |
---|
|
發佈歌聲數據庫
第一代
日期 | 公司 | 語言 | 性別 | 聲庫名 | 發佈資訊 |
---|---|---|---|---|---|
2018年8月19日 | Synthesizer V | 英語 | 女聲 | 愛蓮娜·芙緹 | 公開 |
2018年11月11日 | Synthesizer V | 日語 | 女聲 | 闇音連理 | 開放下載 |
2018年12月24日 | Synthesizer V | 日語 | 男聲 | 玄武 | 開放下載 |
2018年12月28日 | Animen | 華語 | 女聲 | 艾可 | 發售,平行四界則代理銷售 |
2019年4月19日 | 平行四界 | 華語 | 女聲 | 赤羽 | 發佈試聽曲並開啟預售 |
2019年5月31日 | 平行四界 | 華語 | 女聲 | 詩岸 | 發佈試聽曲並開啟預售 |
2019年6月28日 | 平行四界 | 華語 | 女聲 | 蒼穹 | 發佈試聽曲並開啟預售 |
2019年8月22日 | 平行四界 | 華語 | 女聲 | 海伊 | 發佈試聽曲並開啟預售 |
第二代
日期 | 公司 | 語言(採樣語言,主次排序) | 性別 | 聲庫名 | 採用技術 | 事件 |
---|---|---|---|---|---|---|
2020年6月26日 | 平行四界 | 華語 | 女聲 | 赤羽 | Std | 預售,同年7月29日Animen代理銷售 |
2020年6月26日 | 平行四界 | 華語 | 女聲 | 詩岸 | Std | 預售,同年7月29日Animen代理銷售 |
2020年6月26日 | 平行四界 | 華語 | 女聲 | 蒼穹 | Std | 預售,同年7月29日Animen代理銷售 |
2020年6月26日 | 平行四界 | 華語 | 女聲 | 海伊 | Std | 預售,同年7月29日Animen代理銷售 |
2020年6月26日 | Dreamtonics | 日語 | 女聲 | Saki | Std | AH-Software代理發售 |
2020年6月26日 | AH-Software | 日語 | 女聲 | 琴葉 茜·葵 | Std | 發售 |
2020年7月13日 | Animen | 華語 | 女聲 | 艾可 | Std | 發售 |
2020年7月13日 | Animen | 日語 | 男聲 | 玄武 | Std | 發售 |
2020年7月13日 | Animen | 日語 | 女聲 | Saki | Std | 發售,2021年1月21日授權AH-Software代理發售 |
2020年8月7日 | 平行四界 | 華語 | 男聲 | 牧心 | Std | 發佈試聽曲並開啟預售 |
2020年8月12日 | 平行四界 | 華語 | 女聲 | Minus | Std | 發佈試聽曲並開啟預售 |
2020年12月25日 | Dreamtonics | 日語 | 女聲 | Saki | AI | 發佈,AH-Software和Animen則代理銷售 |
2021年3月18日 | AH-Software | 日語 | 女聲 | 小春六花 | Std/AI | 發售 |
2021年6月18日 | AH-Software | 日語/英語[21] | 女聲 | 弦卷真紀 | Std/AI | 發售 |
2021年10月13日 | Animen | 日語 | 女聲 | 闇音レンリ | Std | 發佈,開放免費註冊通道 |
2021年11月26日 | AH-Software | 日語 | 女聲 | 追儺醬 | Std/AI | 發售 |
2021年12月1日 | Dreamtonics | 華語 | 女聲 | 青溯 | AI | 發售,並在淘寶開設店鋪銷售 |
2021年12月6日 | Animen | 英語 | 女聲 | 愛蓮娜·芙緹 | AI | 發售 |
2021年12月11日 | AUDIOLOGIE | 英語 | 女聲 | 鈴愛莉 | AI | 發售,並在淘寶開設店鋪銷售 |
2022年1月19日 | Eclipsed Sounds | 英語 | 女聲 | SOLARIA | AI | 發售 |
2022年1月19日 | 平行四界 | 華語 | 女聲 | 星塵Infinity | AI | 發佈試聽曲,1月27日開啟預售,2月20日正式發佈 |
2022年1月27日 | AH-Software | 日語 | 女聲 | 京町精華 | Std/AI | 發售 |
2022年2月4日 | Dreamtonics | 英語 | 男聲 | Kevin | AI | 發售,AH-Software也有代理銷售 |
2022年2月4日 | Dreamtonics | 日語 | 男聲 | Ryo | AI | 發售,AH-Software也有代理銷售 |
2022年4月9日 | Dreamtonics | 華語 | 男聲 | 默辰 | AI | 發售,AH-Software也有代理銷售 |
2022年4月13日 | AH-Software | 日語 | 女聲 | 夏色花梨 | AI | 發售 |
2022年5月4日 | Dreamtonics | 華語 | 男聲 | 岸曉 | AI | 發售,AH-Software也有代理銷售 |
2022年5月27日 | Dreamtonics | 華語 | 女聲 | 渢漪 | AI | 發售,AH-Software也有代理銷售 |
2022年7月21日 | Dreamtonics | 華語/英語 | 女聲 | Weina | AI | 發售,並在微信小程序開設網店銷售 |
2022年9月22日 | Dreamtonics | 日語 | 男聲 | Yuma | AI | 發佈,10月7日發售,AH-Software也有代理銷售 |
2022年9月22日 | Dreamtonics | 英語 | 女聲 | Natalie | AI | 發佈,10月7日發售,AH-Software也有代理銷售 |
2022年10月20日 | AH-Software | 日語 | 女聲 | 花隈千冬 | AI | 發售 |
2022年10月27日 | Dreamtonics | 日語 | 女聲 | Mai | AI | 發佈,11月10日免費提供於Pro用戶 |
2022年11月15日 | Eclipsed Sounds | 英語 | 男聲 | ASTERIAN | AI | 發佈,12月2日發售 |
2022年11月24日 | Dreamtonics | 華語 | 女聲 | 從錚 | AI | 發佈,12月12日發售 |
2022年11月24日 | Dreamtonics | 華語 | 男聲 | 煊宇 | AI | 發佈,12月12日發售 |
2022年12月24日 | Dreamtonics | 華語 | 女聲 | 澄宵 | AI | 發佈,2023年1月9日發售 |
2023年1月5日 | E-CAPSULE | 華語 | 女聲 | 夏語遙 | AI | 發佈試聽,1月19日預售,1月30日發售 |
2023年2月3日 | Dreamtonics | 英語 | 男聲 | Ninezero | AI | 發佈,2月16日發售,AH-Software也有代理銷售 |
2023年2月12日 | AUDIOLOGIE | 英語 | 男聲 | JUN | AI | 4月20日發售,並在淘寶開設店鋪銷售 |
2023年4月3日 | AH-Software | 日語 | 女聲 | 重音テト | AI | 發佈,4月27日發售 |
2023年4月11日 | Eclipsed Sounds | 英語/西班牙語 | 男聲 | SAROS | AI | 發佈試聽,11月24日發售 |
2023年4月18日 | Dreamtonics | 華語 | 男聲 | D-Lin | AI | 發佈,7月4日發售,AH-Software也有代理銷售 |
2023年4月18日 | Dreamtonics | 英語 | 男聲 | Ritchy | AI | 發佈,7月4日發售,AH-Software也有代理銷售 |
2023年6月1日 | Dreamtonics | 華語 | 男聲 | 林籟 | AI | 發佈試聽,6月17日發售 |
2023年6月1日 | Dreamtonics | 華語 | 女聲 | 韻泉 | AI | 發佈試聽,6月17日發售 |
2023年7月25日 | AH-Software | 日語 | 女聲 | 櫻乃空 | AI | 發佈試聽,8月24日發售 |
2023年9月28日 | KAMITSUBAKI STUDIO | 日語 | 女聲 | 可不 | AI | 開啟預售 |
2023年10月1日 | AUDIOLOGIE | 英語 | 女聲 | 鈴愛莉 Arcane | AI | 發佈試聽,12月11日發售 |
2023年10月3日 | Dreamtonics | 粵語 | 男聲 | 未抒 | AI | 發佈試聽,10月26日發售 |
2023年10月3日 | Dreamtonics | 日語/英語 | 女聲 | Sheena | AI | 發佈試聽,10月26日發售,AH-Software也有代理銷售 |
2023年10月3日 | Dreamtonics | 日語 | 女聲 | Eri | AI | 發佈試聽,10月26日發售及發佈功能限制版聲庫,AH-Software也有代理銷售 |
2023年10月3日 | Dreamtonics | 英語 | 男聲 | Hayden | AI | 發佈試聽,10月26日發售,AH-Software也有代理銷售 |
2023年10月26日 | Bushiroad Music | 日語 | 女聲 | POPY | AI | 開啟預售,12月21日發售 |
2023年10月26日 | Bushiroad Music | 日語 | 女聲 | ROSE | AI | 開啟預售,12月21日發售 |
2023年11月21日 | Internet | 日語 | 女聲 | Megpoid | AI | 發佈試聽,12月20日發售 |
2023年11月28日 | Dreamtonics | 日語 | 女聲 | Ayame | AI | 發佈試聽,12月7日發售,AH-Software也有代理銷售 |
2023年11月28日 | Dreamtonics | 日語 | 男聲 | Jin | AI | 發佈試聽,12月7日發售,AH-Software也有代理銷售 |
2023年12月5日 | E-CAPSULE | 華語 | 男聲 | 奧斯卡 | AI | 發佈試聽,12月26日發售 |
2023年12月8日 | 平行四界 | 華語 | 女聲 | 永夜Minus | AI | 發售 |
2024年1月30日 | Dreamtonics | 華語 | 女聲 | 奕夕 | AI | 發佈試聽,3月15日發售 |
2024年4月1日 | AH-Software | 日語 | 男聲 | 弗里摩俠 | AI | 發佈試聽,4月25日發售 |
2024年4月25日 | Bushiroad Music | 日語 | 女聲 | PASTEL | AI | 開發、售賣決定 |
2024年4月25日 | Bushiroad Music | 日語 | 女聲 | HALO | AI | 開發、售賣決定 |
2024年5月31日 | En-gene | 日語 | 女聲 | 白神芽音 | AI | 公佈旗下的私有聲庫使用Synthesizer V AI技術 |
2024年6月3日 | Internet | 日語 | 女聲 | ROSA | AI | 發售 |
2024年7月19日 | Dreamtonics | 粵語 | 女聲 | 翎婉 | AI | 發售 |
2024年8月30日 | AH-Software | 日語 | 女聲 | 宮舞茉歌 | AI | 發佈試聽,9月26日發售 |
技術
- Synthesizer V AI
Synthesizer V AI 是搭載了 Dreamtonics 研發訓練的深度學習網絡(DNN)為核心的歌聲合成技術。通過 Synthesizer V AI 生成的歌聲,有如人類歌手般自然流暢,細節飽滿,無論何種音樂風格都能應對自如。同時,經過優化的神經網絡無需複雜昂貴的硬件即可在大多數設備上流暢運行。
根據不同的使用需要,Synthesizer V AI 提供了兩種渲染模式可供選擇:偏好品質模式使用完整大小的神經網絡模型,將 Synthesizer V AI 技術的潛力完整發揮;偏好速度模式則使用較小的神經網絡模型,可加快渲染速度。
- Synthesizer V Standard(標準 Std)
Synthesizer V Standard 將 AI 技術融入傳統基於樣本的歌聲合成技術,創造出驅動全新歌聲合成引擎的歌聲數據庫,通過自然歌聲擴展(Natural Singing Extension)的機器學習技術,實現了更加真實的合成音色。
官方介紹
- 逼真無暇的歌聲 彈指可得 頃刻呈現
音樂製作的下一個時代正為你到來。 憑藉多年以來對人工智能、信號處理的深入研究, 加上對音樂堅定不移的熱情,促成了 Synthesizer V 的誕生。 為實現音樂製作人共同的夢想,我們劃時代的歌聲合成引擎忠實地重現了 人類歌聲演唱的每一分變化,而不再使語言及詞彙成為演唱的障礙。 隨意變化、逼真自然的人聲已觸手可及,幫助你實現每一個音樂夢想。 就在今天,開啟音樂製作的下一個時代。[22]
功能特性
音樂製作的新紀元
- 宛若真實的靈動歌聲,觸手可及
紛繁的音色與切實的溫度,是歌聲必不可少的元素。 在帷幕之後,Synthesizer V 採用基於深度神經網絡打造的合成引擎, 能夠合成令人震撼的自然生動的歌聲。 此外,與現有的眾多神經網絡解決方案不同, Synthesizer V 是首款能夠 100% 離線運行且依舊高效的合成引擎。 網絡不穩定?無需擔心。你的創作將始終伴你左右。
加速音樂創作的原型設計
- 無限的歌聲表達
結合日益龐大的歌聲數據庫陣容, 隨時調用新的歌聲嘗試不同風格。 同時還可以通過形式豐富的聲線參數, 例如胸腔 (Chest)、實唱 (Belt)、氣息 (Breathy), 深入研究並定製獨屬於作品的歌聲。
- 實時渲染
通過實時渲染功能將歌聲可視化為波形, 實時呈現創作者對詞曲的每一處修改。 幫助創作者最大限度緩解聽力疲勞,減少從想法到聲音的漫長循環。
- 跨語言合成功能
Synthesizer V 歌聲數據庫來自華語、英語、日語、粵語、西班牙語五種語言。 跨語言合成技術打破了合成歌聲的語言藩籬, 讓每一款歌聲都能使用四種語言進行演唱。
為專業人士打造的純淨人聲音軌
- 生成清晰的人聲音軌,捕捉 Demo 的最佳呈現
音樂創作從未如此簡單。 只需將 MIDI 文件導入 Synthesizer V Studio 並輸入歌詞,歌曲便頃刻呈現。 倘若靈感就在指尖,直接通過 MIDI 鍵盤彈奏,即可錄入鮮活的旋律。 Synthesizer V Studio Pro 還能夠通過 VST3、ARA2 與 AudioUnit 接口,集成到您的工作流程中。
八大參數
- 音高偏差
實時改變實際歌聲音高與書寫音符音高的距離。以音分為單位,100音分為一個半音,有±300音分,±600音分,±1200音分三種模式可供選擇。因此,最多可以完成上下一個八度的音高調節。默認數值為0音分。
- 顫音包絡
實時改變顫音的深度。數值範圍為音符屬性中顫音深度的0倍至2倍。默認數值為1倍。
- 響度
實時改變歌聲音量的大小。以分貝為單位,數值範圍為±12dB。默認數值為0dB。
- 張力
實時改變虛擬歌手聲帶的緊張程度。以抽象的緊張、放鬆作為數值的上下界。在數值偏向緊張時,歌手聲音明亮,堅實,有力。在數值偏向放鬆時,歌手氣聲較大,溫柔。默認數值為適中。
- 氣聲
實時改變歌聲氣聲的大小。以抽象的氣聲、清晰作為上下界。默認數值為適中。
- 發聲
實時改變真實歌聲(相對氣聲)的響度,而不影響氣聲的大小。以抽象的有聲、無聲作為上下界。在數值偏向無聲時,真實歌聲的音量減小,聲音以氣聲為主。默認數值為有聲。
- 性別
實時改變虛擬歌手音色的性別因子。以抽象的男性、女性作為上下界。在數值偏向男性時,口型偏圓,發聲位置靠後,聲音渾厚。在數值偏向女性時,口型偏扁,發聲位置靠前,聲音尖細。默認數值為適中。
- 音區偏移
AI歌聲數據庫的參數,能夠在固定音高的前提下改變音色,效果類似於Standard歌聲數據庫的「表現力分組」功能。以音分為單位,100音分為一個半音,可以完成上下400音分的音色調節。默認數值為0音分。
|
|
外部連結和註釋
- ↑ Aaron van den Oord; 等. [1609.03499] WaveNet: A Generative Model for Raw Audio [WaveNet: 一種原始音頻的生成模型]. arXiv.org. 2016-09-19 (English).
- ↑ 兩種歌聲數據庫大小有明顯不同。AI歌聲數據庫由於只存儲機器學習訓練好的模型,僅需不到100MB存儲空間。
- ↑ sleepwalking. 新的歌聲合成軟件. 嗶哩嗶哩. 2017-12-01.
- ↑ sleepwalking. 自製歌聲合成軟件Synth V展示阿童木主題曲. 嗶哩嗶哩. 2018-05-07.
- ↑ 【新歌聲合成引擎SynthV】SILENCE【自調教cover / cillia】
- ↑ 【SynthV首款正式歌聲數據庫搶先試用】好想你【艾可(AiKO)】
- ↑ 【SynthV】全新男聲歌聲數據庫DEMO【ゲンブ(玄武)】
- ↑ sleepwalking. 歌聲合成軟件 Synthesizer V 正式發布. 嗶哩嗶哩. 2018-12-24.
- ↑ Web Synthesizer V
- ↑ SynthV第二代歌聲合成引擎先行試聽「404 Not Found」
- ↑ Synthesizer V Studio 發佈會全程回放
- ↑ Synthesizer V AI歌聲合成測試曲
- ↑ 第三代 Synthesizer V AI 歌聲合成技術
- ↑ Synthesizer V Studio 1.4.0 更新日誌
- ↑ Synthesizer V AI 跨語種合成更新 - Synthesizer V Studio 1.5.0 更新日誌
- ↑ Synthesizer V AI:高動態歌聲建模技術
- ↑ Synthesizer V Studio 1.8.0 正式版更新日誌
- ↑ Synthesizer V Studio 1.9.0 正式版更新日誌
- ↑ Synthesizer V Studio 1.10.0 正式版更新日誌
- ↑ Synthesizer V Studio 1.11.0 正式版更新日誌
- ↑ 分開發布
- ↑ Dreamtonics官方頁面