NEUTRINO
另請編輯者注意：請不要在人物歷程等相關內容中懸掛此模板。具體使用方法詳見模板說明文檔。
| |
| 基本資料 | |
| 軟件名 | NEUTRINO |
|---|---|
| 開發者 | SHACHI |
| 作業系統 | Windows / Linux / macOS（M1晶片） / 線上（基於Google Colab） |
| 軟件類型 | 唱歌合成，語音合成 |
| 首次發佈 | v0.101（2020年2月22日） |
| 目前版本 | v0.430（2021年03月29日） |
NEUTRINO是由SHACHI開發的免費歌聲合成器。它基於音頻合成深度學習模型（例如WaveNet，WaveRNN）與Morise開發的NSF來完成合成唱歌任務
據官方推特，此軟件的名稱（軟件直譯：中微子）來源於一個「希望能開拓未曾聽說過的樂曲與流派」的想法。
發展歷程
- 2019年12月3日
SHACHI在他的推特中上傳了他用自己開發的引擎所合成的音聲的片段。
- 2020年1月27日
SHACHI表示已將合成引擎轉換成C++，並預告將會把引擎從Linux（Ubuntu）移植到Windows上。
- 2020年2月22日
名為SHACHI的nico用戶發佈演示demo與NEUTRINO正式版本v0.101，內含東北切蒲英與謠子音源模型。
- 2020年3月7日
NEUTRINO發佈v0.103版本，並公開macOS版引擎。
- 2020年3月22日
發佈了在線版(online)，Google Drive與Colab互聯後就能直接進行合成並輸出。
- 2020年4月17日
發佈的v0.200版本中加入了新的合成模型-NSF（之前只有WORLD引擎【僅僅是一個音素提取模型】），在使用NSF合成時還需要支持CUDA的NVIDIA顯卡
（macOS版本因環境上不支持NVIDIA顯卡而無法使用NSF）。
- 2020年5月29日
NEUTRINO發佈v0.300版本[1]，加入了新的音源模型-JSUT，GPU優化加速快了4倍，（macOS版本的GPU支持和NSF移植被暫停）
- 2020年6月22日
NEUTRINO發佈v0.310版本，重新在東北切蒲英與謠子和JSUT的音源數據集上訓練NSF。
- 2020年7月7日
- 2020年7月10日
NEUTRINO發佈v0.310版本，添加了樣式轉換選項（-k）
- 2020年9月18日
NEUTRINO發佈v0.400版本[3]，增加東北伊達子音源（從這一版本開始系統默認壓縮包只包括切蒲英的音源，其他音源需要另行下載），既有音源品質改善，NSF提升採樣率（24khz->32khz）
- 2020年11月11日
NEUTRINO發佈0.411版本，再次提升採樣率（32khz->48khz），優化高頻噪音，提高質量優化時序
- 2020年12月09日
NEUTRINO發佈0.411版本
- 2020年12月24日
NEUTRINO發佈0.412版本，增加音源（Merrow）[4]
- 2021年01月29日
NEUTRINO發佈0.422版本，macOS（Apple Silicon）重新兼容
- 2021年03月29日
NEUTRINO發佈0.430版本，呼吸聲優化
- 2021年04月21日
小岩井小鳥錄製了50首歌曲，交付給大學開放研究[5]，將在NEUTRINO作為SEVEN出道
- 2021年04月23日
NEUTRINO發佈0.431版本，增加音源（NAKUMO）[6]
- 2021年06月21日
面向贊助者的東北俊子音源公開
- 2021年07月05日
東北俊子音源完全公開
- 2021年07月05日
SEVEN音源完全公開[7]
- 2021年10月01日
NEUTRINO發佈0.500Beta版本，更新了所有的聲庫，並不再兼容0.431之前版本的聲庫
使用方法（Google Colab）
另存為Google Drive，並在Colab上掛載，運行即可[8][9]
使用方法（Windows）
（多人正在開發分支，詳情見官方推特相關）
首先需要用制譜軟件（如自由軟件MuseScore）來創建一個樂譜文件並加上歌詞。注意，呼吸符號（∨）有着重要的意義，把呼吸符號和促音「っ」疊放的話，會更容易發出穩定的聲音。還有，四分以下的休止符要儘可能少一些。歌詞用全形平假名、片假名輸入，一個音符最好只輸入一個元音。
然後導出MusicXML文件，將其拖入NEUTRINO\score\musicxml文件夾中之後，返回NEUTRINO根目錄，用記事本打開Run.bat，將set BASENAME=之後的文字改成導出的MusicXML的文件名，將set ModelDir=後改成欲使用的歌手，之後保存退出，再直接運行Run.bat，耐心等候，當命令行窗口自動關閉後，便可在Output文件夾中找到合成出的WAV文件。
最後再將導出的文件用根據所需在第三方軟件（如WaveSurfer、Melodyne）中進行修音以及其他調整。
運行要求
由於是深度學習應用，推薦使用搭載RTX顯卡的計算機配置
或直接使用google colab版本
相關連結
- ↑ SNACHI. Version.0.3系アップデート. NEUTRINO. 2020-07-07 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ 東北ずん子. 東北イタコは歌いたい！しゃべりたい！東北イタコ音聲合成データベース製作プロジェクト. greenfunding.jp. 2020-07-07 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ SNACHI. Version.0.4系アップデート. NEUTRINO. 2020-07-04 [引用時間: 2020-07-07]. （原始內容存檔於2020-07-07）.
- ↑ SNACHI. イラスト·設定資料. NEUTRINO. 2021-07-04 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ 藤本健. 小岩井ことりさん作詞·作曲·歌唱のDB公開で、AI歌聲合成の民主化へ躍進。NEUTRINOの新キャラクタ『No.7』がリリースへ. DTMステーション. 2021-04-21 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ SNACHI. Version.0.4系アップデート. NEUTRINO. 2021-07-04 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
歌聲ライブラリ（ナクモ）を追加しました。
- ↑ 藤本健. 小岩井ことりさんの歌聲を人工知能で完全に實現!? 本人も自分そのものと認めるソフト完成への裏舞台. DTMステーション. 2021-07-07 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ SNACHI. オンライン版の使い方. NEUTRINO. 2021-03-28 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.
- ↑ 木三聿. 如何使用NEUTRINO軟件v0.2？. 知乎. 2020-04-29 [引用時間: 2021-07-07]. （原始內容存檔於2021-07-07）.