Dreamtonics Synthesizer V / SynthV 人聲合成軟體簡易心得

2023年我注意到Synthesizer V這個人聲合成軟體的當下如獲至寶，
這代表我過去寫的歌終於能夠以最完整的面貌呈現了。
剛入門摸索Synthesizer V的心得是：

• 不要在錄音軟體 (DAW) 上開啟Synthesizer V，
  最好是先用Standalone模式匯出Wav檔再丟進DAW內。
  Synthesizer V在Ableton Live 11內各種卡頓、斷音、跳音…等，
  很像Buffer不夠才會出現的狀況一應俱全，
  明明Buffer是44.1 kHz / 2048 Samples，DAW內顯示CPU使用率也才12~20%，
  所以可以排除是硬體問題而導向Synthesizer V相容性不佳。


• 跟Ableton Live相比，操作並不是很直覺。
  Piano roll的縮小放大、上下左右移動不是很便利；
  沒有事先弄好Midi的話，在Synthesizer V內鍵入音符是件苦差事；
  (我覺得我已經被Ableton寵壞了…但也可見Ableton的介面真的簡單易用)


• 沒有任何操作說明及參數解說。
  如果不想弄PDF Manual，至少學學Ableton Live弄個可關閉的簡易解說小視窗，
  滑鼠游標放在某個功能上就會顯示說明。
  我最初幾天是一邊摸索一邊用手機查網路，猶如瞎子摸象，對新手非常不友善、也沒有效率。


• Synthesizer V內建的Gender功能意外地好用。
  我這次買了三個音色庫：Mo Chen、Qung Su、Weina，
  結果男聲Mo Chen配唱我的樂曲聽起來十分微妙，
  反而是Qung Su、Weina轉換性別後的聲音比較合。
  另外、Weina實際的聲音聽起來很軟，如果不是有轉換性別功能，我搞不好沒地方用…


• Synthesizer V原廠網站購買要額外加5%營業稅，但是會開發票…
  希望發票能夠中獎補貼一下~
  如果要便宜的話DLsite還是目前首選，雖然音色庫不算豐富，但常有特價促銷。


• 不曉得是我沒找到用法還是本來就不支援，
  Synthesizer V在Piano roll裡剪下/複製音符時不會一併將Automation (Parameters) 帶走，
  Automation另外複製也就罷了，但剪下複製的時間軸卻又不會跟音符同步，
  這實在很麻煩…


• Automation沒有可觀測參考的數值。
  你得要用肉眼去辨識判斷Automation的量，這在音量控制上是個超級大麻煩。
  我這次匯出Wav進DAW才發現Verse 1跟Verse 2音量有微妙的差異，
  回頭去Synthesizer V內查才發現兩段音量Automation沒有完全校準，
  因為兩段Automation曲線不是完全一樣、不能用複製貼上，
  只好用老花眼盯著螢幕慢慢對、慢慢拉。


• 最糟糕最惡劣的問題。
  我不知道在其他DAW上會不會發生、但Synthesizer V 在Ableton Live 11內會"自動儲存SVP檔案"，
  這意味著只要在DAW內亂調、甚至刪除Synthesizer V內的音符，
  就算你沒有儲存當下的DAW Project跟Synthesizer V SVP，
  Synthesizer V仍會自動儲存最後的工作狀態，當你再次開啟DAW時就會發現檔案不一樣了，
  事實上我有幾次以為沒有儲存就沒事而做各種調整測試，結果重開Project才發現豬羊變色!!
  
  幸好檔案每天都有備份才沒有做白工，但也深感Synthesizer V這個極度惡劣的功能只會造成使用者的麻煩。
  不是很確定它自動儲存的時機，但推測是在DAW的Project要關閉時，
  而且不管你有沒有選在Host內儲存它都會自動儲存最後的工作狀態。
  
  建議各位在DAW內開啟Synthesizer V時最好先備份當下的SVP檔案，
  以免一個疏忽、費心耗時調整的檔案就被"自動儲存"給洗掉。

Synthesizer V Weina演唱。
使用Gender功能把中文女聲Weina變成男聲，效果不錯，聲音還有點像我之前的主唱。
歌詞打上去其實表現就差不多了，
有些抑揚頓挫雖不合意，但不想深入研究怎麼調整就睜一只眼閉一隻眼，
所以我幾乎沒有什麼調整，也沒有太多心力慢慢調整，科技進步真好。

我的Synthesizer V/ SynthV 原創樂曲播放清單：
https://youtube.com/playlist?list=PL3pCQ6za0abHc--ecDnDU_WZUpElIbvLg&si=N2d40s3LP3nZrV4-


==============================================================================

2024/01/30更新
這邊講一下兩個我遇到的狀況，
不確定是本來Synthesizer V程式設計的問題，還是我漏掉了什麼?
但總之、這兩個狀況很蠢：

• 複製貼上時若有音符重複，Synthesizer V會將新的音符"覆蓋"在舊音符上、而不是取代。
  覆蓋的意思就是系統會判別成兩個獨立的音符在同一個位置上，
  基於Synthesizer V若有音符重疊就無法發聲的設計，
  意即你必須先刪除原有音符才能貼上新音符…這什麼史前時代的設計?
  
  萬一你貼上後沒注意就紀錄的話，
  要解決無聲現象、你就只能手動"一個一個"慢慢點重疊在上方的音符後刪掉，
  還不能Ctrl + A再按Delete刪除…


• 在Ableton Live 11內以Plugin使用時，
  Synthesizer V無法正確地辨別Tempo automation。
  我現在正在處理的樂曲有一段速度是從BPM 74加倍變成148，
  然後很神奇地Synthesizer V在該段落不是繼續往下播放、而是迴圈跳到前面某個小節，
  就算避開加速的部分、直接從同樣BPM 74的下一段開始播放，
  Synthesizer V卻又比樂曲快了十幾個小節…這…
  解決方式就是不要在DAW內使用Synthesizer V...爛死了。

弄歌弄到一半不只主唱莫名迴圈對不準小節位置、還突然全部沒聲音，搞得我火都上來了…

==============================================================================

2024/02/06更新
這邊補充一個我剛剛才發現的兩個狀況。

• 前面提到Synthesizer V內建的性別轉換功能 Gender 其實有個頗為嚴重的問題：
  使用Gender轉換後會在不特定字詞的發聲時伴隨類似機械人聲或者像是蛙鳴的聲音，
  呃~聽起來就像星際大戰的Darth Vader那樣，
  因為這個聲音會被咬字壓過去，所以不注意聽不會發現，
  但轉成Wav後單獨聽就可以聽得相當清楚…
  沒用Gender就不會出現，但偏偏現在只有Gender後的聲音最適合我的樂曲…頭痛了。
  
  總之、目前有需要使用Gender功能的話，最好先做好心理準備，
  雖然混在樂器中就沒有那麼明顯，但畢竟還是存在。


• 另一個就是匯出Wav聲音會變，就算是匯出32 bit floating 也一樣。

==============================================================================

2024/02/14更新
前一段提到Synthesizer V會不特定出現機械人聲 Darth Vader voice的問題，
可以透過AI Retake暫時處理：

• 點選有問題的句子，使用AI Retake。
  再把AI Retake的新句子刪掉，或者用Undo (Ctrl + Z) 回復上一動。
  原本有機械人聲 Darth Vader voice問題的句子就會變得正常些。

這個問題可能是聲音合成引擎的瑕疵，
而且只要一旦句子在合成過程中出現機械人聲 Darth Vader voice，
就算重新讀取SVP檔案、或者用AI Retake"以外"的調整，這個聲音都不會消失，
只有用AI Retake讓聲音合成引擎主動重新計算才會修正。
即便用AI Retake處理過在極少部分字尾還是會有一點點機械人聲 Darth Vader voice，
但基本上不是非常明顯、就算Wav單獨拉出來聽也不容易發覺。

機械人聲 Darth Vader voice的成因可能跟Gender功能無關，
我個人推測是同一個SVP檔修改越多次越容易出現，
因為我回去聽幾乎沒有什麼調整的第一首歌主唱音軌時，
發現它幾乎沒有機械人聲 Darth Vader voice，三首歌裡面修改最多次的歌曲則剛好相反。
大概就是這樣，在原廠沒有修改這個問題之前，
各位如果有遇到機械人聲 Darth Vader voice，可以試試上面的方法。

…過去已經匯出上傳的三首成品我不想再重弄了，只是虐待自己而已…

另外、今天又發現一個很罕見的瑕疵，
不知道什麼原因在固定句子前方會出現該句字首的發音，
如：「曾經」這句話的一個小節前會莫名出現一兩次"cé"，好像沒有有效的解決辦法?

…為啥什麼怪問題都給我遇到…

==============================================================================

2024/03/19更新
已經用Synthesizer V製作了五首歌，
但直到這次的第六首才真的了解「' = cl」喉塞音 glottal stop的基本用法，
像我這樣沒有研究過發聲的人可能搞不懂什麼是glottal stop，
其實在Synthesizer V上的用途就是所謂的斷音、頓音或促音，
基本用法：

• 兩個(單)字的詞彙中在後者的字首鍵入「'」，如「唱'歌」，
  那麼Synthesizer V就會在「唱」與「歌」中間斷開停頓一下。
  (呼吸聲「br」也可以在字首放「'」)


• 在單字後方放一個只有鍵入「'」的音符，
  那麼在「'」前方的字就可以做出嘎然而止的停頓，
  「'」的音符長度越短，前方字彙到突然停止前的持續時間就越長。
  假設某字的長度有4分音符一拍，後方的「'」若為一拍時，
  那麼該字可能在8分音符甚至更短就停止發聲，
  反之、「'」縮到128分音符的話，該字就可能會盡量拖到拍長結束前才停止。

下面的原創曲就用了不少這個斷音技巧，
不僅用來斷音、也拿來調整想要的發聲長度，如歌詞中的：
漫長追"求"、停滯的時間開始轉動、燃燒著"我"、冷卻的鮮"血"、千錘百"鍊"、赤煉之"劍"...etc。

歌曲及歌詞解說：
https://chichengjuanhe.blogspot.com/2015/05/burning-sword.html


==============================================================================

2024/04/29更新
Synthesizer V節奏轉換 = 變速機制有重大瑕疵!!
版本是目前最新的1.11.0。
我目前處理的歌曲速度變化是BPM 60 > 120 > 60 > 210，
前面三個變化都正常，但切換成210後整個程式包含樂曲及人聲就會產生約170 ms左右的誤差，
不管在將背景樂曲匯進Synthesizer V程式內、還是人聲匯出Wav進DAW檢查都如此。

為了驗證、
我用之前已經處理好的另一首74 > 148 > 74變速曲來反覆修改再多次匯出Wav確認，
基本上誤差都在不影響聽感的6 ~ 12 ms範圍內，
所以我推測這個瑕疵很大機率是Synthesizer V對200 BPM以上的變速不精準所導致。
解決方法就是不要變速，不同速度的歌詞分開成一段一段不同Project處理…爛死了。

然後就是Ableton Live 11不能開Synthesizer V的ARA plugin，
Ableton Live直接崩潰，但Ableton本來就不支援，這倒還好。

另外我很早之前就提過的機械人聲 Darth Vader voice瑕疵仍然沒有解決…別鬧了呀…

順帶一提、
Synthesizer V 1.11.0這版的拍子起始點會抓得非常精準，幾乎都是準拍才會開始發聲，
上一版剛好相反，常常出現拍子前大概6 ~ 12 ms就發聲。
我覺得兩者各有優缺點，這部分就看各人喜好決定要不要在DAW內微調，我懶得調。

==============================================================================

2024/09/18更新
繼續補充我新遇到的Bug，每個Bug都很惡劣，程式版本是1.11.2。

• Midi突然沒有辦法匯入正確的拍子。
  一律都是4/4，其餘3/4、5/4無法正常匯入需手動鍵入。
• Windows 11 Home下使用新微軟注音及日文輸入法輸入歌詞無法顯示選字選單視窗。

天呀…我把舊版安裝檔都刪掉了才遇到這堆問題，
Synthesizer V為什麼可以越改越多毛病。