喜馬拉雅公布過一則數據,其用單田芳AI合成音制作的TTS(語音合成)專輯總播放量已經破億。這一數據,喻示著在喜馬拉雅“UGC+PGC+PUGC”內容生態(tài)之外,又多了一個AIGC的內容生態(tài)。
事實上,音頻行業(yè)其實一直存在著許多問題,比如單個創(chuàng)作者創(chuàng)作形式單一、生產周期長、內容成本高等等。而為了突破這些問題,音頻行業(yè)一直也都在做各種嘗試。比如,喜馬拉雅最近上線了喜韻音坊創(chuàng)作者平臺,試圖用AI為創(chuàng)作者賦能的方式,以技術手段來解決行業(yè)沉疴。恰好也是今年,喜馬拉雅的兩項智能語音技術相關論文被2022年國際音頻、語音與信號處理會議(ICASSP)收錄。
喜馬拉雅創(chuàng)始人兼CEO余建軍之前也提過,喜馬拉雅是一家科技驅動的內容公司,科技是手段,文化是目的。那么,在這次喜馬拉雅以通過科技賦能文化的過程中,又是如何改變音頻行業(yè)的呢?配音小說用AI工具一天更新上百集“以前從來沒有想過,音頻節(jié)目可以一天更新上百集?!边@是喜馬拉雅的音頻主播“CV千索”用過喜韻音坊之后的感嘆。
喜韻音坊是喜馬拉雅上的一個創(chuàng)作者平臺,它通過TTS技術幫助主播實現與AI共同創(chuàng)作音頻節(jié)目?!癈V千索”就是通過這項技術在喜馬拉雅上創(chuàng)作了有聲書《史上最強撿漏王》,上線一個多月,播放量已經超過300萬。工欲善其事必先利其器,創(chuàng)作者有了AI工具,就可以大幅提升創(chuàng)作效率,進而提升收益。
但要打造一個好工具也并非易事,喜韻音坊對于喜馬拉雅來說,就如同剪映之于抖音,但音頻制作本身又有不同的技術難點?!癟TS”是將輸入的文本轉換為語音的技術統(tǒng)稱,在許多場景中都有應用。但在不少場景中,比如在電話客服、機器人等身上,經常會有冷冰冰的“機器音”讓人非?!俺鰬颉?。但在音頻節(jié)目中,我們需要聲音有情緒、有溫度:聽童話故事的時候,聲音俏皮可愛;講軍旅故事的聲音,鏗鏘有力;聽歷史故事,又需要它深沉雄渾。
喜馬拉雅智能語音實驗室自主設計了單獨的韻律提取模塊,并將其融入到HiTTS技術框架中。而針對單老評書中區(qū)別于標準普通話的發(fā)音,團隊還設計了口音模塊對這些特殊發(fā)音進行標注,使得AI合成音能夠原汁原味地還原出老味道。由于技術上的創(chuàng)新,喜馬拉雅用TTS合成語音所制作的AIGC專輯幾乎能夠以假亂真。
如今,喜馬拉雅多情感、多風格、多語種聲音的TTS技術模型已經廣泛被運用于評書、新聞、小說、財經等多種類型AIGC內容的制作中。