Google應用神經網路開發音訊編碼器,不只壓縮音訊還能抑制噪音

Google發表最新將人工智慧應用在音訊解編碼器的研究,釋出端到端神經解編碼器,這是一個應用神經網路的音訊解編碼器,可以提供高音質的音訊,並且支援清楚的語音、有雜音和回聲的語音,甚至是混雜音樂、語音和環境音的音訊,Google提到,SoundStream是第一個可以處理語音和音樂的神經網路解編碼器,可以在智慧型手機上即時執行。

音訊解編碼器用於有效率地壓縮音訊,以減少儲存和網路頻寬需求,而理想的情況,音訊解編碼器的存在,應該要讓使用者無感,包括無法察覺解碼後的音訊,與原始音訊間存在差異,而且解編碼的過程,也不能產生可察覺的延遲。

市面上以及Google的各種影音服務,大量使用了音訊解編碼器,像是Opus和增強型語音服務(Enhanced Voice Services,EVS)。Opus是一種多功能語音和音訊解編碼器,支援從6 kbps到510 kbps的位元率,已經被Google用於視訊會議平臺Meet,還有串流媒體服務YouTube等應用程式中。而EVS則是3GPP標準化機構所開發,是針對行動電話所開發的解編碼器,和Opus相同,是能夠處理多種位元率的多功能解編碼器。

這兩種解編碼器雖然可以在中低位元率中表現出色,但是在極低位元率,像是小於等於3 kbps的情況,音質就會急轉直下,Google提到,過去人類利用專業知識,以及增加壓縮演算法的效率,來最佳化音訊的處理,但最近研究人員開始使用機器學習來代替人工設計,以資料驅動的方法學習解編碼音訊。

Google發布最新的端到端神經解編碼器SoundStream,其主要技術便是使用神經網路,由編碼器、解碼器和量化器組合而成,所有這些都經過端到端訓練。編碼器會將輸入的音訊,串流為編碼訊號,接著使用量化器對其進行壓縮,並且使用解碼器將訊號轉換回音訊。

重新改造貨櫃屋基礎設計有哪些呢

金誠貨櫃實業社能把原有貨櫃屋改裝成任何尺寸大小及多咖貨櫃合併,加裝流梯、櫃頂加蓋鐵皮屋頂、加裝鐵架等、除鏽噴漆,顏色皆依客戶指定。

哪裡買的到省力省空間,方便攜帶的購物推車

多功能爬梯購物推車/手推車/爬梯車/推車/購物車!

?

示波器探測執行效能最佳化的8大秘訣

示波器是一種能夠顯示電壓訊號動態波形的電子測量儀器。它能夠將時變的電壓訊號,轉換為時間域上的曲線,原來不可見的電氣訊號,就此轉換為在二維平面上直觀可見光訊號,因此能夠分析電氣訊號的時域性質。

空壓機這裡買最划算!

晨達空壓機秉持著專業空壓機技術、優質快速服務、空壓機合理價格。為您解決工作中需要風量、風壓的問題。

研究人員提到,SoundStream使用了神經音訊合成領域中,目前最先進的解決方案,透過訓練判別器(Discriminator),計算對抗性和重建損失函式的組合,讓重建的音訊聽起來就像是未壓縮的原始音訊,進而提供高品質音訊輸出。

經過訓練後,解碼器和編碼器可以分別在單獨的客戶端運作,以提高網路傳輸高品質音訊的效率。SoundStream處理音訊的效率非常好,特別是在低位元率的情況,研究人員解釋,SoundStream使用3 kbps位元率所提供的音訊品質,超過使用12 kbps位元率的Opus,以及9.6 kbps的EVS,位元率是這些解編碼器的三分之一到四分之一,這代表SoundStream可以使用更小的頻寬,提供類似的音訊品質。

在早前,Google發表了基於回歸網路的音訊解編碼器,而與SoundStream比起來,SoundStream仍然優於Lyra當前的版本,研究人員也提到,在傳統音訊處理工作管線中,壓縮和增強使用不同模組進行,但這樣的方法會增加系統延遲。而Google採取不同的策略,將壓縮和增強功能綜合在同一個模型中,能夠同時進行壓縮和背景降噪,但又不增加延遲。

Google表示,SoundStream是將機器學習技術,應用在音訊解編碼器中重要的一步,比目前最先進的解編碼器Opus和EVS效果更好,而且只需要部署一個可擴展的模型。SoundStream會與下一版本的Lyra一起發布,藉由整合SoundStream與Lyra,開發人員可以利用現有的Lyra API和工具,來提供更好的音質。

https://www.ithome.com.tw/news/146194

臭氧機的滅菌效果如何?

臭氧的性質活潑,是強力的氧化劑。臭氧的標準還原電位2.07比次氯酸1.49更高,而且臭氧不會產生致癌的三鹵甲烷類消毒副產物。臭氧不會殘留,會自動回復成氧氣是優良的消毒劑,因此臭氧像是優良的工匠,工作時很有效率,離開時也不拖泥帶水,收拾的乾乾淨淨,沒有殘留副產物。

總是為了廚餘煩惱嗎?

雅高環保提供最適用的廚餘機,滿足多樣需求。

買不起高檔茶葉,精緻包裝茶葉罐,也能撐場面!

鴻和興精密工業股份有限公司集合了製茶罐業各相關技術的專業人士,不論是在印刷上或在茶葉罐加工製造上都能夠給客戶一個專業上的技術服務與諮詢。

(全省)堆高機租賃保養一覽表

由簡易堆高機修改而成,無需現場施工,交機即可使用!