只需1 分鐘,這個網站用 AI 分離歌曲的人聲、伴奏和樂器聲

2020-12-24 騰訊網

整理 | Just

疫情期間,在家待著閒來無事,一些技術人員就喜歡以技術的方式找點樂子,順帶賺錢最好了。

將歌曲中的人聲和樂器聲分離是一件讓想使用音樂伴奏的人頭疼的事情,傳統的音樂製作軟體使用門檻較高,處理起來不光費時而且效果不一定好。

糰子DanGo.ai(https://dango.ai/)——微博網友@無吔學生近期利用AI技術做的這個能分離音頻軌道的網站火了。

在音樂分離這一領域,實際上已經有一些免費的AI工具。比如,由法國音樂流媒體服務公司Deezer為研究目的而開發的Spleeter開源工具,只需要提供一個音頻文件,然後Spleeter就會將它分成兩個、四個或五個獨立的音軌,非常有用。

糰子DanGo.ai就是基於Spleeter開源工具做的。利用AI技術並通過上千首歌曲數據的訓練,用戶只需要上傳歌曲,等待1分鐘,目前就可以提取歌曲中的伴奏、人聲、鋼琴、貝斯、鼓點等多音軌壓縮文件,效果要好於Au或者GoldWave之類的傳統音頻處理軟體。

@無吔學生表示,這是他禿了一個月頭的成果。

據網站作者介紹。糰子主要由基於MIT協議的開源項目Spleeter製作的,同時在其之上增加了一些功能魔改使效率與音質得到提升。糰子基於深度神經網絡(DNN)實現的音軌分離所誕生的人工智慧,它使用Python/Tensorflow開發。

那麼,糰子 DanGo.ai 與傳統的音樂分離軟體有什麼不同?

一般而言,傳統音樂分離軟體所謂的「消音」一般是簡單的帶阻濾波,用人話說就是把人聲所在的頻率直接暴力擦除,這就會導致消音後的歌曲變得特別「糊」——表現為鼓點、某些樂器的消失。作者解釋,這是因為人聲會和某些相同頻率的樂器重疊,單純的摳除這個頻率,不光會消除人聲,也會消除在這個頻率裡的樂器。而根據歌曲的不同,人聲/和聲所在的頻率也並非固定,這就導致提取出的伴奏不但效果糟糕,而且仍然帶著部分殘餘的人聲。

「當然,也有一些人發現,歌曲中的人聲錄音一般是單聲道的,而歌曲的樂器未必是這樣。於是人們也嘗試使用左右聲道「相減」(如Au中的中置聲道提取器)來提取伴奏或人聲。但是提取的效果基本仍然很差,因為無法保證樂器不是多聲道的,也無法保證人聲是否被混音師加了後期處理效果器而變成多聲道,所以它並不適合多數歌曲(尤其是現代音樂)。」

作者稱,糰子DanGo.ai 則不用考慮上述讓人心智損傷的事情。該軟體用了大量的音樂數據進行訓練,「我們可以把糰子想像成一個大腦——我們讓它聽了非常多的歌曲用來「訓練」它。現在它非常懂得歌曲,理解歌曲中各個樂器的存在,也能謹慎細心的剝離開人聲和伴奏,從而最大程度的保留各個音軌的質量。」

目前,用戶可用糰子 DanGo.ai 網站試聽5首分離的多音軌歌曲。當然,如果你想要更多高質量的生成歌曲還需付費,付費歌曲會保留30天的歌曲文件讓用戶下載。

最後給出作者的製作網站的一個demo視頻,可以聽出歌曲不同多音軌的效果,你感受下?

相關焦點

  • 從歌曲中提取人聲與伴奏,並單獨分離各種樂器的聲音丨Moises
    將音樂做細部的分離,像是僅保留伴奏、僅保留人聲、僅保留某項樂器聲等,
  • 一篇搞定提取伴奏,人聲分離
    希望星選 讀完需要 3 分鐘 速讀僅需1分鐘 不斷有小夥伴私信星哥詢問如何提取伴奏,消除人聲 所以,今天給大家說說如何優雅地消除人聲
  • 哪裡下伴奏?怎麼提取伴奏?怎麼消除人聲?看完這一篇你別說你還不會
    >國內比較知名的音樂網站,上面有很多伴奏可以免費下載,一些小眾歌曲在上面也能找到。這個網站還是很不錯的,聚合搜索多個伴奏網站的資源糰子網址:https://dango.ai/最後這個網站的話,就太貴了:6 元/首;27元/5首;50元/10首。阿虛也就沒測試具體轉換效果如何(就這網站還不少人在推薦)
  • 歌曲去人聲提伴奏不用愁
    作為一名班主任老師,或者一名音樂老師,可能最頭疼的就是每學期的文藝演出,什么元旦啊,六一啊,每個班級都要出一個節目,有時候好不容易找到了一個中意的歌曲,讓孩子排練也差不多了,可到快演出時在網上怎麼也找不到伴奏,在網上找到很多歌曲去人聲提伴奏的軟體用下來效果也不是很好
  • 免費在線快速消人聲、提取人聲、歌曲分解工具
    官網:https://www.edityouraudio.com/vocal-remover如何在一首歌中消人聲?歡迎來到edityouraudio.com。在這裡我們能幫您把歌曲中的人聲消除。而且是免費的!
  • 找伴奏不困難,「愛剪音」2分鐘搞定無損伴奏
    年會的時候為了唱首歌到處找伴奏的場景還記得麼?想模仿喜歡的歌手的聲音,卻被複雜的伴奏或雜音給阻擋了?做自媒體短視頻,到處找好聽的背景音樂是不是浪費了我們太多時間?如果您有上述問題,我推薦您使用【愛剪音】。一款在線分離人聲和伴奏的網站。
  • Neural Mix Pro for mac(提取人聲/歌曲伴奏)
    Neural Mix Pro for mac是一款非常強大的音頻後期編輯軟體,可以幫助您提取任何歌曲的節拍,樂器和人聲部分,Neural Mix Pro通過人工智慧的即時音樂分離技術與Neural Mix技術使您可以隔離,分層和交換軌道中的主元素– 例如,將人聲從一個軌道分層到另一個軌道,交換和聲或隔離鼓
  • 2種消除人聲提取背景音樂的方法
    做混剪的小夥伴經常會遇到這樣的問題——怎樣把原視頻的臺詞和背景音樂分離,把臺詞/背景音樂單獨提取呢
  • 如何從歌曲提取人聲或者伴奏,給歌曲添加和聲,一步預設快速完成
    在我們平時聽歌的歌曲中人聲和伴奏以及伴唱都是混合在一起的,但是在歌曲合成之前我們都是分軌進行錄音的,比如:樂器的軌道、人聲演唱的軌道、以及和聲等聲音的軌道,所以我們在合成歌曲之前對各個聲軌進行修改時非常方便的,但是很多情況下我們面臨的是聲音源都是混合的,並沒有完整原始軌道的資源,比如我們網絡下載的歌曲
  • 製作消伴奏人聲--效果試聽
    1,NEW!
  • 推薦丨在線AI分離音樂和人聲、影視網站、音樂下載神器、背景音樂下載、立體特效圖【內含極品影視福利軟體丨24小時刪】
    支持網頁web在線AI分離音樂和人聲
  • Djay Pro使用AI即時將歌曲轉換為無伴奏和器樂
    在這一點上,人工智慧和機器學習似乎是流行語,它們的提及分散在新聞稿和新產品發布中。無處不在可能使我們感到麻木,但至少正在發生一些酷而怪異的事情。 Algoriddim在幾年前利用AI對其djay Pro軟體進行了更新,從而改善了其自動混音功能。
  • 關於伴奏的選擇,伴奏的種類說明
    什麼是消音伴奏?其實消音伴奏是最次的選擇,音質和質量並不好 ,在大家選擇伴奏的時候 最後再考慮使用消音伴奏,雖然消音技術這幾年一直都有提高,包括這兩年比較流行的智能AI消音 人聲分離技術,也是從國外github論壇發布的,這種技術有個比較大的優點 就是人聲分離後 伴奏部分比較好的保留了低音 並且連和聲都可以消除。
  • 分離視頻聲道——臺詞人聲、背景音樂隨你用
    我們在製作影視混剪時,常常面臨這樣的問題——如何將人物臺詞和背景音樂分離開?
  • djay Pro AI可以分離出鼓、和聲與人聲
    這個願望在今天成為了現實,Algoriddim公司發布的djay Pro AI中將包含Neural Mix技術,允許DJ實時分離出節拍、樂器和人聲。Neural Mix的AI技術和智能混音djay AI Pro是對djay iOS App的更新升級,加入了基於人工智慧技術的Neural Mix,將允許隔離、分層和交換音軌中的主幹部分。
  • 《他只是經過》伴奏 h3R3 Felix Bennett 定製伴奏 無人聲純伴奏
    《他只是經過》伴奏 h3R3 Felix Bennett 定製伴奏 無人聲純伴奏如您需要此歌曲的無損立體聲伴奏請您複製《音樂伴奏吧》並且重新搜索搜索以後即可看到為您提供的高音質伴奏《他只是經過》這首歌的副歌是邀請我的兄弟 高旭 來獻唱,因為相比較我的聲線
  • 用Cool Edit Pro來製作伴奏帶的方法(附視頻:消聲、變調、變速
    教你用CE消除歌曲中的原唱最近有很多朋友在問怎麼才能把原唱裡的聲音給消除。接下來我就從基礎的開始來講,有耐心的朋友細心的讀完,或許對你會有很大的幫助。 一、為什麼能消原唱 假設我們的電腦裡有一個音頻文件,不管是MP3、WMA或是WAV都好,通常一個音頻文件就是一首歌曲,我們用耳朵來聽時,通常一首歌中有原唱、伴奏。而原唱的特徵大致分為兩種:1、人聲的聲像位置在整個聲場的中央(左右聲道平衡分布);2、聲音頻率集中在中頻和高頻部分。
  • AI唱歌不僅中英文無壓力,還會粵語!微軟聯手浙大研發出DeepSinger
    我們知道,歌聲不同於正常人的語音,高低音轉換,BGM的配合,有著更複雜的模式和節奏,這對於AI來說並不是一件容易的事兒。不過,最近一個研究團隊,卻此基礎上挑戰了更高階的AI技術——生成多種語言風格的AI系統。據了解,這個團隊成員正是來自浙江大學和微軟研究院的六名研究員,他們研發出了一款名為DeepSinger的AI模型,可以演唱中文、英文,甚至粵語歌曲。
  • 《Vocal Play》:純人聲無伴奏的「阿卡貝拉」綜藝秀
    節目聚焦「阿卡貝拉」(A cappella:即無伴奏合唱)這一表演形式,不依靠樂器,只用人聲完成舞臺呈現。  製作團隊將出演者劃分為A、B兩大陣營進行定向選擇,最終1位製作人將帶領4組隊伍一起合作。目前播出兩期,完成了A組人員挑選與創意舞臺表演。
  • 如何用Cool Edit Pro製作完美伴奏 ?
    你可以用聲音來「繪」制:音調、歌曲的一部分、聲音、弦樂、顫音、噪音或是調整靜音。而且它還提供有多種特效為你的作品增色:放大、降低噪音、壓縮、擴展、回聲、失真、延遲等。製作伴奏——教你用CE消除歌曲中的原唱 最近有很多朋友在問怎麼才能把原唱裡的聲音給消除。這裡我整理了下,給大家系統、仔細的介紹下怎麼用Cool Edit Pro來製作伴奏帶的方法。