只需1 分鐘,這個網站用 AI 分離歌曲的人聲、伴奏和樂器聲

2020-12-06 騰訊網

整理 | Just

疫情期間,在家待著閒來無事,一些技術人員就喜歡以技術的方式找點樂子,順帶賺錢最好了。

將歌曲中的人聲和樂器聲分離是一件讓想使用音樂伴奏的人頭疼的事情,傳統的音樂製作軟體使用門檻較高,處理起來不光費時而且效果不一定好。

糰子DanGo.ai(https://dango.ai/)——微博網友@無吔學生近期利用AI技術做的這個能分離音頻軌道的網站火了。

在音樂分離這一領域,實際上已經有一些免費的AI工具。比如,由法國音樂流媒體服務公司Deezer為研究目的而開發的Spleeter開源工具,只需要提供一個音頻文件,然後Spleeter就會將它分成兩個、四個或五個獨立的音軌,非常有用。

糰子DanGo.ai就是基於Spleeter開源工具做的。利用AI技術並通過上千首歌曲數據的訓練,用戶只需要上傳歌曲,等待1分鐘,目前就可以提取歌曲中的伴奏、人聲、鋼琴、貝斯、鼓點等多音軌壓縮文件,效果要好於Au或者GoldWave之類的傳統音頻處理軟體。

@無吔學生表示,這是他禿了一個月頭的成果。

據網站作者介紹。糰子主要由基於MIT協議的開源項目Spleeter製作的,同時在其之上增加了一些功能魔改使效率與音質得到提升。糰子基於深度神經網絡(DNN)實現的音軌分離所誕生的人工智慧,它使用Python/Tensorflow開發。

那麼,糰子 DanGo.ai 與傳統的音樂分離軟體有什麼不同?

一般而言,傳統音樂分離軟體所謂的「消音」一般是簡單的帶阻濾波,用人話說就是把人聲所在的頻率直接暴力擦除,這就會導致消音後的歌曲變得特別「糊」——表現為鼓點、某些樂器的消失。作者解釋,這是因為人聲會和某些相同頻率的樂器重疊,單純的摳除這個頻率,不光會消除人聲,也會消除在這個頻率裡的樂器。而根據歌曲的不同,人聲/和聲所在的頻率也並非固定,這就導致提取出的伴奏不但效果糟糕,而且仍然帶著部分殘餘的人聲。

「當然,也有一些人發現,歌曲中的人聲錄音一般是單聲道的,而歌曲的樂器未必是這樣。於是人們也嘗試使用左右聲道「相減」(如Au中的中置聲道提取器)來提取伴奏或人聲。但是提取的效果基本仍然很差,因為無法保證樂器不是多聲道的,也無法保證人聲是否被混音師加了後期處理效果器而變成多聲道,所以它並不適合多數歌曲(尤其是現代音樂)。」

作者稱,糰子DanGo.ai 則不用考慮上述讓人心智損傷的事情。該軟體用了大量的音樂數據進行訓練,「我們可以把糰子想像成一個大腦——我們讓它聽了非常多的歌曲用來「訓練」它。現在它非常懂得歌曲,理解歌曲中各個樂器的存在,也能謹慎細心的剝離開人聲和伴奏,從而最大程度的保留各個音軌的質量。」

目前,用戶可用糰子 DanGo.ai 網站試聽5首分離的多音軌歌曲。當然,如果你想要更多高質量的生成歌曲還需付費,付費歌曲會保留30天的歌曲文件讓用戶下載。

最後給出作者的製作網站的一個demo視頻,可以聽出歌曲不同多音軌的效果,你感受下?

—— 分享新聞,還能獲得積分兌換好禮哦 ——

相關焦點

  • 怎樣消除伴奏人聲?這個方法最簡單
    很多喜歡唱歌的小夥伴,常常因為找不到伴奏而苦惱,甚至還花錢買伴奏,特別不合適。其實消除伴奏人聲有很多方法,只是大部分都比較複雜,需要專業的軟體和技術才能實現。我們直接用酷狗音樂+隨心版人聲消除器就可以實現(隨心音頻工作室微博有提供具體安裝教程和下載),人聲消除器可以任意消除原唱歌曲伴奏人聲,只需一鍵點擊,原唱歌曲就能秒變伴奏,操作起來非常簡單。
  • 當把李健的歌伴奏和人聲分離來聽,是種什麼體驗?
    我們知道一首歌在歌手完成歌詞和作曲之後。錄音棚錄製一首歌非常的複雜,簡單可以理解成為兩大部分:樂隊錄製伴奏,和歌手錄製人聲。伴奏的錄製大部分時候是提前錄製,當然也有和歌手的人聲同時進行錄製的。比如演唱會或者音樂類節目。
  • 關於伴奏的選擇,伴奏的種類說明
    其實消音伴奏是最次的選擇,音質和質量並不好 ,在大家選擇伴奏的時候 最後再考慮使用消音伴奏,雖然消音技術這幾年一直都有提高,包括這兩年比較流行的智能AI消音 人聲分離技術,也是從國外github論壇發布的,這種技術有個比較大的優點 就是人聲分離後 伴奏部分比較好的保留了低音 並且連和聲都可以消除。
  • 混音技巧:通過EQ降低某樂器頻率使到跟人聲更和諧
    混音技巧:通過EQ降低某樂器頻率使到跟人聲更和諧有許多編曲的朋友偶爾也會錄製一下人聲,唱一下歌曲,當錄製完歌曲之後,儘管音準再好,是不是都有一種伴奏歸伴奏,人聲歸人聲的感覺呢?其實有這種感覺就很正常了,說明聽覺是進步的,那為什麼會有伴奏和人聲的分離感呢?說白了就是頻率問題,最常見的就是鋼琴或者吉他還有作為副旋律的長笛之類的樂器最容易跟人聲相同頻率。這個比喻就像一個臺上只有一個主角,那麼誰來做主角,聲樂曲的情況下肯定就是人聲是主角,那麼鋼琴吉他等樂器的頻率跟人聲起到衝突,那就是等於是配角在搗亂了,所以我們必須削弱配角的強度。這話就容易理解了吧。
  • Adobe Audition消除人聲留伴奏方法教程
    1. 雙擊運行Adobe Audition  2.導入一首有人聲的MP3音樂,右邊是MP3的音軌,雙擊音軌,全選,試聽人聲和伴奏的差別,相差很大,就只需要重複下面一次人聲移除的工作,如果相差不大,就需要多次移除  3.
  • 酷狗音樂如何下載歌曲伴奏?下載歌曲伴奏方法介紹
    有些小夥伴想要在酷狗音樂中下載歌曲的伴奏,但是不知道該怎麼搜索和下載。那麼如何在酷狗音樂APP中下載歌曲伴奏呢?還不知道的小夥伴就跟小編一起來看看吧!酷狗音樂系列軟體最新版本下載酷狗音樂播放器軟體版本:8.1.51 官方正式版影音工具立即查看酷狗音樂軟體版本:8.9.6Android軟體立即查看酷狗音樂下載音樂及伴奏方法: 1、首先,下載最新版的手機酷狗音樂,在主界面點擊搜索欄,輸入想要查找的內容;
  • AI唱歌不僅中英文無壓力,還會粵語!微軟聯手浙大研發出DeepSinger
    我們知道,歌聲不同於正常人的語音,高低音轉換,BGM的配合,有著更複雜的模式和節奏,這對於AI來說並不是一件容易的事兒。不過,最近一個研究團隊,卻此基礎上挑戰了更高階的AI技術——生成多種語言風格的AI系統。據了解,這個團隊成員正是來自浙江大學和微軟研究院的六名研究員,他們研發出了一款名為DeepSinger的AI模型,可以演唱中文、英文,甚至粵語歌曲。
  • 快手直播唱歌用什麼播放器最好 放歌曲伴奏推薦
    那麼如果我們自己去直播的話,想要跟他們一樣的效果的話,直播唱歌用什麼播放器最好呢?軟體放歌曲伴奏最好用什麼呢? 一般來說都是用其他唱歌的軟體比如網易雲或者酷狗音樂播放我們需要的伴奏。 當然了,快手app本身也可以放伴奏。
  • 淺談音樂裡的人聲
    原始的節奏呼號聲、骸骨和石頭的敲擊聲,甚至任意兩種自然界可以找到的東西,相互接觸所產生的聲音,都成了一種最原始的音樂形態,噪音。(和樂音相對)人聲,從具有審美性的音樂誕生開始,就是它的一部分。走過古典音樂源頭的「格裡高利聖詠」(一種沒有樂器伴奏、只由人聲演唱的宗教音樂),也走過現代流行音樂源頭的「田間呼喊」(19世紀時,美國南部底層黑人間盛行的歌曲形式)。
  • 周深 化身孤島的 伴奏 原版伴奏 無損定製BEAT
    周深 化身孤島的 伴奏 原版伴奏 無損定製BEAT如果您需要該音樂的高品質無人聲純伴奏請複製<PACETOP音樂伴奏>並重新搜素搜索以後即可看到為您提供的高品質伴奏你眼中有春與秋  勝過我見過愛過 的一切山川與河流 過盡千帆,
  • 抖音唱歌用什麼軟體好 主播常用伴奏歌曲軟體揭秘
    18183首頁 抖音唱歌用什麼軟體好 主播常用伴奏歌曲軟體揭秘 抖音唱歌用什麼軟體好 主播常用伴奏歌曲軟體揭秘 來源
  • 王俊凱/蔡依林《心引力》伴奏 原版伴奏 無損定製BEAT
    王俊凱/蔡依林《心引力》伴奏 原版伴奏 無損定製BEAT如果您需要該音樂的高品質無人聲純伴奏請複製<PACETOP音樂伴奏>並重新搜素搜索以後即可看到為您提供的高品質伴奏但我就是覺得小凱的舞 動作看著特別悠然自在 特舒服 沒有任何用力過猛的刻意 好看 還有他唱霆鋒的歌 唱得好好聽,一個是華語唱跳天后,一個是未來可期的實力歌手,舞臺完全沒有任何不和諧感,反而碰撞出了奇異的默契,聲線好搭,超甜,仿佛空氣中都瀰漫了粉色泡泡,讓人不自覺都露出甜甜的笑容《心引力》是一首高甜的對唱情歌,pop曲風律動輕快,樂器以吉他為主,王俊凱和蔡依林兩人特別的和聲設計
  • 三種方法自己製作MP3伴奏帶
    第一招:殺雞用牛刀-------------Cool Edit Pro  Cool Edit Pro 是一個非常出色的數位音樂編輯器和MP3製作軟體,用它來去人聲,當然是小菜一碟,有一種殺雞用牛刀的感覺,不過去人聲效果是非常棒的,界面如下圖所示。
  • 曹楊/吳映潔《I Think I Love You》伴奏 原版伴奏 無損定製BEAT
    曹楊/吳映潔《I Think I Love You》伴奏 原版伴奏 無損定製BEAT如果您需要該音樂的高品質無人聲純伴奏請複製<PACETOP音樂伴奏>並重新搜素搜索以後即可看到為您提供的高品質伴奏《規定情境》專輯中的每一首歌
  • 倒計時1天|170+人聲樂團,純人聲演繹《夜空中最亮的星》,動聽醉人!
    先來聽聽下面這首《夜空中最亮的星》 這首由廈門六中合唱團演唱的《夜空中最亮的星》,沒有任何樂器伴奏,只有輕柔的歌聲和書本敲擊課桌的聲音,浪潮般的和聲,傳遞出純粹的感情。
  • 無伴奏純人聲的《霍比特人》片尾曲
    孤山、幽暗森林、精靈、矮人、半獸人……每當看到這些詞語,就仿佛置身託爾金老爺子筆下的中土世界,導演彼得·傑克遜用精湛的特效將其呈現在銀幕之上,遙遠、神秘,一如遠古史詩般浩大。接下來給大家分享的是來自Peter Hollens純人聲無伴奏版翻唱版本,一起欣賞一下吧!Peter Hollens是美國流行歌手、作曲家以及製片人。一直醉心於清唱音樂(cappella music),1999年和Leo Da Silva一起創辦清唱組合On The Rocks,備受讚譽,在俄勒岡被稱為第一官方大學清唱組合。
  • 寧波匹諾曹人聲樂團亮相好聲音
    匹諾曹人聲樂團的節目一開場,當悠揚、悅耳的聲音傳來時,各位導師都露出了驚訝的表情,李建、李宇春更是頻頻點頭。由於背對著選手,他們並不知道舞臺上的6位年輕人,是用純人聲在伴奏合唱,匹諾曹人聲樂團成員由人聲貝斯蔣超、女高音鯊魚(張雅莉)、男高音王開泰、女中音小六(胡佳怡)女中音茜茜(李茜)、人聲打擊大黑(肖陳春)6人組成。
  • 張藝興 痴 伴奏 原版無損扒帶純BEAT
    張藝興 痴 伴奏 原版無損扒帶純BEAT如果您需要該音樂的高品質無人聲純伴奏請複製<PACETOP音樂伴奏>並重新搜素搜索以後即可看到為您提供的高品質伴奏《痴》不僅僅只是一首歌曲,它更是一個完整的藝術作品。它包括作詞、作曲、演唱、編曲、製作,也包括舞美、燈光和表演。整首作品給人最大的視覺衝擊,就是Design。從開始的一口悶,到最後的撫弄古琴琴弦,再加上燈光和背投視覺,整個舞臺給人一種多維的沉浸感。既像一場獨幕劇式的秀,更像是一鏡到底的MV拍攝現場。從音樂到視覺,從演唱到忘我,《痴》其實是在創作維度上,又突破了傳統創作的邊界。
  • 千人合唱版《something just like this》來啦,64個國家純人聲!
    今天為大家介紹的歌曲是《something just like this》。由美國著名組合菸鬼組合2017年發行。但是今天小編要為大家介紹的是另一個版本,它是由64個國家千人合唱的,相比原唱,除了驚豔之外,更加令人震撼!這個版本是由Youtube口技達人牽手64個國家千人合唱。
  • 利用機器學習破解網站驗證碼 只需15分鐘
    目前記時:2分鐘  我們的工具集  在我們進一步討論之前,先來羅列一下解決這個問題的工具:  Python 3  Python是一種很有趣的程式語言,有很好的機器學習和計算機視覺庫。  在對代碼進行了幾分鐘的黑客攻擊並添加了一個簡單的for循環之後,我有了一個包含訓練數據的文件夾—10,000個PNG文件,每個文件都有正確的答案作為文件名:  目前記時:5分鐘  簡化這個問題  現在我們有了訓練數據,我們可以直接用它來訓練神經網絡:  如果有足夠的訓練數據,這種方法甚至可能直接產生效果