音樂ChatGPT時刻來臨！「天工SkyMusic」音樂大模型今日啟動邀測

量子位的朋友們 2024-04-02 10:32:17 來源：量子位

感受「天工3.0」與「SkyMusic」帶來的顛覆性AI體驗.

4月2日，昆侖萬維AI音樂生成大模型「天工SkyMusic」即日起面向社會開啟免費邀測。

本輪邀測將開放1000個免費名額，面向行業(yè)媒體、專家、以及感興趣的音樂從業(yè)者開放，用戶可掃描文后二維碼或通過網(wǎng)頁填寫申請，收到申請表后工作人員將第一時間聯(lián)絡(luò)回復。「天工SkyMusic」正式版也將在4月17日隨「天工3.0」面向全社會免費開放。

申請網(wǎng)頁：https://rg975ojk5z.feishu.cn/share/base/form/shrcnTcBRpGzv5Sx9xAGd5V97Md

「天工SkyMusic」基于昆侖萬維「天工3.0」超級大模型打造，是目前國內(nèi)唯一公開可用的AI音樂生成大模型。

在通往 AGI 的道路上，多數(shù)團隊都專注于模型智力的擴展和增強，幾乎沒有人關(guān)注AI如何幫助人們理解和更好地表達情感。智力固然重要，但情感是我們能夠被稱之為人的關(guān)鍵，于是，情感 AGI 成為昆侖天工探索研究的一個重要方向。

我們發(fā)現(xiàn)相比文本和圖片，音頻內(nèi)容是理解人類情感最好的方式，而音樂又是人類情感表達最充沛、最不受地域和文化限制的內(nèi)容載體，不論時代變幻，不論是戰(zhàn)爭還是災禍，人們總是能通過音樂傳遞自己的感受并獲得情感的慰藉。于是我們創(chuàng)造了音樂音頻大模型「天工SkyMusic」，并在公司內(nèi)部測試中已經(jīng)獲得了非常好的反饋和表現(xiàn)，很高興跟大家宣布：即日起天工音樂開放媒體與行業(yè)專家內(nèi)測，來體驗人聲情感表達 SOTA 的音樂大模型產(chǎn)品。生成作品效果如下：

采用自研類Sora模型架構(gòu) 擁有五大優(yōu)勢

「天工SkyMusic」采用音樂音頻領(lǐng)域類Sora模型架構(gòu)，Large-scale Transformer 負責譜曲，來學習 Music Patches 的上下文依賴關(guān)系，同時完成音樂可控性；Diffusion Transformer 負責演唱，通過LDM讓Music Patches被還原成高質(zhì)量音頻，使得「天工SkyMusic」能夠支持生成80秒44100Hz 采樣率雙聲道立體聲歌曲。這套模型架構(gòu)在處理視頻、音頻和音樂領(lǐng)域效果極佳。昆侖萬維團隊也將在后續(xù)逐步迭代和添加新的能力，讓模型具備多模態(tài)的情感理解與表達能力。

「天工SkyMusic」具有以下五大特點：

1. 高質(zhì)量AI音樂

「天工SkyMusic」能夠生成80秒44100Hz采樣率雙聲道立體聲AI歌曲，并可根據(jù)用戶輸入的歌詞風格生成對應歌曲風格。

2. 人聲“以假亂真”

人聲合成是AI音樂生成中最重要、最能體現(xiàn)生成效果和品質(zhì)的維度。「天工SkyMusic」的AI人聲合成能夠達到業(yè)內(nèi)頂尖的SOTA水平，中文水平極為優(yōu)秀，發(fā)音清晰、無異響。其中文演唱效果更是顯著好于國外產(chǎn)品，領(lǐng)先世界水平。

3. 歌詞段落控制

「天工SkyMusic」能夠通過歌詞來控制歌曲，讓生成的歌曲可以明確分辨出不同歌詞段落的情緒變化，體現(xiàn)出主歌和副歌、前奏和主歌的段落差異。

4. 多種音樂風格

「天工SkyMusic」支持說唱、民謠、放克、古風、電子等多種音樂風格，用戶在創(chuàng)作音樂時，可以通過參考音頻制定想要的音樂風格。

5. 音樂智能表達- 歌唱技巧學習

「天工SkyMusic」同時能夠?qū)W習如顫音、歌劇、吟唱、男女對唱，自動和聲等多種歌唱技巧，讓用戶創(chuàng)作的歌曲得到更恰當?shù)那楦斜磉_。

一直以來，AI音樂生成大模型都是AI大模型行業(yè)最受關(guān)注的落地應用之一。早在2022年12月，昆侖萬維就發(fā)布了「昆侖天工」AIGC全系列開源算法與模型，其中就包括多模態(tài)音樂內(nèi)容生成大模型。此后，昆侖萬維更是通過AI音樂生成大模型為北京市東城區(qū)域文商旅融合品牌“故宮以東”打造了年度數(shù)字主題曲，將AI音樂前沿科技與東城區(qū)歷史文化深度融合。

今天面向社會開啟免費邀測的「天工SkyMusic」更是國內(nèi)首款、同時也是目前國內(nèi)唯一公開可用的AI音樂生成大模型。

2023 年，昆侖萬維在 “All in AGI 和 AIGC” 的戰(zhàn)略推動下，在人工智能領(lǐng)域取得了許多進展，逐步形成了AI大模型、AI搜索、AI音樂、AI 漫畫、AI社交、AI游戲等AI業(yè)務(wù)矩陣。

昆侖萬維創(chuàng)始人周亞輝表示：“未來三十年，人類社會將從感知線，變成表達線，整個人類社會在自我表達側(cè)要翻1000倍；創(chuàng)作和自我表達是未來30年在整個社交和文化領(lǐng)域增長最快的曲線，會有越來越多人表達自我，表達對世界的理解、對社會事物的態(tài)度，表達越來越藝術(shù)化和趣味化；這種表達在過去很困難，因為工具門檻高，而未來30年是自我表達的30年，我們要用AI把人類創(chuàng)作的門檻降得足夠低，讓人們更充分地實現(xiàn)自我表達。”

2024年，昆侖萬維發(fā)布全新公司使命：“實現(xiàn)通用人工智能，讓每個人更好地塑造和表達自我”。

這一使命體現(xiàn)了技術(shù)創(chuàng)新與人文關(guān)懷的結(jié)合，旨在創(chuàng)造一個每個人都能夠自由地發(fā)揮自己最大潛力的未來。通過通用人工智能，昆侖萬維希望構(gòu)建一個更加智能、更加互聯(lián)、更加理解和尊重每個人個性的世界。

音樂，將會是其中的重要環(huán)節(jié)。

通過「天工SkyMusic」，昆侖萬維希望幫助每一個人更好地創(chuàng)作音樂，表達情感。

當前，昆侖萬維已打造了集AI搜索、AI寫作、AI長文本閱讀、AI對話、AI語音合成、AI圖片生成、AI漫畫創(chuàng)作、AI圖片識別、AI音樂生成、AI代碼寫作、AI表格生成等多項能力于一體的「天工3.0」多模態(tài)“超級模型”（Super Model），成為AI行業(yè)全新里程碑。

本輪「天工SkyMusic」邀測將開放1000個免費名額，面向行業(yè)媒體、專家、以及感興趣的音樂從業(yè)者開放。歡迎掃碼或通過通過網(wǎng)頁填寫以下報名表，昆侖萬維工作人員將在第一時間聯(lián)絡(luò)回復。未申請邀測的用戶也可在4月17日免費下載最新版“天工AI智能助手”APP，感受「天工3.0」與「SkyMusic」帶來的顛覆性AI體驗。