音樂ChatGPT時刻來臨！「天工SkyMusic」音樂大模型今日啟動邀測

量子位的朋友們 2024-04-02 10:32:17 來源：量子位

4月2日，昆侖萬維AI音樂生成大模型「天工SkyMusic」即日起面向社會開啟免費邀測。

本輪邀測將開放1000個免費名額，面向行業媒體、專家、以及感興趣的音樂從業者開放，用戶可掃描文后二維碼或通過網頁填寫申請，收到申請表后工作人員將第一時間聯絡回復。「天工SkyMusic」正式版也將在4月17日隨「天工3.0」面向全社會免費開放。

申請網頁：https://rg975ojk5z.feishu.cn/share/base/form/shrcnTcBRpGzv5Sx9xAGd5V97Md

「天工SkyMusic」基于昆侖萬維「天工3.0」超級大模型打造，是目前國內唯一公開可用的AI音樂生成大模型。

在通往 AGI 的道路上，多數團隊都專注于模型智力的擴展和增強，幾乎沒有人關注AI如何幫助人們理解和更好地表達情感。智力固然重要，但情感是我們能夠被稱之為人的關鍵，于是，情感 AGI 成為昆侖天工探索研究的一個重要方向。

我們發現相比文本和圖片，音頻內容是理解人類情感最好的方式，而音樂又是人類情感表達最充沛、最不受地域和文化限制的內容載體，不論時代變幻，不論是戰爭還是災禍，人們總是能通過音樂傳遞自己的感受并獲得情感的慰藉。于是我們創造了音樂音頻大模型「天工SkyMusic」，并在公司內部測試中已經獲得了非常好的反饋和表現，很高興跟大家宣布：即日起天工音樂開放媒體與行業專家內測，來體驗人聲情感表達 SOTA 的音樂大模型產品。生成作品效果如下：

采用自研類Sora模型架構 擁有五大優勢

「天工SkyMusic」采用音樂音頻領域類Sora模型架構，Large-scale Transformer 負責譜曲，來學習 Music Patches 的上下文依賴關系，同時完成音樂可控性；Diffusion Transformer 負責演唱，通過LDM讓Music Patches被還原成高質量音頻，使得「天工SkyMusic」能夠支持生成80秒44100Hz 采樣率雙聲道立體聲歌曲。這套模型架構在處理視頻、音頻和音樂領域效果極佳。昆侖萬維團隊也將在后續逐步迭代和添加新的能力，讓模型具備多模態的情感理解與表達能力。

「天工SkyMusic」具有以下五大特點：

1. 高質量AI音樂

「天工SkyMusic」能夠生成80秒44100Hz采樣率雙聲道立體聲AI歌曲，并可根據用戶輸入的歌詞風格生成對應歌曲風格。

2. 人聲“以假亂真”

人聲合成是AI音樂生成中最重要、最能體現生成效果和品質的維度。「天工SkyMusic」的AI人聲合成能夠達到業內頂尖的SOTA水平，中文水平極為優秀，發音清晰、無異響。其中文演唱效果更是顯著好于國外產品，領先世界水平。

3. 歌詞段落控制

「天工SkyMusic」能夠通過歌詞來控制歌曲，讓生成的歌曲可以明確分辨出不同歌詞段落的情緒變化，體現出主歌和副歌、前奏和主歌的段落差異。

4. 多種音樂風格

「天工SkyMusic」支持說唱、民謠、放克、古風、電子等多種音樂風格，用戶在創作音樂時，可以通過參考音頻制定想要的音樂風格。

5. 音樂智能表達- 歌唱技巧學習

「天工SkyMusic」同時能夠學習如顫音、歌劇、吟唱、男女對唱，自動和聲等多種歌唱技巧，讓用戶創作的歌曲得到更恰當的情感表達。

一直以來，AI音樂生成大模型都是AI大模型行業最受關注的落地應用之一。早在2022年12月，昆侖萬維就發布了「昆侖天工」AIGC全系列開源算法與模型，其中就包括多模態音樂內容生成大模型。此后，昆侖萬維更是通過AI音樂生成大模型為北京市東城區域文商旅融合品牌“故宮以東”打造了年度數字主題曲，將AI音樂前沿科技與東城區歷史文化深度融合。

今天面向社會開啟免費邀測的「天工SkyMusic」更是國內首款、同時也是目前國內唯一公開可用的AI音樂生成大模型。

2023 年，昆侖萬維在 “All in AGI 和 AIGC” 的戰略推動下，在人工智能領域取得了許多進展，逐步形成了AI大模型、AI搜索、AI音樂、AI 漫畫、AI社交、AI游戲等AI業務矩陣。

昆侖萬維創始人周亞輝表示：“未來三十年，人類社會將從感知線，變成表達線，整個人類社會在自我表達側要翻1000倍；創作和自我表達是未來30年在整個社交和文化領域增長最快的曲線，會有越來越多人表達自我，表達對世界的理解、對社會事物的態度，表達越來越藝術化和趣味化；這種表達在過去很困難，因為工具門檻高，而未來30年是自我表達的30年，我們要用AI把人類創作的門檻降得足夠低，讓人們更充分地實現自我表達。”

2024年，昆侖萬維發布全新公司使命：“實現通用人工智能，讓每個人更好地塑造和表達自我”。

這一使命體現了技術創新與人文關懷的結合，旨在創造一個每個人都能夠自由地發揮自己最大潛力的未來。通過通用人工智能，昆侖萬維希望構建一個更加智能、更加互聯、更加理解和尊重每個人個性的世界。

音樂，將會是其中的重要環節。

通過「天工SkyMusic」，昆侖萬維希望幫助每一個人更好地創作音樂，表達情感。

當前，昆侖萬維已打造了集AI搜索、AI寫作、AI長文本閱讀、AI對話、AI語音合成、AI圖片生成、AI漫畫創作、AI圖片識別、AI音樂生成、AI代碼寫作、AI表格生成等多項能力于一體的「天工3.0」多模態“超級模型”（Super Model），成為AI行業全新里程碑。

本輪「天工SkyMusic」邀測將開放1000個免費名額，面向行業媒體、專家、以及感興趣的音樂從業者開放。歡迎掃碼或通過通過網頁填寫以下報名表，昆侖萬維工作人員將在第一時間聯絡回復。未申請邀測的用戶也可在4月17日免費下載最新版“天工AI智能助手”APP，感受「天工3.0」與「SkyMusic」帶來的顛覆性AI體驗。

申請網頁：https://rg975ojk5z.feishu.cn/share/base/form/shrcnTcBRpGzv5Sx9xAGd5V97Md