AI時代，音樂科技如何觸摸温度與浪漫？_風聞

作者 | 魯修修       編輯 | 範志輝

科技賦能音樂的命題由來已久。

從黑膠唱片到CD，從隨身聽到如今的智能音箱，技術的進步深刻改變了人們消費音樂的方式和場景。音樂產業進入流媒體時代後，科技已成為音樂平台差異化的重要驅動力，其在音樂行業的重要性不斷凸顯。

“後版權時代”的到來，也加速了音樂業務向泛音樂層面的發展，如何以科技創新為用户提供更便捷多元的音樂體驗，成為音樂行業的新共識。與此同時，為了始終葆有音樂最初的美好，音樂科技正以更有温度的方式，持續賦能多維度的音樂體驗革新。

老路與新題

不同於唱片時代稍顯笨拙的“淘”音樂，流媒體時代的聽眾，更多的是在挑選音樂。

2015年Spotify的Discover Weekly上線，它會根據“口味”每週為用户推薦30首歌曲，也幫助Spotify在諸多音樂平台中脱穎而出。這一切都要得益於2014年對The Echo Nest的收購，這家音樂智能分析公司的併入，顯著提升了Spotify的智能推薦技術。

 早年，人們都在唱片店挑唱片

如今，音樂平台間的差異化競爭，已不止智能推薦那麼簡單。無論是Apple Music的智能互聯還是QQ音樂的哼唱識別，可以看到，在音樂平台們使自己與眾不同的努力中，越來越多的先進科技被應用於音樂。隨着不少平台將科技賦能上升至戰略層面，業內技術交流的需求也愈發迫切。

10月26日，TME舉辦的業內首個“音樂黑科技狂歡節”——“TechME技術周”剛剛在深圳啓動。這個以“Rock N Code，讓技術發聲”為主題的技術周活動以技術分享與行業交流為主，將圍繞音視頻、NLP、安全技術、數據科學等多個技術維度展開交流。

TechME技術周

在此次交流活動中，TME還揭開了首個音視頻技術研發中心——天琴實驗室的神秘面紗。據悉，該實驗室的前身是QQ音樂多媒體研發中心，如今整合了多個TME技術團隊，並以宇宙中的天琴座為名“捲土重來”。

如神話中懸掛於天穹的七絃琴，如此浪漫的命名也包含了團隊希望讓技術更具温度，為用户提供更好音娛體驗的美好期許，並有了越來越多的落地。

科技賦能音樂的“天琴”答卷

音樂場景多元化的趨勢下，消費音樂已經遠遠超過單一的“聽”的維度，如何為用户提供聽、唱、看一體化的音娛體驗，已成為科技賦能音樂的主題。

在天琴實驗室團隊看來，在冰冷的數據技術中看到人，就是注入技術以温度的具體內涵。也就是説，如何讓AI技術更有温度，關鍵在於能否以用户需求為導向進行技術研發。

AI時代正在到來

隨着音樂的應用場景越發廣泛，用户在音頻識別上的需求越來越高。儘管音頻指紋技術應用於聽歌識曲已有多年，但由於聲紋的變化，歌曲的翻唱版卻難以識別。

意識到這一用户需求後，在2012年的算法技術基礎上，QQ音樂的聽歌識曲團隊在2019年對其進一步優化，並獲得了Mirex音頻指紋大賽冠軍，同時打破了三項世界紀錄；去年，又成功將基於DNN的翻唱識別技術引入聽歌識曲場景，開創了革命性的第一代聽歌識曲系統。這一技術應用，不僅能識別短視頻、綜藝裏的翻唱歌曲，還能識別Live、直播等線下場景中的歌曲使用，在原始系統無法識別的歌曲中，識別率提升了12%，實現了用户聽翻唱歌曲的自由。

值得一提的是，團隊還製作了“離線系統”的小彩蛋，在歌曲第一次未能成功識別後，QQ音樂會在一週之內自動向全曲庫發起請求，直到識別成功再為用户發送反饋提醒。這種始終“牽掛”着待解用户需求的貼心設計，便是技術温度的體現。而類似細節需求的精準洞察，往往能為用户體驗的提升帶來四兩撥千斤的效果。

QQ音樂聽歌識曲功能

當下，視頻APP的崛起改變了用户的觀看習慣，為了適應這些改變，QQ音樂等平台也在播放頁添加了豎屏MV。在不改變音樂內核的前提下，利用短視頻傳播優勢，嘗試實現優質作品的“被記住”，而不僅是“被聽到”。

在“天琴”的幫助下，QQ音樂會對橫屏MV進行歌手檢測、注意力檢測，並通過多目標跟蹤和注意力熱力圖等技術，實現對焦點運動軌跡的優化。在發掘了一段橫屏MV中最精彩、最具美感的片段後，平台會將用户關注的區域裁剪下來並輸出，實現“音樂視頻豎屏化”。實驗顯示，QQ音樂播放頁靜音視頻、豎屏MV將用户的聽歌時長提高了5.5%。

此外，最能讓人明顯感知到AI技術温度的，當屬在公益項目落地中的人文關懷。今年8月，QQ音樂運用天琴實驗室的音頻處理和合成的相關技術，製作了國內首張低頻公益專輯《聽見“聽不見”的音樂》，讓中高頻聽力損失的孩子們第一次聽到完整的音樂，感受到了音樂的多種“色彩”。

可見，以“讓科技充滿温度”為研發導向，在“AI技術賦能音樂”的時代新題中，浪漫且温暖的天琴實驗室，交出了不一樣的答卷。

中高頻聽力損失的孩子們第一次聽低頻公益專輯

除了音頻技術和“音樂視頻化”的探索外，在線K歌領域的技術賦能也在持續進行中。今年5月，一個名為《唱歌風水學概論》的視頻在B站引發眾多網友熱議，視頻詼諧幽默地講述了音準、節奏、技巧、氣息、情感五要素在一首歌演繹中的重要性，助力這段視頻出圈的，正是TME旗下的全民K歌。

在以往的K歌評分軟件中，技巧、情感等要素在打分中鮮有體現。利用多維度歌曲評價技術，全民K歌不僅實現了對歌曲演繹時顫音、滑音、裝飾音的捕捉，還能從抑揚起伏等動態變化中“感受”用户的情感表達。

與此同時，多維度歌曲評價技術還成功應用於線下比賽中。去年8月的“校園星歌聲”總決賽上，AI智能評分系統從選手歌唱特性、技巧、音域等維度對歌聲進行科學分析，不僅為緊張的比賽增加了趣味性，而且提升了賽事評比的客觀公正性。

“校園星歌聲”總決賽上應用了AI智能評分系統

在科技向善的技術價值觀下，“天琴”也儘量幫助每一位用户都擁有更好的表達。為此，全民K歌上線了智能修音技術，幫助用户免費體驗百萬修音師的服務；直播方面，QQ音樂從主播端和用户端同時發力，實時美白、去噪、超分、超幀技術正在完善QQ音樂全鏈路的視頻質量。

可以看到，在打造聽、唱、看一體化音娛平台的賽道上，音視頻技術能力建設的“未雨綢繆”已幫助QQ音樂等平台佔得先機。如今，天琴實驗室已手握384項專利技術，拿下Mirex音頻指紋大賽冠軍、深圳市科技專利獎等多個國內外音視頻重量級獎項，多項論文也被收錄於ICASSP、IJCNN、INTERSPEECH等各大國際論壇組織。

技術的領先自然離不開優秀的人才，早在“天琴”正式推出之前，就邀請了多位海內外知名研究者加入，與國內頂尖實驗室的合作也在同步進行中。

2020年，“天琴”與中國科學技術大學合作研發的時間戳技術在MIREX大賽中一舉超過Spotify；同年，天琴實驗室與西北工業大學頂尖實驗室展開合作，在長音頻的語音合成方面取得長足進展。而作為研究音樂科技的領軍團隊，他們還通過AI智能和人工輔助合成獨特的logo音樂，創造了獨屬於天琴的旋律，宣告科技與音樂的結合可以多麼多浪漫。

QQ音樂業務線技術副總裁周文江（圖右）為西北工業大學人工智能領域專家謝磊（圖左）頒發聘任證書

換句話説，在音樂消費場景多元化帶來體驗升級的新命題中，平台不僅需要多向技術的支撐，更需要“温度”的指引與人才的推進。在AI科技賦能音娛平台的路上，“天琴”已經出發，以“讓音樂進入生活每一個場景”，讓用户切實享受音樂的美好與純粹。

還有多少想象空間？

關於人工智能技術能否在藝術產業中大展身手的討論由來已久。

赫拉利在《今日簡史》中指出，所有藝術形式中，最容易受到大數據分析衝擊的可能就是音樂，因為“音樂的輸入和輸出都適合用精確的數學來描述，輸入時是聲波的數學模式，輸出時則是神經風暴的電化學反應模式……算法只要經過幾百萬次的音樂體驗，就可能學會如何預測某種輸入產生某種輸出”。

若真如赫拉利所言，只要數據分析進化到一定程度，它就能對需求識別、創作導向、市場預測等行業各個環節實施助力，科技賦能音樂的想象空間也將被逐步打開。而在行業的持續探索下，這一領域的美好圖景已初現端倪。

AI作曲

科幻動漫《卡羅爾與星期二》中，作者構想了一個99%熱門歌曲由AI創造的人類社會，在算法作曲技術和音樂元宇宙逐步推進的當下，這樣的想象正成為現實。據悉，天琴實驗室未來將發力AI自動作曲、專業級歌唱評價、神經網絡編碼器等音樂黑科技。

對於普通人而言，音樂創作的門檻大大降低，或許每個人都能通過音樂記錄生活，也能通過歌曲被人記住；對於音樂人來説， AI也可以成為自己的得力助手，激發創作靈感，提升創作效率。而多維度歌唱評價技術的逐漸成熟，我們有理由相信，伴隨AI的進一步發展，它不僅能對一首歌曲演繹在音準、節奏、氣息等層面進行綜合考量，或許還能捕捉歌曲高層聲樂特徵，依據不同音樂人的歌唱偏好，實現專業級歌唱評價。

隨着音樂元宇宙走進現實，在不遠的將來，也許每個人都將成為創作者、表演者、樂評人甚至唱片企劃。屆時，玩音樂不再只是少數人的天賦，每個人的音樂才華都將被激發出來，從數以億計的用户中“發現下一個帕瓦羅蒂”也將成為可能。

AI演奏

回過頭來看，當下音樂平台對聽、唱、看一體化音娛平台的構建，恰恰是對音樂元宇宙技術基礎的完善。在優化用户感官享受的過程中，音樂平台提供“沉浸感”體驗的目標與音樂元宇宙的重要元素不謀而合，而音頻超分辨率、唱跳識別、音色合成等技術也將為未來元宇宙中的“居民”們提供更真實、完整的音娛體驗。

當然，產業升級不會是一日之功，在此之前，還需要科技的持續創新與大平台的引領帶動。與唱片時代向流媒體時代的轉變不同，目前音樂行業進行的，是一場將由音樂流媒體平台主導的內容生態與音樂消費方式的創新。

在這個過程中，QQ音樂等技術先行者，也為行業後續探索提供了範本——讓用户在細節中感受到科技的浪漫，在痛點滿足中釋放出科技賦能音樂更大的想象空間。

排版 | 安林

本文為音樂先聲原創稿件，轉載及商務合作，請聯繫我們。