音樂APP如何用AIGC提升用戶體驗？以QQ音樂為例

作者：萬翛編輯：范志輝

來源：音樂先聲

原標題：《ChatGPT現象級爆紅，音樂APP如何用AIGC顛覆用戶體驗？》

圖片來源：由無界版圖AI工具生成

2023開年，ChatGPT的現象級爆紅，引發了一場全球互聯網巨頭關於AIGC的“軍備競賽”，谷歌、微軟、百度、Meta等都紛紛下場。而能夠與人進行自然對話、回答問題的ChatGPT的問世，也讓大型語言模型這種抽象高端的概念變成了人人都能用上的“個人助理”，一時間風頭無兩。

近日，ChatGPT開發公司OpenAI發布了下一代大型語言模型GPT-4，這不僅是用於支持ChatGPT和新Bing的最新AI大型語言模型，還支持了Microsoft 365的新功能Copilot，幫助用戶更高效地辦公。據悉，ChatGPT在許多專業測試中的表現超出了“人類水平”，消息一出，再次引起人們對AIGC的高度討論。

所謂AIGC（AI-Generated Content），就是人工智能生成的內容。簡而言之，就是人工智能可以藉助已有的材料庫，按照用戶需求生成對應的內容。目前，AIGC已經應用到音樂、繪畫、音頻等各個領域，讓大眾真切感知到了技術革命背後的創造力。

在音樂領域，除了輔助音樂創作，AIGC技術也開始被用於創新用戶體驗。比如，在國外，Spotify最近推出DJ模式，讓AI改善推薦歌曲體驗；在國內，QQ音樂等音樂平台在利用AIGC技術方面做了不少的嘗試。本文將以QQ音樂的AI功能應用為例，盤點音樂與AIGC結合的想象空間。

AIGC狂飆，如何改變音樂體驗？

如今，打開QQ音樂就會發現，AIGC已經遍布QQ音樂的各處細節中，從聽歌體驗、視覺呈現、社交分享等多個維度，做了不少有趣的創新嘗試。

點開推薦歌曲開始聽歌時，頗具設計美感的AIGC黑膠播放器就映入眼帘。

與以往的歌曲專輯封面播放不同， QQ音樂新上線的AI播放器是國內音樂行業首個在AIGC領域運用的視覺嘗試，其原理是通過在AI工具輸入關鍵詞，讓AI算法組合各種元素，生成有創意的播放器風格。現在，QQ音樂已推出機械裝甲、雪山白、積木遊戲、工業灰等 6款供用戶選擇，據悉還將結合場景，有更多樣式可以期待。

如果播放的歌詞正符合當下的心情，想要分享到朋友圈、微博等社交媒體，這時候，“AI歌詞海報”功能就派上用場了。不管是古風、流行還是說唱，基於Stable diffusion 和Disco diffusion兩個模型，短短几秒，都能根據歌詞一鍵生成對應畫風的海報，為用戶省去尋找配圖的時間。

而在這背後，是騰訊音樂天琴實驗室業內首創的AI音樂視覺生成技術MUSE（Music Envision）帶來的支持。作為國內音樂行業內率先布局AIGC領域的平台，QQ音樂憑藉對音頻、歌詞的深度理解和用戶需求的前瞻洞察，實現了音樂行業首創的規模化音樂海報繪製技術。

據悉，該技術還用於為曲庫中大量無專輯歸屬的遊離單麴生成適配的歌曲封面，大大提高了用戶視覺體驗，音樂人也可以基於該技術，自主製作專輯圖。

在基於MuseAI算法的支持下，QQ音樂也開發了頗具可玩性的“AI·次元專屬BGM”功能。用戶只要上人物傳照片，就能生成動漫風格的對應圖片，還配有專屬BGM。

除此之外，聯動天琴實驗室的AI技術，我們還可以通過AI動聽賀卡功能，自行編輯祝福語和選擇歌曲，獲得AI生成的祝福語藏頭歌詞，並用所選歌曲的曲調演唱，一鍵生成定製祝福。不得不說，不管是逢年過節還是朋友生日，媽媽再也不擔心我為想祝福語而禿頭了，走心又有趣。

當我們打開QQ音樂簽到時，除了會收到每日根據用戶偏好及聽歌記錄的一首推薦歌曲，滑動卡片便可查看當日運勢，收到一張AIGC生成的“今日運勢畫”。據悉，該畫作是依託於當日推薦歌曲內容，並融入今日幸運色元素生產的，好聽又好看。

對於音樂愛好者而言，QQ音樂基於AIGC開發的“智能曲譜”功能也非常實用，頗受歡迎。

由於網上的曲譜大多不完整，且篩選成本極高，如果想要學習心水歌曲的樂器彈唱，第一步就是耗時的扒譜。而如今得益於智能曲譜功能，就連《我記得》這種新歌也能直接找到曲譜，且吉他譜、鋼琴譜、尤克里里等主流曲譜一應俱全。

在此基礎上，QQ音樂還讓靜止的圖片曲譜動起來，在業內首家推出“曲譜OCR”功能，基於圖像識別的方法自動識別樂譜中的和弦、音高、休止符等10類音樂信息，然後結合QQ音樂高精度歌詞信息，一鍵生成相應的智能曲譜，幫助愛好者輕鬆自如彈唱，再也不用中途停下來手動翻譜子了。

不同於一般人工的曲譜，QQ音樂的智能曲譜還有AB反覆、原聲、節拍器、常用節奏型選擇和編輯等一系列功能選項。不僅如此，我們學完還能在QQ音樂彈唱小組進行分享，結識同好。這一功能一經推出就頗受好評，非常實用。

總而言之，不論是QQ音樂積極結合AIGC讓用戶體驗更加個性化，還是提高音樂愛好者的學習效率，可以看出AIGC技術在音樂領域極高的契合度，也拓展了行業對AIGC與音樂結合的想象空間。

嫁接音樂后，如何打開AIGC的想象空間？

此前，法國知名DJ David Duetta在演出時候通過AIGC工具，以Eminem風格寫了一首關於Future Rave的歌，還用Eminem的聲線錄了出來，觀眾反響十分“瘋狂”，令David Duetta直呼“音樂的未來在於AI”。

而David Duetta絕不是唯一一個有此信念的人。

在音樂領域，AIGC不論是作詞、作曲、還是人聲合成上都大有作為，僅僅是利用AIGC生產功能性音樂，就能創造巨大商機，更別說成為輔助音樂創作的主流技術，或是打造虛擬藝人等等想象空間了。可以說，AIGC應該是繼流媒體之後對音樂行業最具顛覆性的技術。

面對這一歷史機遇，Spotify、三大唱片等音樂公司已經積極入局AIGC領域，試圖搶佔先機。例如華納投資AI音樂創作平台Lifescore、環球音樂投資AI音樂創作平台Soundful、索尼音樂自主研發AI輔助音樂創作應用Flow Machines。毫無疑問，音樂公司們爭相探索AIGC已經成為新趨勢。

在國內，QQ音樂率先洞察到了人工智能和AIGC的巨大潛力，並進行布局。在2019年，QQ音樂旗下聽歌識曲團隊獲得了Mirex音頻指紋大賽冠軍，同時打破了三項世界紀錄；2020年，QQ音樂獨創的Predictive Model（PDM）技術也打破了“預測識別（Patterns for Prediction）”世界紀錄，助力潛力好歌挖掘，成為行業標配的賦能工具；還成功將基於DNN的翻唱識別技術引入聽歌識曲場景，開創了革命性的第一代聽歌識曲系統，識別率提升了12%。

2021年，在QQ音樂多媒體研發中心基礎上，TME成立首個音視頻技術研發中心——天琴實驗室，專註於音視頻相關AI研究，研發了聽歌識曲、智能修音、音頻超分、臻品母帶、翻唱識別、唱歌評分以及行業首創的MUSE AI音樂視覺生成技術明星產品。其中，天琴實驗室研發的“歌詞生成方法”和哼唱識別還分別斬獲了國家級專利獎和深圳市專利獎。

截至目前，天琴實驗室累計發布10餘篇國際頂會論文，獲得500餘項發明專利，主導參與多項音樂行業標準制定，成為行業內頂尖的音視頻研究實驗室。最近，天琴實驗室還面向海內外首次發布三套開源數據集，分別涉及片段翻唱識別、哼唱識別和歌唱評價，以夯實產業發展基礎，為數字音樂產業升級注入新活力。