12月22日,騰訊QQ正式發布“我的心靈之旅”2022年度報告(以下簡稱“報告”)。回顧這一年的使用狀況,你最愛用的表情包是什么?好奇你今年和誰聊得最火熱?QQ 空間第一張照片留給了誰?登錄QQ,首頁搜索“年度報告”,點擊即可進入回憶。本次報告還有一大亮點,即在報告結尾的專屬音樂彩蛋,是由DeepMusic提供獨家技術支持的AI合成音樂。
以AI技術打造用戶個性化音樂形象
如今,人工智能(AI)正在越來越多地應用于音樂、電影和繪畫等藝術領域。QQ2022年度報告音樂彩蛋的亮點在于,DeepMusic通過機器學習算法、基于樂理規則的生成模型等AI音樂生成技術,結合QQ用戶的活躍屬性、愛好、使用行為等不同的社交特質匹配生成個性化音樂,并加入QQ特有的音效,依托AI能力滿足QQ用戶千人千面的音樂形象打造,既有品牌屬性又符合用戶社交調性。在這個過程中,就像人類的學習一樣,AI也能夠通過海量的語料庫內容學習“創作”出全新的作品。
作為國內市場上唯一利用深度學習方法進行人工智能作曲的專業團隊,北京靈動音科技有限公司(DeepMusic)成立于2018年2月,創始團隊來自清華大學,核心技術來自清華大學計算機系智能技術與系統國家重點實驗室,目前已有5年技術積累。
據了解,DeepMusic充分聚焦于聽覺層面的感知智能,通過多年的數據及算法積累,從作詞、作曲、編曲、混音、歌聲合成全鏈條全方位降低音樂創作及制作門檻,幫助廣大的音樂愛好者以低成本高效率地學習音樂知識,享受音樂實踐,參與音樂娛樂,進而能創作出屬于自己的作品。例如,通過軟件創作出不同作曲家風格的作品,或者使用機器學習算法生成全新的歌曲和聲音。
多場景AI音樂能力賦能 夯實核心技術競爭力
五年來,DeepMusic的音樂制作團隊一方面在不斷積累豐富的高質量音樂內容,另一方面在嘗試各種音樂制作新方法,為AI音樂制作等技術研究提供專業支持。同時,DeepMusic的音樂標注團隊一直專注在存量歌曲的音樂信息標注工作上,包括速度、節拍、段落、和弦、旋律、歌詞等,為音樂信息檢索(MIR)技術研究提供數據支持。
截止目前,DeepMusic通過自研的AI音樂生成系統(AI音樂制作人)“伶倫”,能夠生成8種以上不同風格的上萬條高質量音樂伴奏,并制作了數十首睡眠純音樂發布在QQ音樂,累計獲得超800萬次的收聽量。同時,“伶倫”還可支持高精度導唱歌詞的生成及旋律打分功能,有效支持了全民K歌“一歌多伴”的創新性音樂娛樂玩法,并取得了用戶的一致好評。DeepMusic相信:Everyone can be a musician!基于音樂知識的云化,以及音樂創作的AI算法,讓每個人都能夠用音樂表達自己。
不僅如此,DeepMusic還通過自研的AI音樂信息采集系統“愚公”,并配合少量的人工支持,完成了上萬首歌曲的音樂信息標注模板,有效支持了全民K歌的智能修音、QQ音樂的智能曲譜等音樂功能。
這種對于全鏈條AI音樂引擎的實踐與探索,不僅能夠為業余音樂愛好者提供全新的創作方式,而且也能夠成為音樂行業的創意輔助工具提供新的產品體驗和解決方案,并提升創作效率。
隨著DeepMusic對AI技術的不斷優化升級,未來將致力于沉浸式音樂交互體驗打造,通過人工智能輔助音樂創作和制作,降低音樂交互所需的知識門檻和操作門檻,將視覺形象逐漸融入音樂交互體驗,努力為用戶打造多維感官的沉浸式音樂交互體驗,將技術全方位賦能音樂愛好者的學習與創作之中。