“AI必將改變音樂領域。”

來源|多知

作者|王上

視頻制作|張蔚斐

一位鋼琴演奏者鋼琴支架上放著一個iPad顯示電子樂譜，隨著手指在琴鍵上跳動，AI樂譜自動翻頁；錄制的現場演奏音頻發送到“AI音頻美顏”功能上，一兩分鐘內變得無噪音且流暢，堪比專業錄音棚級別的鋼琴曲……

這些都是AI音樂科技公司智曲科技（英文名DeepWav）旗下DeepPiano App的功能，該產品以大模型為內核，正在為鋼琴練習和演奏行業帶來新的可能性。

音樂無國界，DeepPiano App自誕生起就是一款全球化的產品，希望用AI產品驅動，解決全球鋼琴演奏者從學習、演出到創作中的諸多痛點，它可以是一位隨身攜帶的助教、一位協奏者，甚至一位創作者。

智曲科技創始人、CEO夏雨跟鋼琴有著不解之緣，他兼具鋼琴專業素養與 AI 技術背景，曾獲全國鋼琴比賽亞軍、北京市奧數冠軍。他本科和碩士都是畢業于清華大學軟件學院，還曾擔任微軟亞洲工程院高級研發工程師，曾在知名音樂科技公司擔任CTO。

智曲科技團隊是來源于清華的創業團隊，核心成員來自清華大學和中央音樂學院，其中，合伙人戚玥是夏雨的大學同學，她曾獲圣彼得堡國際鋼琴大賽金獎，并擔任國內外鋼琴賽事評委，還曾創辦IGW（I Get a Wish）愛及國際藝術中心，她在智曲科技負責全球銷售。

夏雨告訴多知：“鋼琴行業是技術滲透較為滯后的領域之一，但其存在的痛點是可以通過技術革新得以解決的，一旦形成習慣，就不會再回到過去。”

智曲科技今年獲得了清華系VC的種子輪融資，以DeepPiano App為起點，智曲科技將深入到“AI+音樂”領域。“我們希望AI更好地服務于人類藝術發展，讓AI技術成為人類藝術才華的放大器。”夏雨說。

01

“AI必將改變音樂領域”

2022年，當ChatGPT橫空出世后，不少人都看到了這波技術浪潮帶來的全新革命，夏雨也不例外。

夏雨說：“這波大模型技術浪潮將影響各個領域，必然也將改變音樂領域，這將是一個歷史趨勢。”

在他看來，大模型一定可以和音樂領域相結合，但就鋼琴領域來說，它是受技術領域推動比較慢的一個行業。

紙質曲譜、手動編曲、十年未變的App形態……全球均是如此，傳統模式的低效讓夏雨看到了變革的契機。

由此，夏雨集結了一支由自清華大學、中央音樂學院等知名院校畢業生組建的團隊，并成立了智曲科技，瞄準“AI+音樂”這個垂直場景的應用。夏雨介紹，這個團隊在“技術+音樂”融合領域有近10年的經驗，很多人至今依然活躍在鋼琴演奏的舞臺上，如戚玥。

今年5月，DeepPiano App上線，它試圖解決從學鋼琴到演奏再到作曲的難題。

夏雨介紹，DeepPiano App的定位是面向大師級別鋼琴演奏者和會演奏鋼琴的愛好者，暫時還未上線非零基礎初學者。

作為垂直領域的AI應用，DeepPiano App從第一天起就面向全球市場，首先，音樂是全球通用的語言，全球鋼琴人口破億的量級；再者，海外軟件的商業模式也很成熟，用戶付費意愿高。

從全球來看，歐洲國家鋼琴的普及率比較高，比如，德國音樂信息中心2024年3月公布的調查報告表明，在德國有1430萬人在業余時間里從事音樂活動，其中，16歲以下者演奏最多的樂器是鋼琴，占27%，在16歲以上人群中，演奏吉他者占33%，鋼琴占27%……

目前，在全球很難找到DeepPiano App的直接競品，大部分音樂軟件是針對零基礎初學者，且多針對樂理學習。比如多鄰國也推出了音樂課，用戶可以通過屏幕上的虛擬鍵盤觀看示范和練習彈奏，適合初學者。

夏雨認為，DeepPiano 所做的事情垂直而精準，能夠真正解決深度用戶群體長期未被滿足的痛點，這對于現階段的AI大模型在產業應用方面，具有非常積極的商業意義。

02

如何解決鋼琴學習、演奏及創作的痛點？

鋼琴演奏有著百余年歷史，但是，一直以來都比較傳統，存在諸多的痛點，比如琴譜大多是紙質的，且在演奏中還需要一名助手手動翻譜……

不論對于琴童學琴還是對于大師演奏，翻譜都是一個挑戰，雖然也有了電子琴譜，但是也需要放在閱讀器中，然后也需要手指滑動翻頁。

對此，DeepPiano App創立了AI音樂圖書館，將百萬曲譜裝進iPad，通過優化排版，還原紙質曲譜的質感和讀譜體驗。

（曲譜庫首頁）

DeepPiano App基于AI大模型推出的“AI自動翻譜”功能，可以根據演奏進度智能跳轉頁面。

（曲譜頁）

針對用戶“彈得不夠好不敢分享”的心理，DeepPiano App推出了“AI音頻美顏”功能。通過算法修復錯音、調整節奏，同時保留演奏者的情感處理，生成接近CD品質的音頻。這一功能如同音樂界的“美圖秀秀”，既滿足了社交需求，也減輕了技術瑕疵和對藝術表達的干擾。

（DeepPiano App “AI音頻美顏”功能）

針對練琴的愛好者出錯了不知道怎么改正的問題，DeepPiano App還有“AI教學評測”功能，實時演奏錯誤提示，還給出了和曲譜同步的大師音頻示范，對于鋼琴愛好者來說就像一個隨身攜帶的音樂助教。

除了學琴、練琴、演奏場景，DeepPiano App還延伸至音樂創作場景，推出“AI音樂創作”功能。

傳統作曲需要在軟件上手動拖拽音符，效率比較低。DeepPiano App的AI創作工具允許用戶即興演奏，自動生成五線譜，甚至能識別演奏意圖，修正即興中的小失誤。對于音樂創作者而言，相當于從“手寫時代”跨入“智能輸入”。

DeepPiano App的競爭力不僅在于功能設計，更在于其底層技術。團隊自主研發的AI模型并非對通用大模型的簡單微調，而是基于鋼琴領域的私有數據從頭訓練。

“音樂領域的專業模型必須懂樂理、懂演奏，甚至懂情感處理。”夏雨解釋道。例如，曲譜與音頻的毫秒級同步、復雜場景下的錯音識別（準確率較傳統方案提升10倍），均依賴團隊多年積累的垂直算法。

DeepPiano App功能都是針對專業深度領域的，如果沒有相關積累、則研發門檻會很高。比如“AI自動翻譜”和“AI教學評測”的挑戰在于精確度，比如不僅可以顯示彈奏音符的對錯，還有彈奏音調的強弱都有標注，以及實現了大師音頻示范與曲譜同步。DeepPiano App這些都是通過自研算法和大模型實現的。

在夏雨看來，DeepPiano App的價值，在于用技術消除機械重復的負擔，讓人更專注于音樂本身的情感與創造力。

03

“表演行業永遠不會被AI取代”

夏雨向多知分析稱：“表演行業永遠不會被AI取代。”在他看來，“AI+音樂”是一個大有可為的領域行業。

DeepPiano App已啟動全球推廣，希望計劃通過與音樂學院、演奏大師合作，以專業場景為切口打開市場。例如，匈牙利李斯特音樂學院院長已成為產品推薦人，后續將共同開展全球巡演。

下一步，團隊將探索“AI音樂”和教學場景的深度融合，例如為教師提供課堂分析工具，甚至正在洽談與鋼琴廠商合作，在傳統鋼琴中內置AI模塊。

夏雨透露，智曲科技首先專注于鋼琴領域。

可以看到，盡管智曲科技暫不拓展至其他樂器領域，但技術框架已具備延展性。

對于夏雨本人而言，從CTO到創始人、CEO，角色的轉變，意味著有更多的職責。正如夏雨說的“創業就是在解決各種bug，就跟寫程序一樣，每天都有各種小卡點，CEO既是架構師、也是救火隊員”。

這一波創業者大多都組建了精干的團隊，以小團隊規模運轉。在夏雨看來，創業需要關注的是成本控制，其實之前也有很多教育公司在成本控制上做得不錯，比如以色列音樂教育公司JoyTunes(旗下有學鋼琴的App Simply Piano 和學吉他的App Simply Guitar)，2020年營收超過1億美元，但當時才200多名員工。

AI正悄然改變著傳統行業的每一個角落，有著百余年歷史的鋼琴行業如今也迎來了它的新一輪AI數字革命，DeepPiano App可以說是AI落地垂直領域的一個最新嘗試。

作者：王上

一本書洞察教育行業全貌，《教育科技這一年：教育+AI新紀元》火熱銷售中從業者必入，點擊小程序購買?

掃碼加入多知新書交流群，共同探討教育+AI的未來