機器學(xué)習(xí)是不是好的工具
在2019世界人工智能大會期間,AI+藝術(shù)也成了其中一個關(guān)注和討論的板塊。在TensorFlow主題論壇上,兩位獨立開發(fā)者,AI研究員黃成之(Anna Huang)、蘭州大學(xué)信息工程學(xué)院助理研究員武強,分別從AI+服飾創(chuàng)新、AI+音樂的角度分享了TensorFlow的應(yīng)用和研究成果。
據(jù)武強介紹,他們的團隊通過TensorFlow+數(shù)據(jù)+機器學(xué)習(xí),將敦煌壁畫上的飛天服飾進行收集,再結(jié)合現(xiàn)在服飾數(shù)據(jù)集,生成一些創(chuàng)新服飾,通過算法進行風(fēng)格遷移,最后進行階段性輸出。即基于TensorFlow,通過中國傳統(tǒng)文化創(chuàng)造出一個新的藝術(shù)形式。
目前,該項目已經(jīng)設(shè)計成課程在大學(xué)內(nèi)推廣。據(jù)武強介紹,未來團隊將進一步擴展敦煌的傳統(tǒng)文化數(shù)據(jù)集,并推出服飾融合創(chuàng)新相關(guān)的平臺。
而對音樂更感興趣的黃成之,則分享了如何通過機器學(xué)習(xí)幫助用戶進行音樂和藝術(shù)創(chuàng)作。黃成之和團隊開發(fā)了一款巴赫Doodle(下文簡稱為 “巴赫涂鴉”),在2019年3月21日,在巴赫生日的這一天,谷歌上線了“巴赫涂鴉”。根據(jù)谷歌的官方介紹,利用這個涂鴉,你可以隨意創(chuàng)作自己的旋律,利用人工智能,涂鴉將用巴赫的風(fēng)格來演奏你創(chuàng)作的作品。
在接受新浪科技采訪時,黃成之表示,這是一個把機器學(xué)習(xí)當(dāng)做非常好的工具去助推和加速整個文化和音樂創(chuàng)造的過程。
“我們在談到機器學(xué)習(xí)如何去助推創(chuàng)作的過程當(dāng)中,針對不一樣的人群,它是有不同的含義的?!比绻且粋€新人,想先接觸作曲狀態(tài),機器學(xué)習(xí)可以讓其有更快的方式去了解旋律。如果是有經(jīng)驗的作曲家,利用機器學(xué)習(xí)可以很快做出一個小樣,呈現(xiàn)創(chuàng)作效果,幫助其做后續(xù)調(diào)整。
不過,創(chuàng)造力是人類對于機器最大的優(yōu)勢之一,有人好奇,為什么人類會需要讓機器來幫忙做比如創(chuàng)作、作曲這些創(chuàng)造類的事情?
黃成之表示,她自己就是一個作曲家,創(chuàng)作流程一般分成兩個階段:大量想法產(chǎn)生的階段和將確定的想法表達出來的階段,而機器學(xué)習(xí)在這兩個不同的階段都會有介入,會有不一樣的作用。
比如,創(chuàng)作者沒有靈感的時候,機器學(xué)習(xí)可能會給他一些靈感啟發(fā)。而作曲過程中,有某些細(xì)節(jié)需要人類的方式去進行創(chuàng)作和調(diào)整,但有些比較大層面,像結(jié)構(gòu)化層面上的調(diào)整需要,屬于比較重復(fù)性的工作,這個時候機器學(xué)習(xí)就會發(fā)生作用了。
至于未來機器能否創(chuàng)作出完全屬于它自己的完整作品,黃成之表示,”我不會認(rèn)為未來我們希望讓機器去做出它自己的音樂作品。從我作為作曲家的角度來看,音樂其實是一個溝通和表達感情、感受的方式,所以我們要做的應(yīng)該是給創(chuàng)作者提供賦能的工具,讓他們可以更直接地、更好地去把自己的情感和感受表達出來。”
提到挑戰(zhàn),黃成之表示,在做巴赫Doodle的過程中,團隊遇到了很多挑戰(zhàn),其中數(shù)據(jù)集的問題,是第一個挑戰(zhàn)。
“因為我們只有300首巴赫的曲目來做訓(xùn)練的樣本,要學(xué)習(xí)一個作曲家的風(fēng)格,這個數(shù)據(jù)集的規(guī)模是非常小的。”為此,團隊用到了一個叫本能化、直觀化的數(shù)據(jù)采樣方式。即面對一篇樂譜,不是從頭到尾去讀這段音節(jié)、或這段旋律,而是隨機從中抽出幾塊遮蓋起來,讓機器去猜測這段旋律中空白的部分。
“如此一來,我們就將一段旋律,從不同角度、以排列組合的方式衍變成了許多段旋律,這就解決了我們這個數(shù)據(jù)集的問題?!?/p>
第二個問題,是建模的問題。黃成之透露,建模最大的挑戰(zhàn)在于“速度”,因為需要實現(xiàn)互動性——在瀏覽器網(wǎng)頁上與用戶做互動,速度非常關(guān)鍵。“我們做了很多架構(gòu)上的改進,來實現(xiàn)從40秒加速到現(xiàn)在的大約2秒。除此之外,我們還要納入很多其他方面的技術(shù)來最終實現(xiàn)AI Doodle的互動效果。”
最后,黃成之認(rèn)為,機器學(xué)習(xí)只是作曲家眾多輔助工具中的一個,可以簡化很多音樂的結(jié)構(gòu)和特點,也有很好的協(xié)同機制,但最終還是要取決于創(chuàng)作者創(chuàng)作的方式和他們在創(chuàng)作的作品。她同時表示,這些模型或許會對音樂教育有所幫助,可以讓更多人能夠擁有主動創(chuàng)作的體驗、去作曲,打開他們的興趣。
來源:新浪科技





