資料科學家與軟體工程師的音樂競賽— AI Song Contest 2020



 顧長芸
2020年09月16日

由荷蘭公共廣播公司VPRO主辦的國際AI Song Contest 2020,已於5月13日揭曉,由澳洲隊伍Uncanny Valley獲得冠軍。遵循歷史悠久的歐洲Song Contest(Eurovision Song Contest)規則,AI Song Contest的參賽者,限定須工作於歐洲或工作於隸屬歐洲廣播聯盟的國家(Eurovision affiliated countries),本屆有8個國家共13支隊伍參賽,包括資料科學家、軟體設計師、音樂家、藝術家等具有不同背景的專業人士參與。

AI Song Contest主要鼓勵使用機器學習(machine learning)、自然語言處理(natural language processing)、神經網絡(neural networks)與深度學習(deep learning)等技術,創造一段3分鐘以內的音樂,也就是包括歌曲(melody)、和聲(harmonies)、歌詞(lyrics)與聲音(audio),都需由AI構成。演算法模型可以是現有模型或自行設計皆可,而訓練AI的音樂資料則未有特殊限制。

基於主辦單位VPRO期望音樂在盡可能使用AI的同時、也同樣能受到大眾的喜愛,AI Song Contest評分是由AI專家小組(AI panel of experts)與國際觀眾投票兩部份各佔一半,分別進行評選。AI專家小組三位成員包括具有音樂資訊檢索(Music Information Retrieval)專長、任職於RTL Netherlands公司(AI Multimedia Project)的V. Koops;具有媒體藝術與科學背景、曾以AI Resident身分參與Magenta Project(Google Brain)研究音樂生成模型的A. Huang;以及AI音樂作曲公司Jukedeck創辦人、目前任職於ByteDance(AI Lab)的E. Newton-Rex。AI專家小組評分項目包括資料如何使用,歌曲結構是否有趣,AI如何產生出歌曲、和聲、歌詞與聲音等部分,而這些項目則記錄在各隊提供的流程設計文件內。

如同法學界要求透明性(transparency)以解決Al黑箱(black box)的問題,AI Song Contest也要求各團隊AI生成音樂的程序,必須透明公開。各隊必須提供流程設計文件,說明他們使用的系統與程序內容,包括AI模型如何運作以及使用了哪些訓練資料;並且,也希望團隊可以公開分享其演算法、模型(models)與程式碼(codes)等內容。而法學界所關心的演算法與人為介入(human intervention)問題,AI Song Contest則聲明其並非反人類(anti-human)立場,但AI Song Contest希望盡可能的使用AI所產生音樂內容,過多的人類參與,將會被AI專家小組扣分。

不過,就現實技術層面而言,AI雖然可以即時產出上千種音樂概念(music idea),但如專家小組A. Huang指出,「不是所有AI輸出的片段都可以拿來使用」,至少就現階段而言,尚須透過人為挑選並組成人類所稱之「音樂」;並如專家小組V. Koop所述「從未看過人類藝術的系統,不可能產生出人類會感興趣的藝術」,AI於現今藝術創作階段,尚須由人類為其指引方向。如AI音樂專家所述,在短時間之內,至少在音樂領域,我們似乎暫時不用擔心AI作品在藝術性上有取代人類作品的可能性。

最後,附上AISong Contest的兩隊曲目與創作理念,節錄如下:

AI Song Contest 2020第一名作品:Beautiful the World(Australia)

澳洲隊伍Uncanny Valley以作品「Beautiful the World」,於AI專家小組(10分)及觀眾投票(9.8分)總和,贏得本屆冠軍。為紀念於澳洲森林大火中消失的野生動物,並傳達自然將得以成功復原的希望,Uncanny Valley在最後錄製時,加入以澳洲無尾熊、笑翠鳥(Kookaburra)及袋獾(Tasmania devils)作為AI訓練資料所產生出的音效。並且,為表達人類在AI音樂生產所扮演的重要角色,歌曲與歌詞為由AI產生,但採用真人製作人與歌手呈現AI歌曲。

音樂連結: https://www.vprobroadcast.com/titles/ai-songcontest.html

AI專家小組評價滿分作品:I’ll Marry You, Punk Come(Germany)

德國隊伍Databots X Portrait XO以作品「I’ll Marry You, Punk Come」取得AI專家小組滿分(12分)。該隊以50年代的無伴奏合唱(a capellas)訓練語音合成系統SampleRNN,並從系統產生出的無意義音調中,企圖識別出其中的意義與字詞,而題目與歌詞故事便是如此產生:在嚴重幻想性錯覺(paraidolia)疾病的流行下,揭露人類最偉大的夢想與最深的恐懼—人類女孩愛上了AI男孩。其餘歌詞使用假新聞製造器、歌聲合成器、死亡金屬音樂歌詞等產生。歌曲則使用MusicAutobot及 Coconet產生合唱並以巴洛克式風格重調和聲。最終版本使用七種神經網絡並主要由AI產生歌詞、聲音與歌曲。

音樂連結: https://www.vprobroadcast.com/titles/ai-songcontest.html


Photo by Franck V. on Unsplash

資料來源

  • AI Song Contest, VPRO.(https://www.vprobroadcast.com/titles/ai-songcontest.html
  • Bot the Heck? Australia Enters AI Eurovision Song Contest. (Laura Smith, May 1, 2020, Aussievision.net)
  • Artificial Intelligence Takes on Song-composing Duties in Eurovision-inspired Contest. (Rodrigo Pérez Ortega, Apr. 24, 2020, ScienceMeg.org)
  • Aussie team to compete in Eurovision-style Song Contest. (By Staff Writer of The Music Network, Apr. 19, 2020, The Music Network)
  • Artificial Intelligence Enters Eurovision Song Contest(Audio).(Jennifer Scherer, Rachel Cary, Michelle Rimmer. Undated, SBS News.au)
  • Forget Eurovision: Europe Now Has an AI Song Contest Too. (Stuart Dredge, Jan. 28, 2020, Musically.com)
  • AI Alternative to Eurovision will Shatter Disbelief Around Technology. (By Press Association, Apr. 10, 2020, EveningExpress.co.uk)

延伸閱讀


作者

顧長芸 中央研究院法律學研究所
本研究感謝「資料安全研發及人才培育計畫」支持