新世代合成器!Meta 發布新開源 AI 工具 AudioCraft,輸入文字就能創作出音樂與音效

Meta 在部落格中指出,AudioCraft 可以讓專業音樂家探索並創作出新作品,而無須在樂器上一一彈奏,或是幫助預算有限的獨立遊戲商用逼真的音效、環境噪音去充實虛擬的遊戲世界,小企業主也可以輕鬆地把配樂放進他們的 Instagram 影片中。
評論
Photo Credit: Meta
評論

Facebook 母公司 Meta 近日發布了一個名為 AudioCraft 的新開源 AI 工具,AudioCraft 可以讓使用者依據文本提示創作聲音,由 3 個 AI 模型組成,一共有: MusicGen、AudioGen 以及 EnCodec 三種。

MusicGen 是專為「文本轉音樂」而設計,使用 Meta 擁有或獲得使用許可的音樂來進行訓練,訓練音樂時長約 2 萬小時;AudioGen 則可依據文本描述創造出一些聲音效果,例如狗叫、喇叭聲或者木地板上的腳步聲;EnCodec 解碼器則可以讓使用者創作出的聲音更真實,減少 AI 感的同時也能減少音損,製作更高品質的音樂。

AI 領域另一位競爭對手 Google 在今年 1 月發表自家的文字轉音樂 AI 模型 MusicLM,已在 5 月開放註冊使用,該公司上傳的部分作品中,聽起來的確非常像是由人類創作的真實歌曲。今年 6 月,Meta 首次開源自家文字轉音樂 AI MusicGen 時,被認為是瞄準 MusicLM 而來,其生成音樂的結果也與 MusicLM 相當。

「AI 生成音樂」已經在全球引發熱烈討論,包括先前藉由歌手 Drake 和 The Weeknd 聲音生成的 AI 歌曲《Heart on My Sleeve》在網路上爆紅,華語歌曲中也有「AI 孫燕姿」的例子,歌手陳珊妮甚至讓 AI 使用自己的聲音,創作出單曲作品,這些例子都已讓 AI 生成音樂一事走入大眾眼簾。

Meta 在部落格中指出,AudioCraft 可以讓專業音樂家探索並創作出新作品,而無須在樂器上一一彈奏,或是幫助預算有限的獨立遊戲商用逼真的音效、環境噪音去充實虛擬的遊戲世界,小企業主也可以輕鬆地把配樂放進他們的 Instagram 影片中。

該公司也坦承,要建立這種能製作音樂的 AI 模型相當困難,因為音檔通常包含數百萬個點,模型在這些點上執行動作,而相對來說 Llama 2 等文本模型僅包含數千個點。

此外,Meta 雖在 MusicGen 訓練數據中刪除了人聲,以避免複製到歌手的聲音,但該公司同時坦承, AudioCraft 有可能被拿來深偽一個人的聲音。

這些似乎都沒有阻止 Meta 對這類文字轉音樂的 AI 模型懷抱更偉大的願景,在部落格中,Meta 寫道,「透過更多的控制,我們認為 MusicGen 可以變成一種新型樂器,就像合成器(synthesizers)第一次出現那樣。」

下一首在網路上爆紅的流行歌曲,將是由 MusicGen 一類的 AI 工具所創作的嗎?

參考資料:The Verge、TechCrunchMeta AI

核稿編輯:Chris

加入 INSIDE 會員,獨享 INSIDE 最精采每日趨勢電子報,未來還有會員專屬內容。 點擊立刻成為會員

延伸閱讀:

最新發展:


2023 資安產業日:新秀育成、跨域合作,資安培育基地在沙崙

11 月 24 日,數位發展部數位產業署於沙崙資安服務基地舉辦「2023 資安產業日」,結合產業研討、資安講堂、企業攤位展示以及互動遊戲等形式,創造資安產業與產業資安交流媒合的舞台,匯聚產官學研等領域,打開臺灣資安新氣象。
評論
Photo Credit:數位發展部數位產業署
Photo Credit:數位發展部數位產業署
評論

疫情後,全球數位化的腳步更加迅速,網路惡意攻擊形式也不斷翻新,對臺灣造成許多資安威脅。因此,政府將資安產業列為國家重要產業之一,2021 年底於臺南沙崙啟用的「ACW SOUTH 數位產業署沙崙資安服務基地」(下稱沙崙基地),就以推動資安產業發展、提升產業資安防護能量、推動產業資安、創造資安跨域合作為核心使命,積極推動人才育成、驗測實證產業技術、跨域合作等計畫,打造臺灣指標性的資安場域。

啟用至今,沙崙基地已培育超過 2300 人次的資安人才、已開發 23 套攻防演練劇本,並協助 23 家次廠商完成 33 項次資安產品驗測。為進一步凝聚臺灣資安產業,上週五(11/24)數位發展部數位產業署於沙崙基地舉辦「2023 資安產業日」,結合產業研討、資安講堂、企業攤位展示以及互動遊戲等形式,創造資安產業與產業資安交流媒合的舞台,匯聚產官學研等領域,打開臺灣資安新氣象。

2023 資安產業日盛大開幕:臺廠深耕、國際肯定,見證臺灣資安領先全球

今年資安產業日聚焦於臺灣IT(資訊科技)、OT(營運技術)領域的資安研發、供應鏈聯防、產品驗測及人才培訓等亮點成果。數產署也在開幕儀式中加入巧思,展現各界深耕資安技術、提升產業資安韌性的歷程,並透過授贈資安新秀榮譽獎狀,凸顯沙崙基地攜手產業共育新秀的不遺餘力。此外,為了促進資安產業與產業資安進一步的交流與對話,也邀集資安領域專家,分享 AI 協防、公私協力及 CMMC 等最新資安趨勢;並於主會場中透過 23 家攤位展示,構築產官學研之間的交流平台,促進研發技術及創新服務的產業能量流動。

開幕式的成果短講中,榮獲 2023 年全球百大科技研發獎 R&D 100 Awards 的代表黃鼎傑組長表示「工控資安近年來逐漸受到產業重視,ICSentry 工控資安威脅分析平台榮獲 R&D 100 Awards 的肯定,代表臺灣資安創新研發能量受到國際的注目與肯定。」對所有為資安產業奉獻心力的人來說,這座獎項是國際對臺灣資安研發能量的肯定,也鼓舞了在資安道路上持續努力前行的產業夥伴。綜觀今年臺灣資安的成果,數位發展署林俊秀副署長讚嘆,「臺灣資安真的是十年磨一劍。如今能夠收穫如此亮眼的成果,都是奠基於許多人多年來的共同努力,才終於走到今日這一步,真正把臺灣資安發揚光大。」

為產業注入新活力:業師領銜、接軌產業,從理論到實務的新秀實戰

不過,資安產業若要持續發展,帶來更多的創新技術及服務,後進的人才培育絕對是不可或缺的關鍵。因此,今年沙崙基地也延續去年沙崙資安新秀大賽「育才」的核心精神,辦理「2023 沙崙資安新秀媒合培育計畫」,攜手產業師資,幫助對資安領域有熱忱、有興趣的新秀們找到學習的環境與資源,更上一層樓。

開幕式中,數位發展部唐鳳部長也蒞臨現場,親自頒贈今年度入選參與資安新秀媒合培育計畫的企業與同學們榮譽獎狀。授贈前,唐鳳部長也在致詞中肯定「企業出專題,學生來解題」的媒合模式。資安新秀代表陳躍心同學表示,計畫過程最特別的是接受業界導師的專業指導,不僅加深他們對資安理解,也在過程中體會到理論學習和產業實務的差異,對未來的課業學習及職涯發展都影響深遠。下午時段的新秀快講活動中,新秀們更充分展現對於資安領域的熱情、以及對業師輔導的感謝與肯定。

開幕式結束後,新秀們在「Testbed 資安應用多元展區」展出此次的專題成果,同時亦將想傳達給大眾的計畫成果資訊,透過有趣的闖關遊戲進行推廣;除此之外,現場還有「新秀成果導覽活動」,由專人詳盡地介紹沙崙計畫的發展脈絡與成果亮點,並帶領觀眾逐關導覽,深入認識不同新秀隊伍在培訓過程的點點滴滴:例如來自長庚大學資管系的「什麼時候要吃藏壽司」隊,運用叡揚資訊提供的培訓平台及漏洞檢測工具,開發出具備安全框架的「智慧安全會議室管理系統」;以及跨校組隊的「吃飯皇帝大_白飯北科大」隊,透過菱鏡提供的硬體設備進行實作,進行資安攻擊的觀測與分析,並且在專題期間偵測到一起真實的 DDos 攻擊。

Photo Credit:數位發展部數位產業署

有趣的是,分享過程中新秀們不約而同的表示,參與計畫最大的收穫是他們從一次次的挫折與困難中,領悟到實作與理論的差距。而當自己從單純解題、答題的「解題者」,進階為找到問題、解決問題的「出題者」後,他們對資安領域也產生更多熱情。另一方面,參與育才的企業導師也相當肯定新秀們的認真,他們學習過程的衝勁和態度,就是成功解題的關鍵,也期待未來沙崙基地的人才培育計畫能夠更大、更廣,為臺灣資安產業注入更多活水。

新秀人培 x 產業對話:臺灣資安的關鍵節點

開幕式時,唐鳳部長曾提到,「數位部為了彌平『資安產業』和『產業資安』的距離,長期致力於推動各項資安計畫,以期未來新的服務或需求出現時,雙方能在毫無知識隔閡的狀態下連結,最大化技術迭代的速度。」而 ACW SOUTH 數位產業署沙崙資安服務基地就是兩者交會的關鍵節點,不只培訓更多產業資安人才,同時挖掘更多潛在的新秀投入資安產業,也促成臺灣各界企業的相互交流,啟發越來越多的正向循環。也期許未來在數位發展部數位產業署的帶領下,沙崙基地能匯聚更多資安人才,凝聚產業資安能量,攜手產官學研朝更靈活、多元的資安未來邁進。

(數位發展部數位產業署廣告)