【智快網(wǎng)】11月21日消息,DeepMind最近發(fā)布了一款名為L(zhǎng)yria的音頻模型,該模型被設(shè)計(jì)用于生成帶有樂器和人聲的高品質(zhì)音樂。與此同時(shí),DeepMind還與YouTube合作,推出了一款名為Dream Track的音樂創(chuàng)作工具,旨在使視頻創(chuàng)作者更有效率地將創(chuàng)意轉(zhuǎn)化為作品。

研究人員介紹了通過AI模型生成音樂所面臨的挑戰(zhàn)。音樂本身具有極高的信息密度,每秒可能包含多個(gè)節(jié)拍、音符和和聲,因此相較于生成語(yǔ)言(文字轉(zhuǎn)語(yǔ)音),生成音樂更為復(fù)雜。維持長(zhǎng)音樂序列中的連續(xù)性對(duì)AI模型而言也更為困難,因?yàn)槟P托枰诓煌臉肪洹⒃?shī)節(jié)和長(zhǎng)段落中保持音樂的流暢性和一致性。
Lyria模型針對(duì)這些挑戰(zhàn)進(jìn)行了嘗試,最大的特點(diǎn)是能夠生成包含樂器和人聲的高品質(zhì)音樂。此外,Lyria模型還擅長(zhǎng)進(jìn)行音樂變換和延續(xù)的任務(wù),使其能夠基于現(xiàn)有音樂片段生成出風(fēng)格新穎或統(tǒng)一的后續(xù)片段。研究人員表示,Lyria模型具有細(xì)致的微調(diào)選項(xiàng),可以滿足專業(yè)音樂創(chuàng)作的需求,同時(shí)也適合業(yè)余用戶使用。

目前,Lyria模型已經(jīng)應(yīng)用在YouTube的短視頻功能"Shorts"中,并集成在YouTube的實(shí)驗(yàn)音樂創(chuàng)作工具Dream Track中。用戶可以使用Dream Track生成多樣化的配樂,并選擇藝術(shù)家的音樂風(fēng)格,如Charlie Puth、Charli XCX、Sia等,以創(chuàng)造全新演繹的作品。
據(jù)悉,在Dream Track中,用戶只需簡(jiǎn)單輸入主題,然后選擇藝術(shù)家,即可生成30秒的配樂、歌詞、伴奏等內(nèi)容。

DeepMind表示,他們正在廣泛探索AI在音樂創(chuàng)作領(lǐng)域的應(yīng)用。未來,用戶將能夠通過哼唱讓AI生成完整歌曲,將古老的MIDI音樂轉(zhuǎn)換為Remix版本,或?yàn)橐糗壧砑痈鞣N樂器伴奏。
Lyria模型生成的所有內(nèi)容都會(huì)加上SynthID水印標(biāo)記,這是一種辨識(shí)歌曲是否由AI生成的機(jī)制。研究人員表示,帶有“聲音水印”的音頻即便經(jīng)過噪音添加、MP3壓縮,甚至調(diào)整音調(diào)速度,也能維持可檢測(cè)性。Lyria模型可以通過檢測(cè)歌曲中的SynthID來確認(rèn)由Lyria模型生成的部分,從而更容易辨別音樂主題內(nèi)容,方便生成后續(xù)音樂片段。























