華文網

Adobe又出新花樣,想用AI來幫你剪視頻

一部電影是否精彩,除了看導演和演員,剪輯師的水準也至關重要,要把數倍于電影時長的素材剪輯成一部兩小時左右、引人入勝的電影要花費數周甚至數月的時間。近日,

Adobe與斯坦福大學的研究人員共同開發出了一種人工智慧程式,可以自動完成視訊短片的工作。

據研究人員介紹,該程式可以將視頻素材中所有鏡頭拍攝(包括多個角度)的畫面按照編劇的腳本進行組織,並根據需求找到指定的內容。在準確地識別出所需剪輯的內容後,

AI會通過面部情緒識別和聲音識別分析每一段素材,並逐幀對資訊進行標注,如某個鏡頭是廣角還是特寫,某個鏡頭裡包含了哪些人物等。

接下來就是最重要的剪輯環節了,研究人員在程式中預設了許多鏡頭語言的設定,剪輯師只需要把他想要的鏡頭語言輸入到系統中,AI就會自動將劇本與場景匹配。比如,導演想要傳統風格,即故事節奏不緊不慢,

角色對話你來我往,那麼剪輯師就可以選擇“用廣角鏡頭開始”這個鏡頭語言來建立故事發生的場景,再選“避免跳躍性的剪輯“來適用于傳統的電影風格,同時還可以選擇“強調某個角色”等鏡頭語言。

以一部一分多鐘的傳統風格視頻短片為例,在做好資訊識別、鏡頭標注等工作之後,

AI只需要2-3秒就能完成剪輯,剪完的成品嚴格按照劇本設定、具備傳統電影風格。而一個具有多年剪輯師需要2-3個小時。

目前,該系統僅適用於對話類的視訊短片,因為人臉和語言比較易於識別,而且AI無法識別素材中的拍攝錯誤(如穿幫)等問題。未來,研究人員將會擴大它的使用場景,以及對識別表演的好壞進行探索,現階段作為剪輯師的AI助手還是不錯的選擇。