迪士尼研究人員稱他們提出數(shù)學(xué)方法摳掉綠屏殘余以及使聲音和畫面聯(lián)系起來。
迪士尼研究科學(xué)家Tunç Aydin指出,在前景顏色由于運動模糊、復(fù)雜的物體邊緣(如頭發(fā))、或來自綠屏本身的一個物體上的色偏而混雜時,軟件合成工具不容易辨別綠屏。這些例子要求辛苦的修補工作。
迪士尼的方法依靠一種“顏色分離”算法,它使用一種圖像的顏色模式提取分層的多種顏色。此模式通過一種界面形成,在此界面中,藝術(shù)家在不同的顏色上涂抹。該算法拾取顏色,計算每個區(qū)域的底層顏色和混雜比。這些顏色的一部分然后被用于產(chǎn)生最終的摳像結(jié)果。
這種方法要求十分之一的人工處理時間,還能適用于非綠屏背景。
在聲音方面,迪士尼研究人員提出了一種人工智能版的“See ‘n Say”(看和說,一款響聲玩具)。
例如,描寫一輛汽車,他們的系統(tǒng)能夠自動返回汽車發(fā)動機的聲音。一個能夠辨別汽車、玻璃打碎或敲門聲的系統(tǒng)可被用于多種應(yīng)用,如聲音效果或視覺障礙人士的音頻反饋。
研究人員接收帶音軌的視頻,過濾掉外來或不相關(guān)的聲音,研制出一種聲音—對象的關(guān)聯(lián)算法。