迪士尼研究人员称他们提出数学方法抠掉绿屏残余以及使声音和画面联系起来。
迪士尼研究科学家Tunç Aydin指出,在前景颜色由于运动模糊、复杂的物体边缘(如头发)、或来自绿屏本身的一个物体上的色偏而混杂时,软件合成工具不容易辨别绿屏。这些例子要求辛苦的修补工作。
迪士尼的方法依靠一种“颜色分离”算法,它使用一种图像的颜色模式提取分层的多种颜色。此模式通过一种界面形成,在此界面中,艺术家在不同的颜色上涂抹。该算法拾取颜色,计算每个区域的底层颜色和混杂比。这些颜色的一部分然后被用于产生最终的抠像结果。
这种方法要求十分之一的人工处理时间,还能适用于非绿屏背景。
在声音方面,迪士尼研究人员提出了一种人工智能版的“See ‘n Say”(看和说,一款响声玩具)。
例如,描写一辆汽车,他们的系统能够自动返回汽车发动机的声音。一个能够辨别汽车、玻璃打碎或敲门声的系统可被用于多种应用,如声音效果或视觉障碍人士的音频反馈。
研究人员接收带音轨的视频,过滤掉外来或不相关的声音,研制出一种声音—对象的关联算法。