视频: 视频软件如何实时修改性别
从前,改变演员在电影中角色的性别或者种族需要很长时间化妆。如今,新的软件可以输入一段某人的谈话录相,处理后让这个人看起来和听上去都像另外的人。
先电影爱好者一步,心理学家把这项新技术应用到实验中,观察人的性别会如何影响其他人的身体语言。
该软件是由英国东安格利亚大学(University of East Anglia)的计算机科学家西奥博德(Barry-John Theobald)和新西兰威灵顿维塔数据公司(Weta Digital)马修(Iain Matthews)开发的。来自三所美国大学的心理学家与他们洽谈,以寻找一种办法,在进行通过视频会议软件进行交谈的实验中,改变参加实验的志愿者的外观性别。
那会儿连好莱坞都没有这样的技术。比如2000年上映的《角斗士》,奥利弗·里德(Oliver Reed)在拍摄期间去世,电影公司只好重写他的角色部分,利用里德已经拍过的镜头“表演”他的角色的死亡。虽然这样制作出的片段只有两分钟,却花了320万美元和5个人年,逐帧把这些镜头与另一个演员的脸拼合起来。
因此,有了多年的视频人脸处理经验,西奥博德和马修着手开发软件加速处理过程。
他们为多名志愿者拍摄了30种不同面部表情的录像,包括皱眉、微笑、吃惊等等,为每一种表情人工标注了眼睛、鼻子、嘴角等关键面部特征的位置。
这些标注过的数据用于训练软件识别该集合中的每个人的脸,训练完成后,软件就可以紧密跟踪录像中这些人脸的每个动作。
通过计算目标人脸的特征该如何跟随这些表情而改变,录像中人脸的动作就可以被转换到另一张事先准备的人脸上。
完成这些计算并显示转换结果只需要150毫秒,这样的速度可以维持实时的视频交谈。为了使效果逼真,声音也可以按照新的脸孔做相应修改。
印第安纳、宾州、弗吉尼亚几所大学的心理学家已经开始使用这款新软件研究身体语言和性别的关系。
志愿者们通过视频会议聊天,不过他们不知道自己看到的是不是对方真正的脸,也不知道对方是否看到自己真正的脸。
结果表明,我们的身体语言更多针对对方的身体语言,而非面貌特征而动。西奥博德说:“我们让一位女性显示为她自己的样子,或者显示成一位男性,但谈话对方的行为并不因此而改变”。这项研究成果不久将发表在《实验心理学杂志》(Journal of Experimental Psychology)上。
该团队下一步的目标是研究改变谈话者种族的效果。
从长远看,西奥博德认为电影公司可以利用这项技术,“我们所作的与当年《角斗士》采用的方法是一样的,不过我们可以做到实时处理,而且不需要人工”。目前该软件还无法处理诸如光线的变化这样的复杂条件,但西奥博德说他们可以增加这样的能力。
【本文翻译仅为外语学习及阅读目的,原文作者个人观点与译者及译言网无关】