最近 google 将 al 人工智能技术应用到了视频主体和背景的分辨上,并且在视频达到 100fps 上的基础,还能够保证不错的自然特效体验。但目前只有少数 youtube 用户体验。
抠图换背景技术到现在已经有着几十年历史,但在通常情况下,这种工作是相当费时费力的,并且要想高效快速后期处理,还需要绿幕之类的工具辅助。例如英雄主题的好莱坞科幻大片上,绿幕大范围使用,抠图换背景也是必不可少的。但即使使用了绿幕,在人力物力上的消耗也是不少。但现在也有了好的技术,能够减少人力物力的损耗。像是配合 iphone x 等能够记录 3d 感知数据的摄像头,抠图换背景就简单的多了。
google ai 软件可以检测视频中的物体和变更背景。
不过值得一提的是google 采用的不是上面任何一种方法,而是选择通过标签图像来精心训练一个神经网络,让它去学习如何正确地在各种背景元素中分辨出面部特征,比如眼睛、头发、嘴巴等,并将这些特征识别出来,和背景区分开来。
神经网络学习的最终成果是,该公司成功开发出了一套能够跟上视频帧速、快速切换背景的系统,具备了应用到现实的基础。在常规视频的帧速为 30fps,google 在 pixel 2 上完成了40fps (iphone x更是超过了100 fps)越来越高频数视频上也得以运用。
google 在视频分离技术中运用了机器学习的方法,让 ai 走进生活变得更加的可能。