无需绿屏！适用于手机的背景替换技术已发布学术资讯

图片1.png

想更换你影片中的背景？只需要将你从影片中分离出来。谷歌工程师一直打算这么做，他们试图抛弃传统的绿屏技术，改为使用类神经网络来实现背景更换。谷歌软件工程师Valentin Bazarevsky和Andrei Tkachenka更是声称已进入“移动实时视频分割” 时代。

视频制作者都知道，一个场景的背景可以被分离为两个不同的图层。这样做可以抒发一种情绪，插入一个有趣的部件或者放大信息的冲击力。然而，这个过程是需要花费很多时间的，并且常需要在带绿屏的专业工作室中实时移除背景（色度键控技术）。

现在，新发布的背景替换技术，让使用者在手机端就可以实现背景的更换和修改。这是如何实现的呢？Bazarevsky等认为，这是一种基于机器学习利用卷积神经网络解决语意分割的技术。两位工程师介绍了适用于手机端的视频分割技术架构和机器培训程序。在开发过程中，他们始终牢记“移动端解决方案应该是轻量且快速的”。至于数据集，Bazarevsky等则标注了数以万计的图片。通过此举，他们得以捕捉到各种前景和背景设置。Grigonis说，正是通过这一数据集，研究人员教会了程序从前景中分离背景的方法。Devin Coldewey补充到：“类神经网络学会了寻找头和肩部的共同特征，之后对其进行的一系列优化工作显著降低了寻找时所需要的数据量。”

据Google研究院报道，类神经网络在移动设备上可以流畅运行，可在高像素条件下达到FPS 100+（iphone 7）或FPS 40+（Pixel 2）。

科界原创

编译：雷鑫宇审稿：阿淼编辑：张梦

来源：https://techxplore.com/news/2018-03-background-swap-technology-suitable-mobile.html