麻省理工(MIT)电脑科学与人工智能实验室(CSAIL)最近开发出一种 AI 辅助图片编辑器“Semantic Soft Segmentation”(SSS),未来使用者在图片编辑时可以自动选择对象,不需要花时间再用编辑工具慢慢选取。
许多使用 Photoshop 的人应该都有相同的经验,为了更换背景或贴上配件,必须得花费许多时间慢慢圈选物品边界,影片制作也相同,修改者必须捕捉到前景和背景间的微妙转换,才能够让图片、影片的合成看起来不会太突兀。
CSAIL 研究员 Yagiz Aksoy 指出,处理图片棘手问题在于并非每个像素都只属于一个“对象”,在许多情况下,很难确定哪些像素是背景的一部分或是特定人物的一部分,这是因为柔和的转换会导致两个事物共享边缘周围的像素。
而 CSAIL 的 SSS 透过机器学习图片编辑过程,能自动完成许多繁琐细节,编辑器会自动将对象和背景分成不同部分以便选择;与大多数照片编辑软件的磁性套索或魔术套索工具不同,使用者不需要任何操作,AI 就可以自行运作。
当然,这些简单的操作背后涉及许多复杂的算法和运算,团队使用神经网络处理图片特征并确定图像的柔化边缘,系统会分析原始图片的纹理和颜色,并将其与神经网络收集有关图片中实际物体的讯息互相结合。
目前 SSS 还只能用于静态图片,处理上也需花费 4 分钟,一些擅长 PS 图片的专家处理上或许还能更有效率。但这项 AI 技术并不是难以实现的困难项目,应用层面也显而易见,无论照相 App 的滤镜转换或制作海报需去背,甚至延伸到电影后制环节都有可能派上用场。
团队打算持续研究并加速过程,未来让使用者只需点击一下就可简单划分图层,除此之外,团队也打算应用到影片,让未来电影制作变得更简单。
- MIT made an image editing AI that can replace the background in any image
(首图来源:MIT CSAIL)
延伸阅读:
- 麻省理工学院研发 AI 穿墙透视技术
- 修图再进化,NVIDIA 用深度学习为图片自动“填空”