又一个好玩的 P 图应用软件来袭,这个应用还来自 Google 。
Google 12 日发表 AI 影像处理应用 Storyboard(Android)。该应用可从影片自动选择有趣的片段,然后将每帧照片转换为漫画风格。目前有 6 种漫画风格可选,转换时间只需几秒。
▲ Google Storyboard。
由于是第一版,Storyboard 功能还很单薄。用户只能上传影片然后等待转出来的效果,没有办法自己选择来安排漫画内容,也没办法后制,例如加上文字、编写故事;但即使没有这些功能,Storyboard 依然很可能刷爆 Instagram、Facebook 和朋友圈。
▲ Prisma。
Storyboard 与 2016 年红爆朋友圈的 Prisma 异曲同工。
Prisma 能在十几秒内将普通照片转换成名画风格。Prisma 不仅深得用户喜欢,采用的黑科技也获得业界瞩目。Prisma 主要采用 CNN(卷积神经网络技术)将用户上传的图片分离和重新组合,再将名画风格转换到用户图片。Prisma 爆红的原因在于巧妙利用深度神经网络抽取高层图片表达的能力,而之前非深度学习的方法只能抓到目标图片低阶的图片特征,无法独立对图片的语意内容和风格变化有效地建模和合成。
然而 Prisma 好景不长,大家玩一阵就腻了。如今,Prisma 将重心移转到 B2B,为开发者提供 SDK。
但是,Prisma 引爆的图片艺术风格转换潮流却没有消退。人工智能领域引起革命的深度学习技术已将众多工作推向实用,各大巨头公司也积极布局机器视觉和影像处理领域。
Prisma 大红的 3 个月后,Google 发表了一种新的迁移网络(来自论文《A Learned Representation for Artistic Style》),同时学习多种风格的简单方法,可让单个深度卷积风格迁移网络同时学习多种艺术风格。这种方法能达成即时风格插补,不仅可用于静态影像,还可用于影片。
实际使用中,用户可用 13 种不同绘画风格,透过调整器调整这些风格的相对强度。多种风格即时结合,最后得到一个汇出。与之前快速迁移风格的方法不同,这种同时建模多种风格的方法让用户能即时与风格迁移算法互动,且可基于多个风格混合自由创造。
此次 Storyboard 想必是 Google 对此技术的应用。
Prisma 专注于西方名画,在名画风格有深度积累,Google 选择漫画风格则是另辟蹊径。从 Google 的技术积累来看,Storyboard 不久应该就能推出编辑功能,用户就可根据自己的想法建立漫画。
值得一提的是,Google 今年 8 月还收购了一家俄罗斯电脑视觉公司 AIMatter,其主要产品是影像滤镜 Fabby,最强大的功能是“去背”,将对象从背景区分出来,可快速更换背景。除了美图秀秀等图片美化编辑程式都有的降噪、化妆、脸部美容等,Fabby 还有性别辨识、脸部辨识等功能。
▲ AIMatter。
其实,Google 于 2015 年推出的 Google Photos 就应用了人工智能,其人工神经网络训练系统可搜寻海量的影像资料,辨识照片中的人和物体。Storyboard 或许也会应用到 Google Photos。
除 Google 外,Facebook 也跟进 AI 影像处理应用。2017 年 1 月,为了让你用手机拍片时,有种手持梵高画笔的奇妙感受,Facebook 首创一个全新的深度学习行动平台──Caffe2go。利用 Caffe2go,处理的照片不用再上传服务器,手机上就能进行风格转换算法,完成即时撷取、分析和处理画素特征。Prisma 的图片处理需要等十几秒,有了 Caffe2go,Facebook 可对影片即时转换风格。但从官方公布的影片来看,每帧的效果都不一样,人物也变得模糊,效果并不好。
▲ Caffe2go。
除 Storyboard 外,Google 还同时发表 Selfissimo!(iOS / Android)和 Scrubbies(iOS),这两款应用没那么黑科技,但还是有使用价值。
Selfissimo! 是一款自动拍照的应用,点击屏幕启动拍摄后,每当你摆好一个动作(静止下来),系统就会自动按下快门,可惜目前只能拍黑白照片。
Scrubbies 可透过单指、双指左右拖曳做到画面重播/快转循环。
人们拍摄、记录、编辑和分享图片的欲望无限,技术和应用的创新如何满足这些欲望让人期待。就在近几天,美图秀秀也推出了“绘画机器人”,用人工智能将普通人脸照变成漫画风格。但这个效果似乎没有 Prisma 当初那么红。
除了人工智能技术不断进步,如何找到真正有创意、有价值的应用方式,或许更重要。
(本文由 雷锋网 授权转载;首图来源:Google)
延伸阅读:
- 催生全球首位 AI 绘师 Andy,美图抢攻人工智能却面临一大挑战
- Prisma 重心移至 B2B,可能发表基于 AI 的行动效果 API
- Google 收购电脑视觉公司 AIMatter
- Facebook 向 Prisma“致敬”,开发艺术画风滤镜用于直播影片