|换天造物，秒变科幻大片！华人学者推出视频修复AI新玩法
本文插图
作者 | 贝爽
AI修图到底有多强？
前几日 ， Adobe Max 大会刚刚结束 ， Photoshop 2021版便登上了国外各大媒体版面 。
其原因是 ， 新版Ps工具中内置了AI驱动工具 ， 诸如“天空置换”等高难度修图问题 ， 现在点点鼠标就可以轻松实现 ， 而且效果远超手动操作 。
无论是拍人拍景或是其他 ， “天空”都可以说是摄像中的关键元素 。 比如 ， 一张平平无奇的景色图加上落日余晖的天空色调 ， 是不是有内味了？
本文插图
对于短视频爱好者来说 ， 如果也能达到如此处理效果岂不是更佳？
没错 ， 今天小编就是要给大家介绍一款基于原生视频的AI处理方法 ， 不仅可以一键切置换天空背景 ， 还可以打造任意“天空之城” 。
1 AI视频修复新玩法
这项AI处理方法来自密歇根大学的一位华人博士后的最新研究 。 该方法基于视觉技术可一键调整视频中的天空背景和天气转换 。
比如 ， 《星际迷航》等科幻电影中经常出现的浩瀚星空、宇宙飞船 ， 也可以利用这项技术融入随手拍的视频中 。
本文插图
公路片秒变科幻片 ， 画面毫无违和感 。
视频中的蓝色的天空背景也随飞船变成了灰蒙蒙的色调 ， 一种世界末日的即视感有木有？
本文插图
当然它的玩法还不止如此 。
动漫迷也可以创建自己的移动城堡 。 喜欢《天空之城》《哈尔的移动城堡》的朋友应该对这一幕应该非常熟悉 。
本文插图
又或者在视频中挂一个超级月亮 ， 又是另一番景象 。
本文插图
好像只要脑洞够大 ， 利用这项AI技术 ， 视频创作就有无限种玩法 。
另外 ， 它还具备天气转换的功能 ， 比如晴空万里、阴雨绵绵、雷雨交加等各种天气都可以在视频中随意切换 。
本文插图
本文插图
喜欢玩Vlog的朋友听着是不是非常心动了？研究人员表示 ， 现在已经在考虑将其制作成插件/脚本的形式 ， 方便相关从业者或行业使用 。
在此之前 ， 这项技术的AI代码已经在Github开源 ， 懂技术的朋友可以优先安装体验了~
本文插图
Github地址：https://github.com/jiupinjia/SkyAR
2 技术原理
不同于传统研究 ， 研究人员提出了一种完全基于视觉的解决方案 。 它的好处就是可以处理非静态图像 ， 同时不受拍摄设备的限制 ， 也不需要用户交互 ， 可以处理在线或离线视频 。
上述实验视频 ， 均是通过手持智能手机和行车记录仪在野外拍摄的 。 经过该方法处理后 ， 其在视频质量、运动动态、照明转换方面都达到了较高的保真度 。 比如在浮动城堡 ， 超级月亮样例中 ， 使用单个NVIDIA Titan XP GPU卡 ， 该方法可以在输出分辨率为640 x 320时达到24 fps的实时处理速度 ， 在854 x 480时达到接近15 fps的实时处理速度 。
推荐阅读
- 中关村在线|苹果设计师看完自愧不如 十几元让MagSafe秒变磁吸支架
- 晓庆泛论|店宝宝：“尾款人”秒变“收件人”
- 中关村在线|手机贴张纸 信号1格秒变3格？智商又被收割了
- 光明网|十来天就赚上千万？投资秒变“杀猪盘”！这波股民被一帮95后当“韭菜”收割了
- |“尾款人”秒变“收货人”背后：“科技＋服务”助推物流速度
- |国产掌上显微相机！1000倍放大无压力，让手机秒变专业显微镜
- 机大婶数码|手机秒变Switch，只需一步，手机变掌机手柄：小鸡X2体验
- |建造自己的「天空之城」，这项研究可以虚空造物、偷天换日
- 中关村在线|老罗的美梦成真了！手机秒变笔记本 只需8299元
- 功能|韩国大宇多功能料理锅评测：一锅多用，小白秒变大厨