|不限机型,手机端实时玩转3D、混合现实,快手Y-tech有黑科技( 四 )


3DPhoto
3D 照片是近两年比较热的研究方向 , 通过对单张图片进行重建 , 可以让这张图片动起来 , 产生伪 3D 的交互效果 。 其产生的玩法是沉浸式的 , 可交互的 , 可以给用户带来新颖的体验 。 快手通过单目深度估计网络对静态图片进行稠密重建 , 结合人像分割、人脸三维重建、图像背景修复等技术 , 可产生生动逼真的 3D 立体照片效果 。 利用快手 Y-tech 自研的 YCNN 推理引擎 , 所有的模型都是在用户的移动设备上运行 , 没有设备机型和数据传输能力的限制 , 可让每位快手用户都能体验到这一新奇玩法 。 目前这项功能已在快手主 APP、一甜相机等多款 APP 上线 。
景深虚化
【|不限机型,手机端实时玩转3D、混合现实,快手Y-tech有黑科技】用户在使用单反设备进行拍照时 , 可以拍出具有浅景深的大光圈照片 , 它突出了拍摄主体 , 让画面变得更富层次感 , 并将背景转化为柔美的光斑 。 这样的景深虚化功能能明确主次 , 增强画面美感 , 提升用户的拍摄质量 。 在手机上实现大光圈的效果需要有场景的深度信息 , 快手利用深度估计网络获取到的深度图后 , 结合人像分割实现了逼真的虚化效果 。 目前该功能已经在一甜相机完成上线 , 支持多种光斑形态的景深虚化以及动感和旋集等新效果 。 用户对该功能满意度很高 , 进入虚化功能到保存的渗透率高达 70% 。
快手 Y-tech 介绍
Y-tech 团队是快手公司在人工智能领域的探索者和先行者 , 致力于计算机视觉、计算机图形学、机器学习、AR/VR 等领域的技术创新和业务落地 , 不断探索新技术与新用户体验的最佳结合点 。 目前 Y-tech 在北京、深圳、杭州、Seattle、Palo Alto 有研发团队 , 大部分成员来自于国际知名公司和大学 。


推荐阅读