谷歌|Google自研芯片启示录:不为跑分 只为打磨体验( 二 )


自那之后,Google 每年在介绍 Pixel 新机在影像功能上的重点时,重点都只有一个 —— 计算摄影:从 Pixel 2/3 依靠单摄实现的「人像模糊」、Pixel 4 时代的「天文摄影模式」,到 Pixel 5 能给人像照片后期手动补光的「人像光」,每一次 Pixel 相机加入新功能,都是 Google 在计算摄影领域的一次新突破 。
谷歌|Google自研芯片启示录:不为跑分 只为打磨体验
文章图片
但仅凭计算摄影的算法进化,开发团队还是很快碰到了几乎难以逾越的硬件天花板:虽然 Google 能通过计算摄影算法让四代 Pixel 在同样主摄传感器下每年都能有新提升,但同样的「魔法」却不能直接套用在视频拍摄部分上:因为手机端较弱的算力,无法支持借助机器学习实现的曝光堆叠算法在视频拍摄下同样使用 。这也是过往使用高通 SoC 的 Pixel 手机视频拍摄质量并不算太优秀的原因 。
而到 Google Tensor 的硬件上,Pixel 团队终于可以在针对性的定制硬件上来运行更多计算摄影所能实现的效果:作为本次新视频录制算法 —— HDRNet 的一部分,Google 通过在 Tensor 中整合的计算单元,不仅实现了在 4K60FPS 视频录制时应用 HDR 效果,还解决了视频拍摄过程发热严重的问题:以往只能拍摄 4-5 分钟,到 Pixel 6 系列上则可以至少拍摄 20 分钟 。
谷歌|Google自研芯片启示录:不为跑分 只为打磨体验
文章图片
终极解决方案
其实在 Google Tensor 之前,Google 在给智能手机设计芯片这件事上,也走过类似当前小米/vivo 的阶段:如今负责研发 Tensor 的团队,其实早已在之前的 Pixel 手机中以加入协处理器的方式,来针对性提升手机某一部分的效能 。
比如 Pixel 2/3 时代用于提升计算摄影/HDR+ 算法处理速度的 Pixel Visual Core、Pixel 4 上的迭代版 Pixel Neural Core,以及贯穿始终的 Titan M 系列安全芯片,都是 Google 在涉足 SoC 芯片之前的尝试,到 Google Tensor 最终得以在 Pixel 6 系列上实际应用,这些原本都需要占用额外主板空间的协处理器,都能以一种更加高效的方式进一步整合进 SoC 之中 。
谷歌|Google自研芯片启示录:不为跑分 只为打磨体验
文章图片
过去,在 Pixel 5 中加入「环境光」功能之后,Google 就已经在技术博客中吐槽「让手机算力支持实现照片后期所需的算力,是一件很头疼的事」,Google 不得不重新训练模型,让补光算法能在搭载高通骁龙 765G 的 Pixel 5 上正常使用 。
不只是算力不足,在 Google 开发团队眼中,现有 Pixel 手机一直使用的高通骁龙 SoC,从架构到功能,都不足以满足 Pixel 各种 AI 应用场景的使用需求,可以说是「积怨已久」 。
同理,随着量身定制的硬件提升 Pixel 6 上也加入了很多 AI 带来的效率提升:比如 Pixel 6 中识别准确率与速度都有大幅提升的离线语言转文字功能,就是 Google 借助机器学习,将已经构建完毕的语音识别模型预制在手机内存中,使用 Google Tensor 内建的 TPU 模组,实现比传统算力更加高效的识别效果 ;
实时翻译功能也不再局限于翻译 App 内,被整合进更多应用中 。
谷歌|Google自研芯片启示录:不为跑分 只为打磨体验
文章图片
如今,随着计算摄影在更多手机厂商的尝试逐渐成熟,曾经困扰着 Google 的问题,也成为越来越多手机厂商的共识:为软件功能量身定制硬件,反过来进一步提升软件的运行效率,或许才是未来在手机端更现实的解决方案 。
小米与 vivo 在 ISP 芯片领域的尝试,不是为了纸面性能或跑分测试的优劣,而是为了满足各自独特的需求而定制:就像 Google 在 Tensor Chip 诞生之前为 Pixel 研发的数款协处理器一样 。
虽然定制 SoC 对于大部分手机厂商来讲仍然是极其烧钱的行为,但通过定制 ISP 等协处理器的方式,同样能打破如今智能手机体验「同质化」、连拍摄效果都要以跑分定胜负的现状,给用户带来更多不同的体验 。
只要这条路被证明行之有效,就会有越来越多的厂商效仿,加入到自研处理器的行列中 。
谷歌|Google自研芯片启示录:不为跑分 只为打磨体验
文章图片


推荐阅读