江苏龙网

  1. 首页 > 资讯 > 科技 > >

|智能影像，从“芯”开始 ：紫光展锐“硬件+算法”打造超凡视听体验

C114讯 11月10日消息（林想）本周 ， 以“象由芯生·科技服务人民”为主题的2020紫光展锐市场峰会重磅开启 ， 广大生态合作伙伴共聚一堂 ， 共话数字世界新未来 。
在今天举办的“多媒体技术研讨会”上 ， 来自紫光展锐产业链的合作伙伴将分享有关多媒体发展趋势、图像优化 ， 手机拍照、AI与多媒体技术融合方面的最新技术及应用 。
智能影像 ， 从“芯”开始
亚里士多德将人体的感官分为5种 ， 即触觉、嗅觉、味觉、听觉和视觉 。人类感知世界人类感知世界80%以上来自视觉 。随着技术的不断发展 ， 相机可以还原人眼 ， 记录更多的场景 。
随着手机终端的不断演进 ， 在影响功能变得日渐强大 ， 手机拍照已经成为人们记录生活的最佳方式之一 。在手机拍照方面 ， ISP（图像信号处理器）是拍照颜值担当、CPU、GPU是性能担当、NPU是智慧担当 ， Modem则是外交担当 。
|智能影像，从“芯”开始 ：紫光展锐“硬件+算法”打造超凡视听体验
文章图片

文章图片

“ISP性能会直接影响到手机拍照、摄像水准 。”紫光展锐先进多媒体实验室主任赵磊表示 ， 移动端设备从本世纪初开始逐渐兴起 ， 其拍照功能也是愈发完善 。在 2010 年后 ， 手机拍照迎来了技术发展的一次爆发 。在这一过程中 ， 智能手机强大的硬件为手机中内置的ISP系统提供了巨大支持 。
但ISP并不是万能的 ， AI技术的迅猛发展给相机带来了新的机遇 ， 于是人工智能被广泛应用到智能影像 。从目前来看 ， AI引入到智能影响可以分为三个阶段：
阶段一 ， 图像理解->高层视觉（high level vision） ， 对图像分析得到场景的语义表示 ， 具有人眼和人脑的能力；阶段二 ， 图像分析->中层视觉（middle level vision） ， 对图像的内容进行分析 ， 提取有意义的特征 ， 便于后续更高层的处理；阶段三：图像处理->低层视觉（low level vision） ， 对输入的图像做某种变换 ， 输出仍然是图像 ， 基本不涉及或者很少涉及图像内容的分析 。
现在图像处理技术已经全面AI化了 。那么手机上又将如何用AI呢？
对此 ， 赵磊指出 ， 借助CPU/NPU/DSP/GPU的计算能力 ， ISP芯片告别裸奔走向组合模式 。据悉 ， 紫光展锐推出的UNISOC T7520芯片组 ， 在降低功耗的同时实现了优化的5G体验 ， 而且通过大幅增强的AI计算和多媒体成像处理能力 ， 大幅提升用户的手机拍照体验 。
硬件+强大算法成就超凡影像
数据显示 ， 2014-2019年全球平均每部手机摄像头数量逐年增长 ， 2019年的手机机型里面高摄头大部分都已经大于3 。多摄给手机用户提供了很多酷炫的拍照功能 ， 比如说景深虚化以及前摄的自拍 ， 同时还有超广角、超微距、这都是手机厂商重点宣传的功能 。
|智能影像，从“芯”开始 ：紫光展锐“硬件+算法”打造超凡视听体验
文章图片

文章图片

“Bokeh可以实现单反大光圈效果 ， 非焦点部分产生模糊的美学质量 。”紫光展锐游瑞荣表示 ， 手机实现Bokeh有单摄、多摄、深度相机三种解决方案 。目前的Bokeh解决方案在深度计算和虚化算法存在难点 。为此 ， 紫光展锐加入硬件特性和AI来提升整个算法效果 。
【|智能影像，从“芯”开始 ：紫光展锐“硬件+算法”打造超凡视听体验】游瑞荣指出 ， 与竞品相比 ， 紫光展锐虎贲T618在Bokeh算法方面 ， AI加速性能更优 ， 功耗也更低 。未来的发展一定是AI芯片算力能力越来越强 ， 同时结合硬件的性能 ， 让整个系统发挥更大的作用 ， 更好地提升拍照质量 。
“暗光对手机成像带来极大挑战 ， 增大传感器尺寸 ， 延长曝光时间、外加光源和更换color filter并不能完全解决这一痛点 。”紫光展锐王微指出 ， 在去噪算法方面 ， 传统与AI方式各有利弊 。AI去噪几乎不需要调参 ， 能较好的兼顾噪声去除与细节保留 ， 覆盖场景广 ， 能较好的应对复杂场景 ， 但对手机性能要求高 ， 效果不可控 。


推荐阅读


上一篇：行业互联网|叶顺舟：智能音频无限未来，展锐之声与你共鸣

下一篇：云计算|每秒 58.3 万笔！阿里云扛住全球最大规模流量洪峰，体验如丝般顺滑