文章图片
文章图片
文章图片
文章图片
文章图片
文章图片
昨天 ， OPPO正式发布首款自研NPU芯片——马里亚纳MariSilicon X ， 这颗芯片采用台积电6nm工艺和DSA新黄金架构 ， 集成自研的MariNeuro AI计算单元以及MariLumi影像处理单元 ， 在设计之初就将AI和图像处理进行了融合 ， 相比传统的ISP有更高灵活性和更高性能 ， 用计算摄影突破手机影像功能的极限 。
在此之前 ， 小米和vivo也都推出过自研的ISP芯片 。 问题来了 ， 为什么现在手机厂商这么热衷于ISP的研发 ， 这个模块对成像来说到底有多重要？
简单来说 ， ISP（Image Signal Process 图像信号处理器 ， 又称成像引擎）是手机拍照/摄像流程中的核心单元之一 。 一张照片 ， 一段视频 ， 最终呈现的色彩和细节都取决于它 。
ISP所扮演的角色
当你按下手机相机APP的（虚拟）快门进行拍照或录像时 ， 就会自动进入一场“视觉处理的接力赛” 。
首先 ， 光线通过镜头进入相机模组内部 ， 经过IR Filter过滤红外光 ， 然后到达CMOS传感器 。 这个时候 ， CMOS会将光学信号转换为电信号 ， 再通过内部的ADC电路转换为数字信号 ， 然后传输给ISP进行加工处理 ， 再经历AI单元的一轮智能成像算法优化后 ， 最终才能生成肉眼可见的图片或视频文件 。
问题来了 ， 镜头和CMOS在将光学信号转化为由0、1、0、1组成的数字信号时可能存在细节上的遗漏和错误 ， 而ISP单元的主要任务就是进行“纠错”、“校验”和“补偿” 。
这就好比让你用英文翻译一段中文成语或谚语 ， 需要翻译官具备足够的文学素养 ， 才能用英语准确表达出中文语境的博大精深 。 没错 ， 此时ISP扮演的就是“翻译官”的角色 。
细数ISP的补偿任务
智能手机的镜头是由5片起步的镜片、滤光装置、马达、陀螺仪等部件构成 ， “透光率”是权衡镜头性能的重要指标 。
通常手机主摄的镜片数量要多于副摄镜片数量
CMOS更是核心部件 ， 传感器尺寸、像素值大小、RGGB或RYYB滤镜结构、单位像素面积、多像素合一技术等等都会影响它的性能 。
换句话说 ， 镜头和传感器本身都存在物理缺陷 ， 从7P→8P的镜头到IMX586→IMX700的CMOS ， 不断的迭代升级只能无限趋近完美 ， 而这就意味着经由它们转化而来的数字信号的原始数据（raw data）都是不完美的 。
【cmos|趁着OPPO发布影像专用NPU的机会 聊一聊ISP到底有啥用】CMOS传感器尺寸越大 ， 理论上其成像底蕴就越好
另一方面 ， 当我们进行拍照或视频录制时的环境光线条件多种多样 ， 需要镜头和CMOS像人眼瞳孔缩放那般适应环境明暗 。
相关经验推荐
- OPPO|不仅好看还耐用，OPPO A96历经六大测试关口，品质保障不用怕
- 天玑9000|OPPO Find X5获3C认证，最强天玑9000旗舰机型，高通仅剩一优势
- 微信|微信更新内测版，OPPO Find N支持平板模式登陆
- OPPO|A系列续航不行？OPPO A96实际体验后，结果很惊喜
- 天玑9000|全球首款天玑9000手机，OPPO Find X5终于来了！
- OPPO|鲁大师年度盛典：14个奖项，年度最受欢迎手机品牌出炉！
- OPPO|oppo跟vivo的配置其实没有小米好，高价低配是一般人，对他们的评价
- vivo|百元级TWS耳机才是高性价比之选，OPPO Enco Air实力值得认可
- OPPO|拿奖拿到手软！揽获多项“年度最佳”，OPPO Enco Free2系列稳了
- OPPO|用信号充电？OPPO公布新技术，苹果该反思了