文章图片

最后 ， 高通还和谷歌合作 ， 将神经网络架构搜索（NAS）引入骁龙平台 ， 并集成进第 7 代高通 AI Engine 。 NAS 研究可以将要使用的硬件以及其他设计参数以帮助工程师快速实现最优设计 ， 自动设计神经网络模型 。 从根本上绘制硬件蓝图并利用 AI 充分发挥那些特性以产生最优结果 。 此外 ， 它能够考虑时延、网络规模或精度等目标 ， 将初始网络作为起点并全面搜索优化网络以便在该硬件上针对性约束内运行得更快 。
五、Spectra ISP ， 18-bit ， 三管齐下
和前面 Kryo CPU 以及 Adreno GPU 一样 ， 骁龙 8 上的 ISP 也将名称简化为 Spectra ISP 。
1、18-bit
今年骁龙 8 移动平台上的 Spectra ISP 拥有重要突破 ， 它是高通 Spectra 系列中首个支持 18-bit 的 ISP ， 也是首个支持 18-bit ISP 的智能手机 ISP 。 18-bit 技术超越了许多专业相机的配置 ， 影响数据项相比之前提升达 4096 倍 。

文章图片


文章图片

18-bit 为影像表现带来的 ， 不仅是色彩丰富度的大大提升 ， 动态范围也显著提高 。 它能够为画面带来额外 4 个比特动态范围 ， 将让用户能够在图像最暗和最亮的部分看到更多细节 。

文章图片

18-bit ISP 的管线能够提供更宽的数据通路 ， 甚至能够让常规的 10-bit 图像传感器变得更出色 。 例如在暗光区域进行 10-bit 长曝光 ， 通过短曝光和中曝光处理更明亮区域 ， 然后合成一幅 18-bit HDR 的精美图像 。
Spectra ISP 的强大还体现在疯狂的像素吞吐能力 ， 它能够每秒捕捉 32 亿像素, 与前代相比速度提升 19% ， 为移动端最快 。 而且他还能够用单个摄像头以 30fps 捕获 1.08 像素的画面 ， 或者三颗摄像头每颗分别以 30fps 捕获 3600 万像素的画面 。 或者 ， 按键一次在一秒内捕获 240 张 1200 万像素画面 。

文章图片

在低光环境下 ， 全新 18-bit Spectra ISP 还支持“超级多帧引擎” ， 能够捕获 30 张画面 ， 再将它们合成为一张照片 。 低光条件下拍摄的照片将具有超级锐丽度、超级丰富的色彩和超级的亮度 。

文章图片

在这个特性的加持下 ， 全新 Spectra ISP 在拍摄运动状态物体时 ， 能够在每张照片中精准地追踪每个像素细节（上一代只能捕捉 4×4 像素的细节） 。 有了这个计算视觉能力 ， Spectra ISP 能够助力终端拍出“光影流动”的效果 。

文章图片

2、融入 AI 能力
除了 18-bit ， Spectra ISP 还引入了 AI 的能力 ， 利用 AI 实现实时人脸识别 ， 即使用户的拍摄对象被部分遮挡 ， 处于侧面 ， 或戴着面具 ， 也能更准确地识别人脸 。 还有如果用户使用超广角镜头拍摄 ， 人脸显示比例较小 ， 也能够准确识别 。

文章图片

不仅如此 ， Spectra ISP 对人脸细节的识别也更加出色 ， 它采用的全新人脸特征引擎可以检测到 300 个特征点 ， 而且神经网络还针对更多的人脸特征进行训练 ， 包括眉毛、嘴唇、下颌线等 ， 因此 Spectra ISP 可以检测拍摄对象的表情 ， 从而更准确地理解情绪 。